-- 创建测试表 -- DROP TABLE FullTextIndexing CREATE TABLE FullTextIndexing ( ID INT IDENTITY(1,1) NOT NULL, Sentence VARCHAR(MAX) ) -- 创建聚集索引 ALTER TABLE FullTextIndexing ADD CONSTRAINT PK_FullTextIndexing PRIMARY KEY CLUSTERED(ID ASC) GO -- 将"全文搜索概述"页面的文字全部拷贝到txt,然后倒入到表FullTextIndexing中 -- https://msdn.microsoft.com/zh-cn/library/ms142547(v=sql.105).aspx -- 重复15次,从47行变为154万行 INSERT INTO FullTextIndexing(Sentence) SELECT Sentence FROM FullTextIndexing GO 15 SELECT COUNT(*) FROM FullTextIndexing
-- 【注】删除的语句不要执行!
-- 创建全文目录 -- https://msdn.microsoft.com/zh-cn/LIBRARY/ms189520(v=sql.105).aspx CREATE FULLTEXT CATALOG [Catalog_Test] WITH ACCENT_SENSITIVITY = ON --区分重音 AS DEFAULT --默认目录 AUTHORIZATION [dbo];--全文目录的所有者 GO -- 更改全文目录的属性 -- https://msdn.microsoft.com/zh-cn/LIBRARY/ms176095(v=sql.105).aspx ALTER FULLTEXT CATALOG [Catalog_Test] REBUILD WITH ACCENT_SENSITIVITY = ON; --重新生成整个目录并区分重音 --REORGANIZE; --重新组织全文目录 --AS DEFAULT; --指定此目录为默认目录 GO -- 从数据库中删除全文目录(先删除全文索引) -- https://msdn.microsoft.com/zh-cn/LIBRARY/ms188403(v=sql.105).aspx DROP FULLTEXT CATALOG [Catalog_Test]; GO -- 创建干扰字表 -- https://msdn.microsoft.com/zh-cn/library/cc280405(v=sql.105).aspx CREATE FULLTEXT STOPLIST [Stoplist_Test] FROM SYSTEM STOPLIST AUTHORIZATION [dbo]; GO -- 添加删除干扰字 -- https://msdn.microsoft.com/zh-cn/library/cc280871(v=sql.105).aspx ALTER FULLTEXT STOPLIST [Stoplist_Test] ADD N‘乎‘ LANGUAGE 2052; GO ALTER FULLTEXT STOPLIST [Stoplist_Test] DROP N‘乎‘ language 2052; --ALL LANGUAGE ‘English‘ --ALL GO -- 从数据库中删除全文本非索引字表 -- https://msdn.microsoft.com/zh-cn/library/cc280482(v=sql.105).aspx DROP FULLTEXT STOPLIST [Stoplist_Test]; GO -- 创建全文索引 -- https://msdn.microsoft.com/zh-cn/library/ms187317(v=sql.105).aspx CREATE FULLTEXT INDEX ON [dbo].[FullTextIndexing] (Sentence LANGUAGE 2052) --索引列,明确列中存储的语言,方便过滤 KEY INDEX PK_FullTextIndexing --全文键:当前表中唯一索引名称 ON [Catalog_Test] --指定全文目录 WITH ( STOPLIST [Stoplist_Test], --指定全文非索引字表 CHANGE_TRACKING AUTO --自动填充 ); GO -- 更改全文索引的属性 -- https://msdn.microsoft.com/zh-cn/library/ms188359(v=sql.105).aspx -- 激活全文索引 ALTER FULLTEXT INDEX ON [dbo].[FullTextIndexing] ENABLE; GO -- 删除全文索引 -- https://msdn.microsoft.com/zh-cn/library/ms184393(v=sql.105).aspx DROP FULLTEXT INDEX ON [dbo].[FullTextIndexing]; GO
-- 测试常规查询方法(先查询全部数据,放到内存:154万行31秒) SELECT * FROM FullTextIndexing SET STATISTICS IO ON SET STATISTICS TIME ON SELECT * FROM FullTextIndexing WHERE Sentence LIKE ‘%全文索引%‘ /*执行了几遍,耗时13440 毫秒 SQL Server 分析和编译时间: CPU 时间 = 0 毫秒,占用时间 = 0 毫秒。 (229376 行受影响) 表 ‘FullTextIndexing‘。扫描计数 1,逻辑读取 15633 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。 SQL Server 执行时间: CPU 时间 = 11591 毫秒,占用时间 = 13440 毫秒。 */ SELECT * FROM FullTextIndexing WHERE CHARINDEX(‘全文索引‘,Sentence)<>0 /*执行了几遍,耗时15338 毫秒 SQL Server 分析和编译时间: CPU 时间 = 0 毫秒,占用时间 = 0 毫秒。 (229376 行受影响) 表 ‘FullTextIndexing‘。扫描计数 1,逻辑读取 15633 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。 SQL Server 执行时间: CPU 时间 = 12714 毫秒,占用时间 = 15338 毫秒。 */
-- 使用全文索引的方法: SELECT * FROM [dbo].[FullTextIndexing] WHERE FREETEXT(Sentence,‘全文索引‘); /*执行了几遍,耗时17402 毫秒 SQL Server 分析和编译时间: CPU 时间 = 16 毫秒,占用时间 = 21 毫秒。 (851968 行受影响) 表 ‘FullTextIndexing‘。扫描计数 1,逻辑读取 15633 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。 SQL Server 执行时间: CPU 时间 = 2230 毫秒,占用时间 = 17402 毫秒。 */
-- 执行了17秒,不降反而上升了!!~
-- 重新生成全文目录!~再执行(更多方法有待参考:使用全文搜索查询 SQL Server) -- https://msdn.microsoft.com/zh-cn/library/ms142559(v=sql.105).aspx ALTER FULLTEXT CATALOG [Catalog_Test] REBUILD; GO SELECT * FROM [dbo].[FullTextIndexing] WHERE FREETEXT(Sentence,‘全文索引‘); SELECT * FROM [dbo].[FullTextIndexing] WHERE CONTAINS(Sentence,‘全文索引‘); SELECT * FROM [dbo].[FullTextIndexing] WHERE CONTAINS(Sentence,‘全文 AND 索引‘); /*这时快多了!~不到1秒就查询完成!~但是返回的行数才1000多行 SQL Server 分析和编译时间: CPU 时间 = 0 毫秒,占用时间 = 0 毫秒。 (8853 行受影响) 表 ‘FullTextIndexing‘。扫描计数 0,逻辑读取 27121 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。 SQL Server 执行时间: CPU 时间 = 78 毫秒,占用时间 = 944 毫秒。 */ SET STATISTICS IO OFF SET STATISTICS TIME OFF
不断地执行就会找出规律: 表扫描次数为0。 逻辑读也越来越多,耗时越来越多,查询返回的行数也越来越多,性能越来越差!~比"like"还差 最后还得重建重组(REBUILD/REORGANIZE)全文索引目录 逻辑读取 27121 次 逻辑读取 945268 次 逻辑读取 1212885 次 逻辑读取 1407846 次 逻辑读取 1736686 次 逻辑读取 1953265 次
-- 查询句词拆分结果.可以看到按什么词语进行匹配查询 select * from sys.dm_fts_parser(‘全文索引‘,2052,5,0) -- 如果只需要全文键或排名的信息,可使用表值函数 -- 使用表值函数的方法可以使用联接提示或查询提示(LOOP/MERGE/HASH) ALTER FULLTEXT CATALOG [Catalog_Test] REBUILD; GO ALTER FULLTEXT CATALOG [Catalog_Test] REORGANIZE; GO SELECT * FROM [dbo].[FullTextIndexing] t1 INNER JOIN CONTAINSTABLE([FullTextIndexing],Sentence,‘概述‘) AS t2 ON t1.ID = t2.[KEY] GO SELECT * FROM [dbo].[FullTextIndexing] t1 INNER JOIN FREETEXTTABLE([FullTextIndexing],Sentence,‘概述‘,LANGUAGE 2052,1000) AS t2 ON t1.ID = t2.[KEY] ORDER BY t2.RANK DESC; GO
-- 相关视图: select * from sys.syslanguages select * from sys.fulltext_indexes select * from sys.fulltext_catalogs where name = ‘Catalog_Test‘ select * from sys.dm_fts_active_catalogs where name = ‘Catalog_Test‘ select * from sys.fulltext_stoplists where name = ‘Stoplist_Test‘ select * from sys.fulltext_stopwords where stoplist_id = 5 --and language_id = 2052 select * from sys.dm_fts_parser(‘全文索引‘,2052,5,0)
时间: 2024-10-12 13:01:39