<MySQL学习十一>全文本搜索

摘要: 本篇博客仅作为笔记，如有侵权，请联系，立即删除（网上找博客学习，然后手记笔记，因纸质笔记不便保存，所以保存到网络笔记）。

　　本章将学习如何使用MySQL的全文本搜索功能进行高级的数据查询和选择。

　　一、理解全文本搜索

注意：并非所有引擎都支持全文本搜索  MySQL支持几种基本的数据库引擎。并非所有的引擎都支持本书所描述的全文本搜索。两个最常使用的引擎为MyISAM和InnoDB,前者支持全文本搜索，而后者不支持。这就是为什么虽然本书中创建的多数样例表使用InnoDB,而有一个样例表（productnotes表）却使用MyISAM的原因。如果你的应用中需要全文搜索功能，应该记住这一点。

　　在通配符的文章中，我们介绍了LIKE关键字，它利用通配操作符匹配文本（和部分文本）。使用LIKE，能够查找包含特殊值或部分值的行（不管这些值位于列内什么位置）。

　　在正则表达式的文章中，用基于文本的搜索作为正则表达式匹配列值的更进一步的介绍。使用正则表达式，可以编写查找所需行的非常复杂的匹配模板式。

　　虽然这些搜索机制非常有用，但存在几个重要的限制：

　　性能--通配符和正则表达式匹配通常要求MySQL尝试匹配表中所有行（而且这些搜索极少使用表索引）。因此，由于被搜索行数不断增加，这些搜索可能非常耗时。

　　明确控制--使用通配符和正则表达式匹配，很难（而且并不总是能）明确地控制匹配什么和不匹配什么。例如，指定一个词必须匹配，一个词必须不匹配，而一个词仅在第一个词确实匹配的情况下才可以匹配或者才可以不匹配。

　　智能化的结果--虽然基于通配符和正则表达式的搜索提供了非常灵活的搜索，但它们都不能提供一种只能化的选择结果的方法。例如，一个特殊词的搜索将会返回包含该词的所有行，而不区分包含单个匹配的行和包含多个匹配的行（按照可能是更好的匹配来排列它们）。类似，一个特殊次的搜索将不会找出不包含该词但包含其他相关词的行。

　　所有这些限制以及更多的限制都可以用全文搜索来解决。在使用全文本搜索时，MySQL不需要分别查看每个行，不需要分别分析和处理每个词。MySQL创建指定列中各词的一个索引，搜索可以针对这些词进行。这样，MySQL可以快速有效地决定哪些词匹配（哪些行包含它们），哪些词不匹配，它们匹配的频率，等等。

　　二、使用全文本搜索

　　为了进行全文本搜索，必须索引被搜索的列，而且要随着数据的改变不断地重新索引。在对表列进行适当设计后，MySQL会自动进行所有的索引和重新索引。

　　在索引之后，SELECT可与Match()和Against()一起使用以实际执行搜索。

　　1、启用全文本搜索支持

 　　一般在创建表时启动全文本搜索。CREATE TABLE语句接受FULLTEXT子句，它给出被索引列的一个逗号分隔的列表。下面的CREATE语句演示了FULLTEXT子句的使用：

CREATE TABLE productnotes
(
    note_id int NOT NULL AUTO_INCREMENT,
    prod_id char(10) NOT NULL,
    node_date datetime NOT NULL,
    note_text text NULL,
    PRIMARY KEY(note_id),
    FULLTEXT(note_text)   
)ENGINE = MyISAM;

　　分析：后面的博客将详细理解CREATE TABLE语句。现在，只需知道这条CREATE TABLE语句定义表productnotes并列出它所包含的列即可。这些列中有一个名为note_text的列，为了进行全文本搜索，MySQL根据子句FULLTEXT(note_text)的指示对它进行索引。这里的FULLTEXT索引单个列，如果需要也可以指定多个列。

　　在定义之后，MySQL自动维护该索引。在增加、更新或删除行时，索引随之自动更新。

　　可以在创建表时指定FULLTEXT，或者在稍后指定（在这种情况下所有已有数据必须立即索引）。

注意：不要在导入数据时使用FULLTEXT 更新索引要花时间，虽然不是很多，但毕竟要花时间。如果正在导入数据到一个新表，此时不应该启动FULLTEXT索引。应该首先导入所有数据，然后再修改表，定义FULLTEXT。这样有助于更快地导入数据（而且使索引数据的总时间小于在导入每行时分别进行索引所需的总时间）。

　　2、进行全文本搜索

　　在索引之后，使用两个函数Match()和Against()执行全文本搜索，其中Mathc()指定被搜索的列，Against()指定要使用的搜索表达式。

SELECT note_text
FROM productnotes
WHERE Match(note_text) Against('rabbit');

　　分析：此SELECT语句检索单个列note_text。由于WHERE子句，一个全文本搜索被执行。Match(note_text)指示MySQL针对指定的列进行搜索，Against('rabbit')指定rabbit作为搜索文本。由于有两行包含词rabbit，这两个行被返回。

注意：使用完整的Match()说明 传递给Match()的值必须与FULLTEXT()定义中的相同。如果指定多个列，则必须列出它们（而且次序正确）。

　　    搜索不区分大小写  除非使用BINARY方式，否则全文本搜索不区分大小写。

　　事实是刚才的搜索可以简单地用LIKE子句完成，如下所示：

SELECT note_text
FROM productnotes
WHERE note_text LIKE '%rabbit%';

　　分析：这条SELECT语句同样检索出两行，但次序不同（虽然并不总是出现这种情况）

　　上述两条SELECT语句都不包含ORDER BY子句。后者（使用LIKE）以不特别有用的顺序返回数据。前者（使用全文本搜索）返回以文本匹配的良好程度排序的数据。两个行都包含词rabbit，但包含词rabbit作为第3个词的行的等级比作为第20个词的行高。这很重要。全文本搜索的一个重要部分就是对结果排序。具有较高等级的行先返回（因为这些行很可能是你真正想要的行）。

注意：排序多个搜索项  如果指定多个搜索项，则包含多数匹配词的那些行将具有比包含较少词（或仅有一个匹配）的那些行高的等级值。

　　正如所见，全文本搜索提供了简单LIKE搜索不能提供的功能。而且，由于数据时索引的，全文本搜索还相当快。

　　3、使用查询扩展

　　查询扩展用来设法放宽所返回的全文本搜索结果的范围。考虑下面的情况，你想找出所有提到anvils的注释。只有一个注释包含anvils，但你还想找出可能与你的搜索有关的所有其他行，即使它们不包含词anvils。

　　这也是查询扩展的一项任务。在使用查询扩展时，MySQL对数据和索引进行两遍扫描来完成搜索：

　　（1）首先，进行一个基本的全文本搜索，找出与搜索条件匹配的所有行；

　　（2）其次，MySQL检查这些匹配行并选择所有有用的词（我们将会简要地解释MySQL如何判定什么有用，什么无用）。

　　（3）再其次，MySQL再次进行全文本搜索，这次不仅使用原来的条件，而且还使用所有有用的词。

　　利用查询扩展，能找出可能相关的结果，即使它们并不精确包含所有查找的词。

注意：只用于MySQL版本4.1.1或更高级的版本  查询扩展功能是在MySQL4.1.1中引入的，因此不能用于之前的版本。

　　下面举一个例子，首先进行一个简单的全文本搜索，没有查询扩展：

SELECT note_text
FROM productnotes
WHERE Match(note_text) Against('anvils');

　　下面是相同的搜索，这次试用查询扩展：

SELECT note_text
FROM productnotes
WHERE Match(note_text) Against('anvils' WITH QUERY EXPANSION);

　　分析：这次返回了7行。第一行包含词anvils，因此等级最高。第二行与anvils无关，但因为它包含第一行中的两个词，所以也被检索出来了。第3行业包含这两个相同的词，但它们在文本中的位置更靠后且分开的更远，因此也包含这一行，但等级为第三。

　　正如所见，查询扩展极大地增加了返回的行数，但这样做也增加了你实际上并不想要的行的数目。

注意：行越多越好  表中的行越多（这些行中的文本就越多），使用查询扩展返回的结果越好。

 　　4、布尔文本搜索

　　MySQL支持全文本搜索的另一种形式，称为布尔方式。以布尔方式，可以提供关于如下内容的细节：

　　（1）要匹配的词；

　　（2）要排斥的词（如果某行包含这个词，则不返回该行，即使它包含其他指定的词也是如此）；

　　（3）排列提示（指定某些词比其他词更重要，更重要的词等级更高）；

　　（4）表达式分组；

　　（5）另外一些内容。

注意：即使没有FULLTEXT索引也可以使用 布尔方式不同于迄今为止使用的全文搜索语法的地方在于，即使没有定义FULLTEXT索引，也可以使用它。但这是一种非常缓慢的操作（其性能将随数据量的增加而降低）。

　　为演示IN BOOLEAN MODE的作用，举一个简单的例子：

SELECT note_text
FROM productnotes
WHERE Match(note_text) Against('heavy' IN BOOLEAN MODE);

　　此全文本搜索检索包含词heavy的所有行（有两行）。其中使用了关键字IN BOOLEAN MODE，但实际上没有指定布尔操作符，因此，其结果与没有指定布尔方式的结果相同。

注意：IN BOOLEAN MODE的行为差异 虽然这个例子的结果与没有IN BOOLEAN MODE的相同，但其行为有一个重要的差别（即使在这个特殊的例子没有表现出来）。我们在后面的博文中指出。

　　为了匹配包含heavy但不包含任意以rope开始的词的行，可以使用以下查询：

SELECT note_text
FROM productnotes
WHERE Match(note_text) Against('heavy -rope*'IN BOOLEAN MODE);

　　分析：这次只返回一行。这一次仍然匹配词heavy，但-rope*明确地指示MySQL排除包含*rope（任何以rope开始的词，包括ropes）的行，这就是为什么上一个例子中的第一行被排除的原因。

注意：在MySQL 4.x中所需的代码更改  如果你使用的是MySQL4.x，则上面的例子可能不返回任何行。这是*操作符处理中的一个错误。为在MySQL4.x中使用这个例子，使用-ropes而不是-rope*（排除ropes而不是排除任何以rope开始的词）。

　　我们已经看到了两个全文本搜素布尔操作符-和*，排除一个词，而*是截断操作符（可想象为用于词尾的一个通配符）。下面表中列出了布尔操作符：

全文布尔操作符

布尔操作符	说明
+	包含，词必须存在
-	排除，词必须不存在
>	包含，而且增加等级值
<	包含，且减少等级值
（）	把次组成子表示（允许这些子表达式作为一个组被包含、排除、排列等）
~	取消一个词的排序值
*	词尾的通配符
“”	定义一个短语（与单个词的列表不一样，它匹配整个短语以便包含或排除这个短语）

　　5、全文本搜索的使用说明

　　这里给出关于全文本搜索的某些重要的说明：

　　（1）在索引全文本数据时，短词被忽略且从索引中排除。短词定义为那些具有3个或3个以下字符的词（如果需要，这个数目可以更改）。

　　（2）MySQL带有一个内建的非用词（stopword）列表，这些词在索引全文本数据时总是被忽略。如果需要，可以覆盖这个列表（请参阅MySQL文档以了解如何完成此工作）。

　　（3）许多词出现的频率很高，搜索它们没有用处（返回太多的结果）。因此，MySQL规定了一条50%的规则，如果一个词出现了50%以上的行中，则将它作为一个非用词忽略。50%规则不用于IN BOOLEAN MODE。

　　（4）如果表中的行数少于3行，则全文本搜索不返回结果（因为每个词或者不出现，或者至少出现在50%的行中）。

　　（5）忽略词中的单引号。例如，don't索引为dont。

　　（6）如前所述，仅在MyISAM数据库引擎中支持全文本搜索。

注意：没有邻近操作符 邻近搜索时许多全文本搜索支持的一个特性，它能搜索相邻的词（在相同的句子中、相同的段落中或者在特定数目的词的部分中，等等）。MySQL全文本搜索现在还不支持邻近操作符，不过未来的版本有支持这种操作符的计划。

　　三、小结

　　本文介绍了为什么要使用全文本搜索，以及如何使用MySQL的Match()和Against()函数进行全文本搜索。我们还学习了查询扩展（它能增加找到相关匹配的机会）和如何使用布尔方式进行更细致的查找控制。