Mysql使用全文索引(FullText index)的实例代码


Posted in MySQL onApril 03, 2022

什么是全文索引

全文索引,通过建立倒排索引,可以极大的提升检索效率,解决判断字段是否包含的问题. 例如: 有title字段,需要查询所有包含 "政府"的记录. 需要 like "%政府%"方式查询,查询速度慢,当查询包含"政府" OR "中国"的需要是,sql难以简单满足.全文索引就可以实现这个功能.

倒排索引(英语:Inverted index),也常被称为反向索引、置入档案或反向档案,是一种索引方法,被用来存储在全文搜索下某个单词在一个文档或者一组文档中的存储位置的映射。它是文档检索系统中最常用的数据结构。

注意

在MySQL 5.6版本以前,只有MyISAM存储引擎支持全文引擎.在5.6版本中,InnoDB加入了对全文索引的支持,但是不支持中文全文索引.在5.7.6版本,MySQL内置了ngram全文解析器,用来支持亚洲语种的分词.

创建全文索引

  • 创建表的时候创建
CREATE TABLE articles (
    id INT UNSIGNED AUTO_INCREMENT NOT NULL PRIMARY KEY,
    title VARCHAR (200),
    body TEXT,
    FULLTEXT (title, body) WITH PARSER ngram
) ENGINE = INNODB DEFAULT CHARSET=utf8mb4 COMMENT='文章表';

创建了一个给title和body字段添加全文缩影的表

  • 给字段添加全文索引 ALTER TABLE articles ADD FULLTEXT INDEX title_body_index (title,body) WITH PARSER ngram;

使用全文索引

MySQL的全文索引查询有多种模式

自然语言搜索

普通的判断是否包含

mysql> SELECT * FROM articles WHERE MATCH (title,body) AGAINST ('精神' IN NATURAL LANGUAGE MODE);
+----+-----------------+-------------------------+
| id | title           | body                    |
+----+-----------------+-------------------------+
|  1 | 弘扬正能量      | 贯彻党的18大精神        |
+----+-----------------+-------------------------+
1 row in set (0.00 sec)

mysql> SELECT * FROM articles WHERE MATCH (title,body) AGAINST ('精神');
+----+-----------------+-------------------------+
| id | title           | body                    |
+----+-----------------+-------------------------+
|  1 | 弘扬正能量      | 贯彻党的18大精神        |
+----+-----------------+-------------------------+
1 row in set (0.00 sec)
可以看到,搜索结果命中了一条,且在不指定搜索模式的情况下,默认模式为自然语言搜索.

BOOLEAN MODE

这个模式和lucene中的BooleanQuery很像,可以通过一些操作符,来指定搜索词在结果中的包含情况.比如 + 表示必须包含 , -表示必须不包含,默认为误操作符,代表可以出现可以不出现,但是出现时在查询结果集中的排名较高一些.也就是该结果和搜索词的相关性高一些.

具体包含的所有操作符可以通过MySQL查询来查看:

show variables like '%ft_boolean_syntax%'

+-------------------+----------------+
| Variable_name     | Value          |
+-------------------+----------------+
| ft_boolean_syntax | + -><()~*:""&| |
+-------------------+----------------+
mysql> SELECT * FROM articles WHERE MATCH (title,body) AGAINST ('+精神' IN BOOLEAN MODE);
+----+-----------------+-------------------------+
| id | title           | body                    |
+----+-----------------+-------------------------+
|  1 | 弘扬正能量      | 贯彻党的18大精神        |
+----+-----------------+-------------------------+
1 row in set (0.00 sec)

mysql> SELECT * FROM articles WHERE MATCH (title,body) AGAINST ('+精神 -贯彻' IN BOOLEAN MODE);
Empty set (0.01 sec)
当搜索必须命中精神时,命中了一条数据,当在加上不能包含贯彻的时候,无命中结果.

强烈注意:MySql自带的全文索引只能用于数据库引擎为MYISAM的数据表,如果是其他数据引擎,则全文索引不会生效。此外,MySql自带的全文索引只能对英文进行全文检索,目前无法对中文进行全文检索。如果需要对包含中文在内的文本数据进行全文检索,我们需要采用Sphinx(斯芬克斯)/Coreseek技术来处理中文。

注:目前,使用MySql自带的全文索引时,如果查询字符串的长度过短将无法得到期望的搜索结果。MySql全文索引所能找到的词默认最小长度为4个字符。另外,如果查询的字符串包含停止词,那么该停止词将会被忽略。

注:如果可能,请尽量先创建表并插入所有数据后再创建全文索引,而不要在创建表时就直接创建全文索引,因为前者比后者的全文索引效率要高。

总结

到此这篇关于Mysql使用全文索引(FullText index)的文章就介绍到这了,更多相关Mysql使用全文索引内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

MySQL 相关文章推荐
my.ini优化mysql数据库性能的十个参数(推荐)
May 26 MySQL
SQL注入的实现以及防范示例详解
Jun 02 MySQL
Mysql案例刨析事务隔离级别
Sep 25 MySQL
MySQL数据库超时设置配置的方法实例
Oct 15 MySQL
Mysql关于数据库是否应该使用外键约束详解说明
Oct 24 MySQL
MySQL和Oracle批量插入SQL的通用写法示例
Nov 17 MySQL
教你使用VS Code的MySQL扩展管理数据库的方法
Jan 22 MySQL
MySQL的存储函数与存储过程的区别解析
Apr 08 MySQL
MySQL数据库事务的四大特性
Apr 20 MySQL
mysql sock 文件解析及作用讲解
Jul 15 MySQL
Mysql中mvcc各场景理解应用
Aug 05 MySQL
MySQL count(*)统计总数问题汇总
Sep 23 MySQL
一文简单了解MySQL前缀索引
为什么MySQL不建议使用SELECT *
详解MySQL的主键查询为什么这么快
MySQL表锁、行锁、排它锁及共享锁的使用详解
navicat 连接Ubuntu虚拟机的mysql的操作方法
MySQL中IO问题的深入分析与优化
mysql的Buffer Pool存储及原理
You might like
锁定年轻人的双倍活力 星巴克推出星倍醇即饮浓咖啡
2021/03/03 咖啡文化
thinkphp模板继承实例简述
2014/11/26 PHP
php禁止某ip或ip地址段访问的方法
2015/02/25 PHP
PHP入门教程之数学运算技巧总结
2016/09/11 PHP
PHP写的简单数字验证码实例
2017/05/23 PHP
JavaScript 权威指南(第四版) 读书笔记
2009/08/11 Javascript
基于JQUERY的多级联动代码
2012/01/24 Javascript
jQuery学习笔记 获取jQuery对象
2012/09/19 Javascript
node.js中的Socket.IO使用实例
2014/11/04 Javascript
jQuery插件EasyUI设置datagrid的checkbox为禁用状态的方法
2016/08/05 Javascript
JS验证图片格式和大小并预览的简单实例
2016/10/11 Javascript
jQuery源码分析之sizzle选择器详解
2017/02/13 Javascript
原生JS实现垂直手风琴效果
2017/02/19 Javascript
微信小程序 图片加载(本地,网路)实例详解
2017/03/10 Javascript
vue-hook-form使用详解
2017/04/07 Javascript
Vue axios 中提交表单数据(含上传文件)
2017/07/06 Javascript
利用Console来Debug的10个高级技巧汇总
2018/03/26 Javascript
layui实现下拉框三级联动
2019/07/26 Javascript
使用Node.js实现base64和png文件相互转换的方法
2020/03/11 Javascript
js操作两个json数组合并、去重,以及删除某一项元素
2020/09/22 Javascript
详解Python Socket网络编程
2016/01/05 Python
python 第三方库的安装及pip的使用详解
2017/05/11 Python
Window环境下Scrapy开发环境搭建
2018/11/18 Python
python学生管理系统开发
2019/01/30 Python
使用Windows批处理和WMI设置Python的环境变量方法
2019/08/14 Python
python 字典套字典或列表的示例
2019/12/16 Python
将tensorflow模型打包成PB文件及PB文件读取方式
2020/01/23 Python
PyQt5事件处理之定时在控件上显示信息的代码
2020/03/25 Python
css3使用animation属性实现炫酷效果(推荐)
2020/02/04 HTML / CSS
英国游戏机和游戏购物网站:365games.co.uk
2018/06/18 全球购物
本科毕业生自荐信
2014/05/26 职场文书
作风转变心得体会
2014/09/02 职场文书
中班上学期个人总结
2015/02/12 职场文书
2016年春节慰问信息
2015/03/25 职场文书
环保守法证明
2015/06/24 职场文书
2016优秀护士先进个人事迹材料
2016/02/25 职场文书