Mysql8 %中间%模糊搜索强行支持使用索引代替全文搜索全文检索数据库

LingMax20132024-05-17 21:12

用户表有个昵称字段需要模糊搜索而且搜索量巨大而且必须支持特殊字符串

个人不喜欢架构复杂化多用elasticsearch、solr、sphinx 很麻烦

所以研究了个通用解决方案 mysql支持索引模糊搜索

1.首先修改mysql配置改成全文索引最小为1字符串

sql 复制代码

[mysqld]  
innodb_ft_min_token_size=1
ft_min_word_len=1

2.新建STORED 虚拟字段 nickname_index 绑定原始nickname字段变化跟着一起变

3.nickname_index 创建全文索引

sql 复制代码

CREATE TABLE `tb_user` (
  `uid` int unsigned NOT NULL AUTO_INCREMENT COMMENT '用户ID',
  `nickname` varchar(50) CHARACTER SET utf8mb4 COLLATE utf8mb4_bin NOT NULL DEFAULT '' COMMENT '别名',
  `nickname_index` longtext CHARACTER SET utf8mb4 COLLATE utf8mb4_bin GENERATED ALWAYS AS (regexp_replace(`nickname`,_utf8mb4'(.)',_utf8mb4'$1 ')) STORED COMMENT '全文索引',

  PRIMARY KEY (`uid`) USING BTREE,
  FULLTEXT KEY `nickname_index` (`nickname_index`)
) ENGINE=InnoDB AUTO_INCREMENT=1001371 DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_bin COMMENT='用户表';

4.客户端写SQL注意事项需要用同样的方案

sql 复制代码

desc
SELECT 
* 
from tb_user 
where 

MATCH(nickname_index) AGAINST( regexp_replace('关键字','(.)','$1 ') )  

and 

nickname like CONCAT('%','关键字','%')

成功使用索引了

实现方案是

1.用虚拟键绑定原始键(原始值变了索引也会跟着自动变)

2.利用全文索引 (把虚拟键字符串逐字插入空格强制用1字符串分词)

sql 复制代码

 regexp_replace('关键字','(.)','$1 ')

3.使用时先用全文索引搜索分好词的关键字再like一下原始键数据就准确了

sql 复制代码

where 

MATCH(nickname_index) AGAINST( regexp_replace('关键字','(.)','$1 ') )  

and 

nickname like CONCAT('%','关键字','%')

PS: 低版本mysql 没有regexp_replace 需要用编程语言先处理好再传进来也可以支持麻烦点

作者:LingMax 原创mysql支持索引模糊搜索喜欢点个赞

Mysql8 %中间%模糊搜索 强行 支持 使用 索引 代替全文搜索 全文检索数据库

Mysql8 %中间%模糊搜索强行支持使用索引代替全文搜索全文检索数据库