mysql 全文索引中的Stopwords

Full-Text Stopwords 是指在全文搜索时被索引系统默认忽略的一组单词。这些通常是最常见的单词,比如 "the"、"is"、"at" 等英语中的助词、介词、连接词等。它们通常不含有具体的搜索意义,因此在创建全文索引的时候会被排除在外,以便减少索引大小并提高搜索效率。

在 MySQL 中使用全文索引和搜索时,Stopwords 的作用如下:

  1. 索引构建 - 当创建全文索引时,Stopwords 不会被包括在内。这意味着,如果你的搜索关键字包含了这些词,它们不会出现在索引结果中。

  2. 搜索查询 - 当执行全文搜索时,如果搜索字符串包含 Stopwords,那么这些词将不会被用于匹配。

你可以通过查看 MySQL 的官方文档来获取默认的 Stopword 列表,并根据需要修改它。例如,在 MyISAM 引擎中,停用词列表存储在 storage/myisam/ft_static.c 文件中,而 InnoDB 引擎的停用词列表是由服务器变量 innodb_ft_default_stopword 指定的表。

若要改变默认的停用词集合,你可以进行以下操作:

  1. 自定义停用词表 - 通过设置系统变量(例如 ft_stopword_file)来指定自己的停用词文件路径,或者对于 InnoDB 表,通过给 innodb_ft_server_stopword_table 设置一个指向你自己停用词表的值。

  2. 重新生成索引 - 更改停用词表后,相关的全文索引需要重建,以确保新的停用词列表生效。

  3. 使用IN BOOLEAN MODE搜索 - 如果你想在搜索时忽略停用词列表,可以在全文搜索中使用 IN BOOLEAN MODE 选项,这样即使是停用词也会被用于搜索匹配。

举例来说,如果你对一个包含文章文本的列使用全文索引搜索,但希望 "the" 和 "is" 这样的常见单词能够在搜索中匹配,你可能需要自定义停用词表或使用 IN BOOLEAN MODE 进行搜索。

请注意,调整停用词列表可能影响搜索结果的相关性和性能,因此应谨慎进行。

相关推荐
小白勇闯网安圈20 小时前
Django 响应对象、文件上传与类视图
数据库·django·sqlite
努力的小雨21 小时前
同一份 SQL 跑多套环境:Ksql 变量怎么用才安全
数据库
科技绘图21 小时前
快鲸GEO vs 传统AI搜索优化:全链路自动化与高效内容生产在转化闭环上的对比
数据库·人工智能·自动化
ltl21 小时前
数据库作为 LLM 记忆体:语义缓存、RAG 与一致性
数据库
ltl21 小时前
WAL 与崩溃恢复:ARIES 协议怎么跑通
数据库
ltl21 小时前
TEE 数据库:EnclaveDB、Oblivious 原语与机密 SQL
数据库
麻瓜code1 天前
【Mysql】重新学一遍 SQL 执行顺序
数据库·sql
这个DBA有点耶1 天前
数据库一体机架构演进:从硬件堆叠到软硬深度耦合
服务器·网络·数据库·硬件架构·运维开发·database·数据库架构
一只fish1 天前
优化器架构对比:Oracle vs PostgreSQL vs MySQL
mysql·postgresql·oracle
安_1 天前
RAG的向量数据库:为LLM提供语义搜索能力
数据库