milvus

简介

区别mysql,前者使用标量数据做索引,milvus使用向量作为索引。其他都和mysql差不多

支持单机部署和集群部署

生产环境一般集群部署

关键概念

互联网上80%往上都是非结构化

补充:实体对应mysql中的行

名称对比

索引

MySQL的索引存磁盘,milvus为了加速查询,索引放内存,所以有了一些省内存的索引方式

mysql可以选择进行是否使用索引,milvus不使用索引工作不了

FLAT就是遍历,精度高,内存消耗大

IVF_FLAT(生产级):

就是先kmeans聚类,指定相似度的最高的n个簇,只查这几个簇里的内容

IVF_SQ8 : 在IVF_FLAT基础上把向量转标量,节省内存,降低精度

**IVF_PQ : **更加省内存,基本不用

**HNSW:**也是生产级的索引方式,基于图的方式,效率很高,原理复杂,本质是拿内存换时间

相似度度量

第一个注重数值,多用于人脸识别

第三个注重方向,多用于情感分类

第二个综合,什么都干

CRUD

不同于mysql可以用sql语句操作,milvus全得靠代码手搓

增删改不必说,和mysql差不多

简单查询本质上只做3件事:

  1. 算距离 向量相似度计算,由索引加速(ANNs算法);
  2. 划范围 通过 limitradiuspartition 缩小搜索圈;
  3. **加条件 ** 通过 filteroutput_fields 做数据过滤与提取。

复杂查询----使用混合索引

在实际业务中,一条数据可能包含多个向量字段 (例如:一个商品既有"图片向量",又有"文字描述向量")。当你搜索时,可能希望同时考虑这两个维度的相似性,而不是只看其中一个。

混合检索的流程是:

  1. 分别执行多次 ANN 搜索:对每个向量字段进行一次独立的 Top-K 搜索(例如图片向量搜出 100 个结果,文字向量也搜出 100 个)。
  2. 重排序(Merge & Rerank):将这两组结果合并,使用一种策略重新打分,最终返回你最想要的 Top-N 个结果。

这种合并过程的关键在于"如何给每个结果综合评分"。Milvus 提供了两种内置策略:

你最想要的 Top-N 个结果。

这种合并过程的关键在于"如何给每个结果综合评分"。Milvus 提供了两种内置策略:

外链图片转存中...(img-GfXmtfMy-1784797868676)

相关推荐
Database_Cool_5 天前
阿里云 Lindorm vs Milvus+ES 拼接:一栈式多模数据库与多库架构全维度对比
elasticsearch·阿里云·milvus
IT小辉同学6 天前
# Milvus v3.0-beta docker-compose 启动失败完整排错教程
docker·eureka·milvus
大模型码小白6 天前
Milvus 架构设计:从向量索引到分布式检索,AI 原生存储引擎的内部机制
java·大数据·人工智能·分布式·深度学习·milvus
小二·8 天前
多模态RAG实战:用LangChain+Milvus打造支持图文音视频的企业级知识库
langchain·音视频·milvus
weixin_3077791312 天前
Linux下Docker Compose里运行Milvus向量数据库故障诊断Shell脚本
linux·运维·数据库·docker·milvus
Generalzy14 天前
从本地 Demo 到生产级检索:Milvus 学习笔记(3)
笔记·学习·milvus
Earth explosion14 天前
大规模向量库的索引选型与查询性能调优:Milvus 实战指南
人工智能·milvus·ai智能体
Generalzy14 天前
从本地 Demo 到生产级检索:Milvus 学习笔记(2)
golang·milvus
记忆停留w15 天前
从单体到微服务:Redis 协同 MySQL、Milvus、MinIO 搭建企业级RAG/AI Agent脚手架架构
大数据·人工智能·redis·微服务·ai·架构·milvus