腾讯云向量数据库-RAG介绍

1.说明

RAG结合LLM(通用大预言模型)构件基于私有文档、专业领域知识、实时信息的charbot。

2.RAG的主要步骤

  • 知识切片成chunk
  • 向量化chunk入库
  • query检索知识chunk
  • 构件prompts
  • 调用llm生成回答

3.优势

  • 快速构件demo
  • 快速理解rag
  • 社区支持

4.痛点

  • 投入大
  • 效果差
  • 调优难

5.RAG应用的效果

整体效果=文档处理效果*embedding效果*retrieval效果*LLM效果

6.数据处理的难点:解析和拆分

1.PDF格式的++多样性++ (eg:标准格式、跨页表格、离散等),++会有复杂多变的文档格式++,提高效果的困难度。

解决办法:

2.++文档内容质量++将很有程度影响最终效果。

相关推荐
Geometry Fu5 小时前
《物联网安全》第3.2章 无线传感器网络安全
物联网·安全·物联网安全·无线传感器网络·wsn
TDengine (老段)8 小时前
TDengine Commit 与 Flush 机制 — 从内存到磁盘的数据落盘全流程
大数据·数据库·物联网·架构·时序数据库·iot·tdengine
Yeats_Liao10 小时前
好复杂的 IoT 世界:工业数据采集技术栈全景解析
java·物联网·struts
博晶网络12 小时前
MT7628物联网工控网关WiFi路由串口服务器转WiFi模块怎么选?
物联网
星恒讯工业路由器12 小时前
4G自组网与VPDN专网技术解析
网络·物联网·信息与通信·4g自组网·vpdn专网
砍材农夫13 小时前
物联网 基于netty核心实战-安全tls
java·开发语言·前端·物联网·安全
兴通物联科技13 小时前
条码防重防错防漏防呆:工业数据采集的全链路风控技术方案
大数据·物联网·计算机视觉·计算机外设·硬件架构
MetrixAeroCore1 天前
罗马尼亚跨境物联网通信痛点与方案:MetrixAeroCore物联网卡解析
物联网
黎阳之光1 天前
数智透明·安全兜底|黎阳之光透明矿山,AI+数字孪生守护矿山生命线
人工智能·物联网·算法·安全·数字孪生
TurMass工程师1 天前
“十五五”城市生命线升级窗口打开,TurMass 技术让智慧管廊更会“感知”
物联网·智慧城市·turmass·turmassmesh