embedding

npupengsir7 天前
embedding
LUXICAL文档embedding模型介绍论文: LUXICAL: HIGH-SPEED LEXICAL-DENSE TEXT EMBEDDINGS
前端.火鸡11 天前
人工智能·embedding
Embedding:机器是怎么“理解“语义的这一篇回答一个听起来很玄的问题:机器凭什么知道"苹果"和"香蕉"比"苹果"和"汽车"更像?答案不玄,甚至有点朴素——它把"像不像"换算成了"远不远",然后交给几何去算。
旋生万物12 天前
人工智能·大模型·aigc·软件工程·知识图谱·embedding·后端开发
全息结构入门:Embedding、向量库、知识图谱的统一视角一句话结论:全息不是"每个碎片都能还原整张图"的科幻桥段——它是 I² = -N 在信息层面的严格投影。局部包含整体的编码结构,恰好就是 Embedding 向量、向量数据库索引、知识图谱子图的核心数学性质。全息深度 = 从局部恢复整体所需的最小信息量。
HySpark15 天前
embedding·语音情感识别·egemaps·opensmile
从5秒延迟到轻量级推理:eGeMAPS与Embedding原型库的情感识别实践在语音情感识别项目中,模型最容易暴露的问题并不一定是准确率,而是实际音频输入后,输出结果是否稳定、及时,并且符合人的听感。
浪子明X16 天前
人工智能·langchain·embedding
LangChain 接入 Embedding 之前:先画清文本、向量与检索器的契约LLM 应用接入 Embedding 时,最常见的风险不是模型调用失败,而是文本切分、向量维度和检索结果在不同组件之间悄悄漂移。本文从榜单中的 LangChain 与 Embedding 主题出发,给出一条可审计的接入路径:把原文、切片、向量、过滤条件和引用证据分别建模,再为每个环节设置契约和回归样本。示例只用于说明接口边界,不代表已在任何线上服务中运行。
丈剑走天涯16 天前
embedding
rag ollama + qwen3+ embedding + chroma_db 回答content为空现象:done_reason=‘length’,message.content=“”,message.thinking=“一大段思考文字”
智码看视界17 天前
embedding·milvus·向量数据库·chroma·rag·语义检索·选型对比
向量数据库选型实战:Milvus vs Chroma vs Qdrant 谁更适合 RAGRAG 系统真到生产才发现有 N 个坑,向量库选型不能只看 benchmark。RAG 系统的向量库,真到生产才发现有 N 个坑。先定义 5 个选型维度:
坊钰18 天前
数据库·python·langchain·embedding
【LangChain框架入门级】10. 文本向量与向量数据库(Embedding / Redis / Pinecone / MMR)文档切好之后,要把文字变成计算机能比较「语义相似度」的数字——这就是文本向量(Embedding);而存储、检索这些向量的地方,就是向量数据库。 本篇讲解:向量、维度、向量空间与余弦相似度,OpenAI 嵌入模型的用法,以及 InMemory、Redis、Pinecone 三种向量存储和三种搜索方式。
吱屋猪_20 天前
embedding·健康医疗·ai编程
一个RAG系统是怎样运行的:从文档分块到大模型回答本文主要结合我在MediGraph项目中的实践,介绍一个RAG系统从文档进入知识库,到最终生成可追溯回答的完整流程。
XLYcmy21 天前
数据库·python·网络安全·pdf·embedding·dify·rag
PDF 论文处理器 — 技术报告文档适用项目:数据处理脚本 / Dify 知识库数据生成工具文档性质:技术剖析与归档本文档覆盖以下内容:本工具是一个面向网络安全(网安)科研论文的领域专用 PDF 文本预处理流水线。其目标是将分散存储的英文论文 PDF,转化为 Dify 知识库可直接导入的高质量"数据块(chunk)",服务于 RAG(检索增强生成)场景下的论文检索、研究现状总结与创新点挖掘。
jinyishu_22 天前
embedding
Embedding 向量嵌入:语义空间、相似度与模型选择计算机很容易比较数字,却不能直接理解“如何启动服务”和“服务的启动步骤”表达了相近含义。Embedding 模型解决的正是这个问题:它把文本、图片或音频映射成一组稠密向量,让语义关系能够通过数学距离来比较。
lie..23 天前
人工智能·算法·embedding
30天从零开始学AI应用开发(Day 16):Embedding 是什么?用人话讲明白“向量检索”这是系列的第 16 篇。整个系列写给零基础、想入行 AI 的朋友,每天一篇,30 天后你会做出 3 个能写进简历的项目。
大连好光景24 天前
embedding·ai-native
RAG中为什么要做Embedding?嵌入模型如何选?一句话:中文选BGE或M3E、英文选OpenAI或Cohere、轻量级选Sentence-BERThttps://huggingface.co/spaces/mteb/leaderboard
Light Gao24 天前
java·开发语言·embedding
Encoder 与 Decoder 详解:从 Embedding 到 Seq2Seq 的完整数据流本文用一个完整例子解释:输入“我爱你”后,每个词怎样经过 Embedding、Encoder,最后由 Decoder 生成 “I love you”。重点是区分词向量、上下文表示和生成过程。
Light Gao25 天前
人工智能·rnn·深度学习·神经网络·embedding
RNN 原理、架构与一次完整手算本文从 Embedding 开始,解释循环神经网络(RNN)如何逐个读取序列、更新隐藏状态、预测下一个词,并用一个可以手算的极简例子完整走一遍:前向传播、softmax、交叉熵、反向传播、梯度下降,以及更新参数后再次前向推演。
91刘仁德1 个月前
笔记·embedding·rag
RAG实战-Embedding模型(BGE)想象这样一个场景:你是一家企业的知识库管理员,库里躺着几十万份技术文档、产品手册和售后记录。用户抛来一句口语化的问题——“上次那个接口超时的问题最后怎么解决的?”——你需要在几秒内从海量文档里捞出最相关的那几段,交给大模型组织成答案。
田园诗人之园1 个月前
embedding·位置编码·深度学习token
一文搞懂 Token化、Embedding 与位置编码导读:文本进入 Transformer 前要经过三步核心处理——Token化 → Embedding → 位置编码(PE)。本文给出每一步的完整公式、原理推导与 PyTorch 实现,并用 7 组真实实验(RTX 5070 Ti 实测)验证所有结论:Embedding 查表与 one-hot 矩阵乘误差为 0、正弦 PE 的旋转性质误差 ~1e-6、RoPE 内积只依赖相对位置(偏差 4.77e-07)、无 PE 时模型对词序完全无感(变化 1.19e-07)……分词部分使用 Qwen3 官方分词器(词表
XLYcmy1 个月前
自然语言处理·prompt·embedding·token·cot·tokenization·上下文工程
大语言模型(LLM)核心技术梳理:从词元化到 RAG 的工程实践Token(词元)是文本的基本单位。Tokenizer 的作用是把清洗后的文本字符串切分成有意义的基本单元序列,并构建词表(vocabulary)。例如句子 "I want a beer! Beer is cute!" 会被切分成 ["I", "want", "a", "beer", "!", "Beer", "is", "cute", "!"] 等 token,再映射为整数索引,形成训练数据。
geminigoth1 个月前
embedding·rag架构·rag学习·faiss 索引·rag清洗提取·rag切片·向量化与索引
从零开始学习RAG——02 项目架构定位:本文档是 ...rag-from-scratch 的完整架构说明,回答三个问题——系统由什么组成、数据怎么流动、每个决策为什么这么定。