作用：提取特征，把平平无奇的特征，输出为有特点的特征。
考虑全文，更新权重，添加语义信息
整体框架
注意力机制
利用权重更新特征
除以根号dk，消除特征维度对结果的影响
transformer要加位置编码
位置编码
相关推荐
聪明蛋子哟3 小时前
告别API“翻译”之苦：从OpenAPI到MCP，统一AI与工具集成的桥梁海上小飞龙3 小时前
大模型推理的两阶段：一次 Prefill，加上多次 Decodehhzz4 小时前
【OpenCV 入门到精通 01】认识 OpenCV 与计算机视觉：从零建立全局认知m4Rk_4 小时前
【论文阅读】Agent 记忆机制（62）：DCM-Agent——用双簇记忆化解优化问题的多范式冲突xian_wwq4 小时前
【学习笔记】深度认知系列-第13讲AI Agent时代到来——从“回答问题”到“执行任务”程序员cxuan4 小时前
GPT - 6 Astra 的使用焚诀golang学习记4 小时前
Cursor Origin：Cursor要造一个AI时代的GithubHugoStudio_SWAN4 小时前
洛谷 P10719 \[GESP202406 五级] 黑白格——暴力美学与图像处理的最小外接矩形yyk333244 小时前
计算机识别中的人脸检测PFFstronger4 小时前
基于 Dify 知识库 + Ollama 大模型，自动生成测试用例并导出 XMind 的完整方案