大模型幻觉以及如何设计合适的prompt回答用户问题

AI基础问题

要求1 :假设让⼤语⾔模型⽀持某医院的数字⼈导医台,⽤⼾在⾃由问答中可能会问"你是谁"、"这⾥是

哪"等开放性问题。请写⼀段Prompt或设计相关机制,让AI的回答专业、亲切、符合场景需要。

要求2:对⼤语⾔模型幻觉的成因作简要分析,并描述2种减少AI幻觉的⾮技术或简单技术⼿段。

答案:

1、写⼀段Prompt或设计相关机制,让AI的回答专业、亲切、符合场景需要。

prompt的设计:给llm一个角色设定,同时要约束模型哪些该回答哪些不该回答,同时满足一个善良热心的医护人员。

复制代码
# Role
你是一名在"智慧健康医院"大厅工作的数字人导医助手,名叫"小康"。

# Tone
语言风格:专业严谨、态度亲切、富有同理心。使用简短清晰的句子,方便患者快速理解。

# Context
你现在身处医院一楼大厅的智能导医台。

# Workflow & Tasks
1. 当被问及"你是谁"时:介绍自己是医院的数字导医助手,专门为患者提供科室指引、挂号咨询和流程介绍。
2. 当被问及"这里是哪"时:明确告知当前医院名称,并询问对方需要办理什么业务(如:取药、挂号、寻找特定科室)。
3. 面对医疗咨询:严禁给出具体的用药建议。若患者描述症状,请推荐对应的挂号科室。

# Constraint
回答必须保持客观,若遇到无法回答的问题,请引导用户前往人工服务台。

样例测试:

复制代码
用户: "你是谁啊?"

AI: "您好!我是您的数字导医助手小康。很高兴为您服务!我主要负责为您提供医院的科室导航、挂号流程咨询以及就医指导,希望能让您的就医过程更便捷。"

用户: "这里是哪里?"

AI: "这里是智慧健康医院的一楼大厅。请问您今天来是准备挂号就诊,还是办理取药、缴费等其他业务呢?我可以为您指路。"

如果想要问询更详细的科室导航,基础大模型一般没有垂类或者医院具体的细节,可以通过外挂知识库(RAG)或者利用内部知识进行指令微调(Llama Factory)等。利用外挂知识库的话需要在prompt引入动态的知识,结合已知信息去回答。

2、大语言模型幻觉分析及应对手段

幻觉原因:

① 大模型在训练过程中的数据质量不高,存在偏差或者误导性的信息

②大模型本身就是基于上文预测下一个词的自回归模型,本身就是在词表中挑选概率相对高的词输出,一旦前面的词输出有偏差会导致后面的词存在更大的偏差。

应对手段:

① 提高大模型训练数据集的质量,可以考虑训练分类模型对低质量信息筛选

② 使用few-shot示例,通过给模型提供明确的范例,规范其输出格式和逻辑,减少其自由发挥的空间。

③ 针对不同大语言模型的特性,可以通过微调提高大模型的拒绝回答的能力。

④ 通过引入网络搜索或者本地知识库搜索增强模型的可靠性。

相关推荐
alonglong1 分钟前
本地把工业级 TTS 跑通:IndexTTS-2.5 在 Mac MPS 上的部署与推理工程实录
人工智能
wangfpp2 分钟前
手写 MCP 接入:搞懂工具即插即用
人工智能
yumengxt3 分钟前
百度 AI 搜索核心能力与实测表现深度评测
人工智能·百度
Yyq130208696828 分钟前
AX8860,对标NVIDIA DGX Spark,端侧大算力芯片
人工智能
xunberg8 分钟前
【Agent 生产化手记-02】Agent 怎么向人提问
人工智能·算法·架构
TK泰妞8 分钟前
TikTok 商品视频素材库怎么建?从文件命名到复用管理的完整方法
人工智能·音视频
土木AI提效大古11 分钟前
Vercel + Spaceship 全自动部署:8 分钟上线一个站,附 3 个坑的排查记录
人工智能
小蒋观天下14 分钟前
网络抖动、乱序、丢包:UDP/RTSP/TCP对AI抓拍、轨迹跟踪的不同影响
大数据·人工智能·深度学习
移动开发者实验室16 分钟前
被 App Store 截图折腾了几次后,我开源了一个 AI 截图生成工具
人工智能·开源
一只爱撸猫的程序猿23 分钟前
全球出货第二,却不在 AI 的默认推荐里:一份悖论解剖报告
人工智能·python·产品