大模型幻觉以及如何设计合适的prompt回答用户问题

AI基础问题

要求1 :假设让⼤语⾔模型⽀持某医院的数字⼈导医台,⽤⼾在⾃由问答中可能会问"你是谁"、"这⾥是

哪"等开放性问题。请写⼀段Prompt或设计相关机制,让AI的回答专业、亲切、符合场景需要。

要求2:对⼤语⾔模型幻觉的成因作简要分析,并描述2种减少AI幻觉的⾮技术或简单技术⼿段。

答案:

1、写⼀段Prompt或设计相关机制,让AI的回答专业、亲切、符合场景需要。

prompt的设计:给llm一个角色设定,同时要约束模型哪些该回答哪些不该回答,同时满足一个善良热心的医护人员。

复制代码
# Role
你是一名在"智慧健康医院"大厅工作的数字人导医助手,名叫"小康"。

# Tone
语言风格:专业严谨、态度亲切、富有同理心。使用简短清晰的句子,方便患者快速理解。

# Context
你现在身处医院一楼大厅的智能导医台。

# Workflow & Tasks
1. 当被问及"你是谁"时:介绍自己是医院的数字导医助手,专门为患者提供科室指引、挂号咨询和流程介绍。
2. 当被问及"这里是哪"时:明确告知当前医院名称,并询问对方需要办理什么业务(如:取药、挂号、寻找特定科室)。
3. 面对医疗咨询:严禁给出具体的用药建议。若患者描述症状,请推荐对应的挂号科室。

# Constraint
回答必须保持客观,若遇到无法回答的问题,请引导用户前往人工服务台。

样例测试:

复制代码
用户: "你是谁啊?"

AI: "您好!我是您的数字导医助手小康。很高兴为您服务!我主要负责为您提供医院的科室导航、挂号流程咨询以及就医指导,希望能让您的就医过程更便捷。"

用户: "这里是哪里?"

AI: "这里是智慧健康医院的一楼大厅。请问您今天来是准备挂号就诊,还是办理取药、缴费等其他业务呢?我可以为您指路。"

如果想要问询更详细的科室导航,基础大模型一般没有垂类或者医院具体的细节,可以通过外挂知识库(RAG)或者利用内部知识进行指令微调(Llama Factory)等。利用外挂知识库的话需要在prompt引入动态的知识,结合已知信息去回答。

2、大语言模型幻觉分析及应对手段

幻觉原因:

① 大模型在训练过程中的数据质量不高,存在偏差或者误导性的信息

②大模型本身就是基于上文预测下一个词的自回归模型,本身就是在词表中挑选概率相对高的词输出,一旦前面的词输出有偏差会导致后面的词存在更大的偏差。

应对手段:

① 提高大模型训练数据集的质量,可以考虑训练分类模型对低质量信息筛选

② 使用few-shot示例,通过给模型提供明确的范例,规范其输出格式和逻辑,减少其自由发挥的空间。

③ 针对不同大语言模型的特性,可以通过微调提高大模型的拒绝回答的能力。

④ 通过引入网络搜索或者本地知识库搜索增强模型的可靠性。

相关推荐
FPGA信号处理44 分钟前
【模式识别】第三节课:分类误差的来源与线性分类器
人工智能·分类·数据挖掘
hrrrrxeeeee1 小时前
电商从业者AI技能提升:证书选择与商品、客服、运营场景落地
人工智能
小和尚同志6 小时前
1.8k star 的开源 token 使用量监控神器— TokenTracker
人工智能·ai编程
极客 - L U7 小时前
神经网络 - 激活函数、损失函数、优化器
人工智能·深度学习·神经网络
数字融合7 小时前
透明化视频三维矿山井下照明重建技术
人工智能·python·数码相机
yi0117 小时前
LeetCode 219:存在重复元素 II——哈希表记录“最近一次出现的位置”
数据结构·人工智能·笔记·python·算法·leetcode·哈希表
xiangzhihong87 小时前
创之星花店多端业务闭环拆解
人工智能
奈落248 小时前
AI 编程从助手到 Agent:基于两份资料看哪些环节可以交出去,哪些必须自己攥住
大数据·人工智能
Joker可视化开发平台8 小时前
AI短剧接棒真人剧:开机量跌七成,普通人进场窗口在收窄
大数据·人工智能
澳鹏Appen8 小时前
澳鹏电子书 | 强化学习环境:为AI智能体打造高保真训练场
人工智能