大语言模型的“自我迭代”

你知道吗?在学习大语言模型的时候,小编发现一件很有趣的事情:大语言模型输入的是自然语言(也就是我们前面所说的"代码"),它输出的也是自然语言(同样是"代码")。这种输出可以继续作为后续的输入。

如果大语言模型输出的"代码"比输入的"代码"更加完善,那么从某种角度来看,大语言模型就能够进行"自我迭代"。这里的自我迭代是指不断迭代优化和完善它的输出,直到达到一个令人满意的效果

实际上,2023年9月发表的一篇论文《From Sparse to Dense: GPT-4 Summarization with Chain of Density Prompting》就是采用了这种思路。该论文利用GPT-4不断对自己的输出进行迭代优化,最终实现了一个非常好的总结文档的效果。

上图是CoD的提示模板以及对应的例子。

相关推荐
微软技术分享1 分钟前
Apache 2.4.68 编译安装与配置
人工智能·apache·知识图谱
小道士写程序20 分钟前
自然语言处理NLP - 第3章 从字符到Token:机器的输入长什么样
人工智能·机器学习
Mr数据杨21 分钟前
钻石价格预测实战 从 Kaggle 回归赛题看结构化数据建模落地
人工智能·数据分析·kaggle竞赛
Mr数据杨23 分钟前
从 Kaggle 到实战的多标签文本分类案例拆解
人工智能·数据分析·kaggle竞赛
福昕办公26 分钟前
智能体手机落地,Agent 正在从“云端调用“走向“长进软件本体“
人工智能·智能手机
DolphinScheduler社区32 分钟前
把 Apache DolphinScheduler 变成 Agent 的“手和脚”:从调度平台到自然语言数据入口
人工智能·开源·apache·agent·技术分享·海豚调度·大数据工作流调度
weixin_446260851 小时前
基于熵的选择性智能体引导:从非完美视觉语言模型教师学习自主策略
人工智能·学习·语言模型
夜雪一千1 小时前
如何写一个数据分析 Skill
人工智能·数据挖掘·数据分析
桃西西呀1 小时前
RAG 接个向量库就完事?从切块到重排的 7 步流水线,我替你踩了 8 个深坑
人工智能·llm·ai编程