【大模型LLM学习】天池Deep Research Agent开发赛

前言

  • 运气不错,这次压线前10,不过和top还是有差距的
  • 数据包括问题和答案可以在比赛官网获取,包括初赛的100题和复赛100题。赛题为输入query输出answer,通过搭建Search Agent,分解问题、多跳搜索识别线索,找到最佳答案,并用题目要求的规范格式进行回答,题目和答案例如
python 复制代码
"question": "一位物理学领域的学者为一种经典棋盘游戏设计的评分系统,后来被一家北美游戏公司广泛应用于其一款多人在线战术竞技游戏中。这家公司的母公司是一家亚洲科技巨头,该巨头在21世纪10年代完成了对前者的全资收购,并涉足量子计算等前沿科技领域。在这家北美公司开发的另一款第一人称射击游戏中,有一件适合近距离作战的武器,其名称与上述亚洲巨头代理发行的一款格斗手游中的一名在登场角色中年龄偏大的武术教官角色相同。这款格斗手游的名字是什么?"
"answer": "魂武者"
  • 答案规则:赛题的答案,如果是实体,取名顺序为百度百科>英文wiki>中文wiki,没有特殊说明情况下,答案语言和题目语言一致
  • 可以参考的解决方案:阿里的deepresearch
  • 比赛限制为,LLM上只能使用阿里的大模型API,禁止微调模型。可以使用Google/bing/阿里IQS等web search(网络搜索api的普通搜索模式)和jina,禁止调用Tavily的websearch;每个问题总时长要求10分钟以内

方案

  • 链接:https://github.com/DXWEIE/tianchi_deepresearch_agent
  • 架构:ReACT + Best of N
  • 搜索引擎:中文使用DDGS、阿里IQS;英文在此基础上使用google;同时如果触发了wiki搜索,分别使用wikipedia和阿里IQS(搜"xxx 百度百科")

经验记录

  • 先把最简单的react跑通,然后再尝试提升效果
  • qwen3.5的效果一般,速度也比较慢,优先使用qwen3-max>qwen3.5>qwen3-plus
  • 先提升单个链路的能力,最后再尝试并发多rollout然后merge结果取best的
  • 后续等看完top的代码更~
相关推荐
救救孩子把6 小时前
结构化输出为何“格式正确、答案错误”?JSON Schema 的能力边界
android·java·json·agent·agent服务
空堂与归6 小时前
国产开源登顶全球第一,1.3B OXR 登顶三榜:RSI 闭环重塑文档解析
人工智能·ai·agent
程序员cxuan6 小时前
别学 subagent 了,很可能要凉了。
后端·agent·ai编程
chaser&upper7 小时前
从 xParse 看企业 AI:业务知识如何进入工作流
人工智能·agent·数据处理·合合信息·textin xparse
虎鲸不是鱼7 小时前
AI 自动化逆向(三十五)假设空间枚举的完备性是假设出来的
人工智能·自动化·大模型·逆向·ai逆向
前端双越老师7 小时前
程序员 1v1 访谈系列第九期:要不要晋升管理层?
agent·ai编程·全栈
威哥爱编程8 小时前
Python 智能体开发实战 03:聊十轮就“失忆”,账单还翻倍?管好上下文,Token 立省一半
python·agent
威哥爱编程8 小时前
Python 智能体开发实战 04:模型答得挺漂亮,程序却读不懂?让回答直接变成能入库的 JSON
python·agent
mudtools8 小时前
在飞书 SDK 上用 Microsoft Agent Framework 搭一个能干活的工作搭子
人工智能·ai·.net·飞书·agent
发量惊人的中年网工8 小时前
做 AI 应用怎么选大模型 API?选项应该看哪几点?
人工智能·ai·大模型