GUI Agent数据集收集

1、MMBench-GUI:跨平台GUI代理的分层评估框架,modelscope

我们很高兴发布MMBench-GUI,这是一个分层、多平台的基准框架和工具箱,用于评估GUI代理。MMBench-GUI包括四个评估级别:GUI内容理解、GUI元素定位、GUI任务自动化和GUI任务协作。我们还提出了集成准确性和效率的效率-质量区域(EQA)指标。MMBench-GUI为评估和指导未来GUI代理能力的发展提供了严格的标准。

数据大小:1.05G

2、 GUIAct/GUIAct-test,modelscope

45G,12.8号提交

3、huggingface

(1)TongUI

https://huggingface.co/datasets/Bofeee5675/GUI-Net-1M

有中文,手机相关操作数据。训练集80万条,570G,需要过滤出需要的数据

GUI-Net-1M is the dataset we keep running the pipeline introduced from TongUI paper. Due to large file size, we have to split image files into parts. To do the extraction of images, please use the following script:

也有基于这个数据训练好的模型:

(2)smolagents/android-control

12.2k 数据量

(3)anamhira/aitw_foundation

39.5K

(4)aitw数据集下载地址

https://modelscope.cn/datasets/russwest/AitW/files

(5)https://huggingface.co/datasets/Yuxiang007/AMEX

相关推荐
waoooqwe6 分钟前
第三方问卷样本回收平台可靠吗:风险从哪来,怎么判断
大数据·人工智能
努力的骆驼8 分钟前
【ANSYS】转子动力学分析指南(Rotordynamic Analysis Guide)第三章
人工智能·有限元·ansys·转子动力学
a努力。9 分钟前
长期记忆如何让AI真正“记住你”
人工智能
深蓝学院12 分钟前
任少卿时隔十年再出手:MM-Future让自动驾驶“走一步想十步”
人工智能·机器学习·自动驾驶
江苏久众新视13 分钟前
SOP-AI视觉装配顺序检测实战案例:基于深度学习视频分析的网关盒子装配防错与防漏方案
人工智能
蔚天灿雨19 分钟前
Agent 洗冤集录:前缀缓存 —— MCP 排序问题,如何影响模型调用的延迟与成本
人工智能·缓存·agent·harness
IT大白鼠23 分钟前
彭大帅的AI运维助手——自然语言管理 Linux 集群与网络设备——第 5 篇 · 多模态与虚拟化AI 能「看」图:多模态与虚拟化管理
linux·运维·人工智能
俊哥V26 分钟前
每日 AI 研究简报 · 2026-09-29
人工智能·ai
奕鼎竜瑆27 分钟前
MCP Connectors by Databox 新手部署与调用指南
服务器·人工智能