大语言模型训练数据集(1)

CLUECorpusSmall

CLUECorpusSmall包含新闻、社区互动、维基百科、评论语料。原始数据和细节描述在这里

语料 链接

CLUECorpusSmall---- https://share.weiyun.com/sC6PMhxx

CLUECorpusSmall (BERT格式)---- https://share.weiyun.com/9SPPGUOK

News Commentary v13 (ZH-EN)

News Commentary v13包括平行语料。原始数据和细节描述在这里

语料 链接

news-Commentary-v13-en-zh---- https://share.weiyun.com/PLMxw6ae

news-Commentary-v13-zh-en---- https://share.weiyun.com/5rMwRhDi

news-Commentary-v13-en-zh_sampled---- https://share.weiyun.com/1KTxq3Dc

CIFAR100_nolabel

CIFAR100_nolabel 包括50000张没有标注的图片,可以用作无监督的预训练。原始数据在这里

语料 链接

CIFAR100_nolabel---- https://share.weiyun.com/M2tA9P8p

相关推荐
良策金宝AI4 分钟前
工程AI ≠ 通用大模型:为什么电力设计需要垂直行业模型?
大数据·人工智能
中國龍在廣州5 分钟前
李飞飞最新思考:语言模型救不了机器人
人工智能·深度学习·算法·语言模型·自然语言处理·chatgpt·机器人
Guheyunyi6 分钟前
智能巡检系统:智能化管理的安全守护者
大数据·运维·服务器·人工智能·安全
xwill*9 分钟前
3D-GENERALIST: Vision-Language-Action Models for Crafting 3D Worlds
人工智能·pytorch·python·深度学习
serve the people11 分钟前
tensorflow tf.Module 的检查点Checkpoint机制
人工智能·python·tensorflow
源码方舟11 分钟前
【AI是否能替代IT从业者?】
人工智能
茶杯67515 分钟前
极睿iClip易视频——电商短视频智能运营的革新者
大数据·人工智能
蛋王派15 分钟前
深度解析 Qwen大语言模型流程:全流程算子逻辑与维度变换详解
深度学习·机器学习·自然语言处理
Dev7z16 分钟前
基于MATLAB的风向和天气条件下污染物扩散模拟与可视化系统
人工智能·算法·matlab
LUU_7918 分钟前
Day26 评价问题介绍
人工智能·python