在模型的实际落地应用中,长尾场景呈现出高度多元化的特征。即便在当下,性能顶尖的视觉模型仍难以精准适配特定细分场景或罕见物体的检测需求。对于数据标注团队而言,罕见目标的标注工作不仅成本高昂,还面临标注难度大、周期长等现实挑战;而对于有罕见目标检测需求的科研与产品团队,以及医疗、工业质检等容错率极低的核心业务场景来说,要实现目标对象的精准检测,往往需要投入大量人力与资金进行模型定制开发。遗憾的是,多数长尾场景的市场体量相对有限,过高的定制化投入往往难以带来理想的投资回报率(ROI)。
为精准破解这一行业痛点,DINO-X 视觉大模型创新性推出定制模板功能。用户仅需提供少量标注样本,即可快速训练出高质量视觉模板(Embedding),在模型推理阶段实现对特定目标的精准识别。相较于传统模型仅能覆盖人、车、动物等通用类别,该定制模板可深度适配用户业务中的独有目标 ------ 无论是品牌 Logo、工业缺陷、异形部件,还是特殊商品等非标对象,均能高效识别,尤其在长尾类别识别、工业定制化需求、非标物体检测等复杂场景中表现突出,助力用户快速完成 AI 方案验证与落地部署。
DINO-X 团队通过打通DINO-X 开放平台与 T-Rex Label 智能标注工具,将定制模板能力深度融入数据标注环节,实现了针对长尾场景的全自动化数据标注。本文将以实操为核心,手把手带领大家完成从 0 到 1 搭建 DINO-X 定制模板,并完整演示其在目标检测与数据标注中的全流程应用。
1. 训练 DINO-X 定制模板
(1)收集需要检测的目标图片,本教程选择的是螺栓,共计 88 张图片,其中 70 张作为训练数据集,18 张作为验证数据集。具体的数量取决于目标的罕见程度和识别难度,数据集越丰富,最终检测的准确率会越高。

(2)使用 T-Rex Label 智能标注工具进行数据标注。T-Rex Label 目前提供了 2 种不同的标注方式,一种是基于 T-Rex2 模型的自动跨图标注,这种模式的优点是,T-Rex2 独特的视觉提示能够更准确地识别出同类罕见目标;另一种是基于 DINO-X/Grounding DINO 模型的全自动 AI 标注,这种模式的优点是,用户只需要输入待标注的目标名称,其余标注工作全部由 AI 自动完成。

(3)标注完成后,导出 COCO 格式标注文件。

(4)打开 DINO X 开放平台的定制模板服务,点击创建任务。

(5)输入模板名称。

(6)选择上传模式(以随机分配数据集模式为例),上传刚刚导出的数据集中的图片文件。

(7)在标注文件入口处上传数据集中的 COCO 文件。

(8)按需求选择分配比例,通常为 8:2。

(9)点击开始训练,等待上传文件。

(10)上传完成即可在列表查看训练任务进程,任务状态变为成功后,可点击查看训练结果。

2. 测试定制模板功能
(1)点击"试试这个模板",上传测试图或直接点击样例图进行测试。点击右下角 "体验 DINO X",即可跳转至模型实验室体验更多功能。

(2)模型实验室同样支持在输入框切换 Embedding。

(3)回到 DINO-X 开放平台,在复制 Embedding URL 后,还能将定制模板应用在智能标注工具 T-Rex Label 的预标注功能中,让 AI 全自动为您标注定制模板对应的目标。

3. 使用定制模板进行图像标注
(1)进入 T-Rex Label 标注平台,选择 "预标注"模式。

(2)模型选择" DINO X 定制模板"。

(3)粘贴刚刚复制的 Embedding URL 链接,并点击生成测试结果。

(4)测试结果满意即可点击 "开始预标注",并确认开始。

(5)等 AI 完成所有的数据标注以后,点击 "查看标注结果" 即可审核结果并导出相应的数据集。

