Faces in Things数据集: 由麻省理工学院、微软等联合发布,探索人类视觉错觉的新里程碑

2024-09-24,由麻省理工学院、微软、丰田研究院、NVIDIA联合发布的 Faces in Things,为我们打开了研究人类视觉错觉------尤其是面部错觉(Pareidolia)的新篇章。专注于人类视觉系统如何在各种随机刺激中检测到类似面孔的结构,例如在咖啡污渍或天空中的云朵中看到面孔。

数据集地址:Faces in Things|计算机视觉数据集|人脸检测数据集

一、背景:

人类视觉与错觉 在人类视觉系统中,我们对检测面孔非常敏感,这在进化上具有明显的优势,比如更容易在灌木丛中发现未知的捕食者。然而,这也导致了错误的人脸检测。面部错觉(Face pareidolia)描述了在其他随机刺激中感知到类似面孔的结构的现象。

现有研究的局限 尽管人类和动物都会经历面部错觉,但这种现象在计算机视觉系统中尚未得到充分研究。

目前遇到的困难和挑战:

  1. 人类与机器的差异:人类和机器在面部错觉检测方面存在显著的行为差异。

  2. 进化需求:人类检测动物面孔的需求可能解释了这种差异的一部分。

数据集地址:Faces in Things|计算机视觉数据集|人脸检测数据集

二、让我们一起看一下Faces in Things 数据集

Faces in Things数据集:一个包含五千张网络图片的面部错觉图像数据集,利用这个数据集,研究人员检验了最先进的人脸检测器是否也会展现出面部错觉,并发现了一个显著的行为差距。

  1. 数据集的建立:首次创建了一个大规模的面部错觉数据集,为面部错觉的研究提供了直接支持。

  2. 行为差距的发现:通过实验发现,即使是最先进的人脸检测器,在没有经过专门训练的情况下,也难以很好地检测到面部错觉。

  3. 统计模型的提出:提出了一个简单的面部错觉统计模型,并通过实验验证了模型的关键预测。

数据集的构建:

  1. 样本收集:从LAION-5B数据集中采样候选错觉图像,并使用CLIP检索构建原始图像集。

  2. 详细注释:每张图片都包含了人脸的边界框和基本面部属性。

  3. 任务设计:数据集支持多种面部检测模型的研究。

  4. 数据集分割:随机将数据集分为训练集(70%)和测试集(30%)

数据集特点

  1. 多任务:"Faces in Things"数据集可以用于多种面部检测任务。

  2. 高质量:通过人工标注,确保了数据集的高质量。

  3. 跨数据集泛化:在不同的数据集上进行测试,验证了模型的泛化能力。

三、让我们一起展望 Faces in Thing数据集的应用

比如,我是一名心里咨询师。

哎呀,我之前做心理咨询的时候,遇到很多害怕社交的客人。他们一想到要跟人打交道,心就怦怦跳,紧张得不行。以前,我得用各种方法帮他们克服这种焦虑,比如角色扮演啊,慢慢习惯面对面的交流。

自从发现集成Faces in Things这个数据集的智能系统

我的工作就有了新的突破。这里面有成千上万的图片,都是些看起来像脸的东西,但又不完全是真正的脸。有的是在咖啡渍里,有的是在云彩里,反正就是各种奇奇怪怪的地方。

我用这些图片给来访者做训练。一开始,他们看到这些模糊的、像脸一样的图像,心里也是七上八下的。但慢慢地,他们开始学会怎么去分辨这些错觉,知道哪些是真的人脸,哪些只是看起来像而已。

这样做了一段时间后,来访者告诉我,他们在现实生活中好像也没那么害怕了。他们开始能更好地读懂别人的表情,知道什么时候该说话,什么时候该听。这就像是解锁了他们心里的一把锁,让他们在社交场合中更自在了。

通过这些面孔错觉的练习,我的来访者现在可以更自信地面对人群,享受社交的乐趣了。这种感觉真的是太棒了!

让我们一起走进:Faces in Things|计算机视觉数据集|人脸检测数据集

相关推荐
喝醉酒的小白8 分钟前
Elasticsearch(ES)监控、巡检及异常指标处理指南
大数据·elasticsearch·搜索引擎
强哥之神8 分钟前
Nexa AI发布OmniAudio-2.6B:一款快速的音频语言模型,专为边缘部署设计
人工智能·深度学习·机器学习·语言模型·自然语言处理·音视频·openai
yusaisai大鱼12 分钟前
tensorflow_probability与tensorflow版本依赖关系
人工智能·python·tensorflow
18号房客12 分钟前
一个简单的深度学习模型例程,使用Keras(基于TensorFlow)构建一个卷积神经网络(CNN)来分类MNIST手写数字数据集。
人工智能·深度学习·机器学习·生成对抗网络·语言模型·自然语言处理·tensorflow
神秘的土鸡20 分钟前
神经网络图像隐写术:用AI隐藏信息的艺术
人工智能·深度学习·神经网络
数据分析能量站21 分钟前
神经网络-LeNet
人工智能·深度学习·神经网络·机器学习
lucky_syq23 分钟前
Spark和Hadoop之间的区别
大数据·hadoop·spark
Jaly_W29 分钟前
用于航空发动机故障诊断的深度分层排序网络
人工智能·深度学习·故障诊断·航空发动机
小嗷犬31 分钟前
【论文笔记】Cross-lingual few-shot sign language recognition
论文阅读·人工智能·多模态·少样本·手语翻译
夜幕龙38 分钟前
iDP3复现代码数据预处理全流程(二)——vis_dataset.py
人工智能·python·机器人