EpipolarPose(常被简写为 epipose) CVPR 2019,**自监督3D人体姿态估计**

EpipolarPose(常被简写为 epipose)

CVPR 2019,自监督3D人体姿态估计 ,全称:Self-Supervised Learning of 3D Human Pose using Multi-view Geometry

✅ 核心亮点

训练时不需要3D标注、不需要已知相机外参,只需要多视图2D关键点标注,利用**对极几何(epipolar geometry)**做自监督;推理时可以单图输出3D人体姿态。

🧠 核心思路

  1. 输入同一场景多视角图像(≥2个相机)
  2. 2D Pose分支检测各视图2D关键点(有2D标注监督)
  3. 利用对极几何 + 三角化,同时求解相机相对位姿 + 3D人体关键点,把这个三角出来的3D作为伪标签
  4. 用伪标签去监督3D Pose分支学习;推理阶段只输入单张图,直接回归3D姿态

和传统多视图3D pose最大区别:传统方法需要标定好相机外参;EpipolarPose把相机位姿当成未知量一起优化,自监督学习。

📌 网络结构

  • Backbone:ResNet + 反卷积,输出 volumetric heatmap(体热图)
  • 两个分支:
    • 2D分支:有监督,输出2D关键点
    • 3D分支:自监督,用多视图三角化得到的3D伪标签训练
  • 损失:3D pose和三角重构3D之间的损失

⚠️ 局限

  • 训练依赖同步多视图采集数据,野外单视频没法直接用这套自监督方案
  • 尺度模糊问题(对极几何只能恢复尺度不确定的3D)
  • 在当时是弱/自监督赛道SOTA,后续被很多单目3D pose(如PoseNet、MoCoPose等)超越

📎 容易混淆同名

  1. EpiPose(欧盟新冠项目):H2020流行病建模项目,和姿态无关
  2. ePose(日本iOS体态评估APP):健身房体态打分工具,不是CV论文

如果你需要,我可以给你:

  • 论文精读笔记(公式版)
  • 代码跑通指南
  • 和 Mehta、VideoPose3D 的对比表
相关推荐
张然Adolf5 小时前
人工智能电力系统应用新手实战指南
人工智能
高洁015 小时前
数据同化与动态状态估计:让孪生持续贴合现实
人工智能·python·深度学习·transformer·迁移学习
feasibility.5 小时前
一物降一物?AI逆向没有终局:REA拆App,BLA设套,LASIK清场
人工智能·爬虫·github·逆向·skill·rea
普通人65 小时前
WebGL与WebGPU入门指南
开发语言·webgl·1024程序员节
IT古董6 小时前
AI 资讯日报 | 2026年10月25日:Kimi K3.1 Pro开源逼近前沿,OpenAI改离线训练,Claude合并Cowork,神经网络黑箱获新解,具身智能竞技场落幕
人工智能·神经网络·开源
小虎AI生活6 小时前
WorkBuddy + Loomy 实操教程:装开源技能反推任意图片提示词(附完整流程与提示词包)
人工智能·超级个体·一人公司·青玥ai
Rattenking6 小时前
OpenCV 轨迹栏操作和键盘响应操作
人工智能·opencv·计算机外设
科研邪修法6 小时前
混合方法文献矩阵:先拆字段,再确定分类
人工智能·深度学习
电科_银尘6 小时前
【深度学习项目实战·30】PM2.5短期预测:用LSTM构造没有未来信息的滑动窗口
人工智能·深度学习·lstm
汤姆宝库6 小时前
LoRA的低秩数学与QLoRA实现
人工智能·深度学习·机器学习