【机器学习】模型平移不变性/等变性&归纳偏置&Attention机制

Alphafold2具有旋转不变性吗------从图像识别到蛋白结构预测的旋转对称性实现

通过Alphafold2 如何预测蛋白质结构,看有哪些机制或tricks可以利用?

一、等变Transformer

等变Transformer 是Transformer众多变体的其中一种,其强调等变性。不变性或者等变性的定义如下:

二、归纳偏置

对特定任务的模型需求,即为"归纳偏置"。

三、注意力机制

自注意力机制被运用到Transformer中,以及在AlphaFold2中也运用了各种的注意力机制

【深度学习】(1) CNN中的注意力机制(SE、ECA、CBAM),附Pytorch完整代码

在AlphaFold2中就运用了轴向注意力机制

一文看懂 Attention(本质原理+3大优点+5大类型)

相关推荐
该逃避避5 小时前
Copilot 能换成本地吗?本地化 AI 编程助手可行性全解析
人工智能·copilot
霸道流氓气质5 小时前
Spring AI Alibaba 系列总结:Java 工程师 AI 能力全景图谱
java·人工智能·spring
俊哥V5 小时前
AI 今日研究简报 · 2026-09-08
人工智能·ai
一切皆是因缘际会5 小时前
具身智能
人工智能·microsoft·生活
微三云生态系统架构师-彭丹5 小时前
区域拆分独立分红池系统设计:解决大盘分红迟滞的四维拆分引擎
大数据·人工智能
吴佳浩 Alben5 小时前
构建企业级 DevOps 排错 Agent:从日志告警到自动化修复 PR
大数据·人工智能·语言模型·架构·自动化·ai编程·devops
陈童学哦5 小时前
DeepSeek Harness实测:6个玩法,写完代码自动跑自动改
人工智能
HyperAI超神经5 小时前
机器人运动误差降低90.4%,英伟达/哈佛等提出Hydra-0,用Action Flow统一世界建模与控制
人工智能·深度学习·机器人·英伟达·世界模型
深圳元器猫5 小时前
深度解析:霍尼韦尔压力传感器如何保障AI数据中心液冷系统安全
人工智能·元器猫·霍尼韦尔压力传感器