论文笔记: MOGRIFIER LSTM

2020 ICLR

  • 修改传统LSTM
    • 当前输入和隐藏状态充分交互,从而获得更佳的上下文相关表达

1 Mogrifier LSTM

  • LSTM的输入X和隐藏状态H是完全独立的

  • ------>论文提出了Mogrifier LSTM

      • i=0的时候,就是传统LSTM的输入和hidden state
      • i为奇数的时候,动输入x
      • i为偶数的时候,动隐藏状态h

2 实验

相关推荐
黄雪超1 天前
Flink介绍——实时计算核心论文之S4论文总结
大数据·论文阅读·flink
寻丶幽风1 天前
论文阅读笔记——RDT-1B: A DIFFUSION FOUNDATION MODEL FOR BIMANUAL MANIPULATION
论文阅读·笔记·扩散模型·具身智能·双壁机器人
开心星人3 天前
【论文阅读】Backdoor Defense via Test-Time Detecting and Repairing
论文阅读
黄雪超3 天前
Flink介绍——实时计算核心论文之Storm论文总结
大数据·论文阅读·storm
zhengdao99063 天前
【论文笔记】Kimi 1.5 技术报告
论文阅读
墨绿色的摆渡人3 天前
论文笔记(七十五)Auto-Encoding Variational Bayes
前端·论文阅读·chrome
joseanne_josie4 天前
读论文笔记-ALIGN:利用有噪声数据集扩大视觉和视觉-语言表示
论文阅读
RedMery4 天前
论文阅读笔记:Denoising Diffusion Implicit Models (2)
论文阅读·diffusion model
RedMery4 天前
论文阅读笔记:Denoising Diffusion Implicit Models (4)
论文阅读·笔记
zhengdao99064 天前
【论文笔记】Llama 3 技术报告
论文阅读·llama