灾难性遗忘

小何code20 天前
灾难性遗忘·ewc·终身学习
人工智能【第40篇】终身学习入门:让AI持续进化作者的话:在前面的文章中,我们学习了如何让AI在固定数据集上学习。但在现实世界中,数据是源源不断产生的——今天识别猫狗,明天要识别鸟类,后天可能还要识别新的动物品种。传统深度学习面临一个致命问题:灾难性遗忘(Catastrophic Forgetting)——当模型学习新任务时,会迅速遗忘之前学过的任务。人类可以在学习法语时不遗忘英语,但神经网络不行。终身学习(Lifelong Learning / Continual Learning)就是要解决这个问题,让AI像人类一样持续学习、终身进化。本文将带你深
这张生成的图像能检测吗7 个月前
人工智能·深度学习·计算机视觉·clip·持续学习·灾难性遗忘
(论文速读)视觉语言模型的无遗忘学习论文题目:Learning Without Forgetting for Vision-Language Models(视觉语言模型的无遗忘学习)
大千AI助手9 个月前
人工智能·深度学习·神经网络·大模型·llm·持续学习·灾难性遗忘
灾难性遗忘:神经网络持续学习的核心挑战与解决方案本文由「大千AI助手」原创发布,专注用真话讲AI,回归技术本质。拒绝神话或妖魔化。搜索「大千AI助手」关注我,一起撕掉过度包装,学习真实的AI技术!
Better Bench2 年前
持续学习·灾难性遗忘·脑启发·内存效率·海马体网络·前额叶皮层·外侧杏仁核
【博士每天一篇文献-算法】Fearnet Brain-inspired model for incremental learning阅读时间:2023-12-16年份:2017 作者:Ronald Kemker,美国太空部队;Christopher Kanan,罗切斯特大学 期刊: arXiv preprint 引用量:520 Kemker R, Kanan C. Fearnet: Brain-inspired model for incremental learning[J]. arXiv preprint arXiv:1711.10563, 2017. 提出一种名为 FearNet 的新型神经网络模型,这个模型受到大脑记忆机制的启
Better Bench2 年前
元学习·小样本学习·持续学习·灾难性遗忘·增量学习·过拟合·少量样本增量学习
【博士每天一篇文献-综述】A survey on few-shot class-incremental learning阅读时间:2023-12-19年份:2024 作者:田松松,中国科学院半导体研究所;李璐思,老道明大学助理教授;李伟军,中国科学院半导体研究所AnnLab; 期刊: Neural Networks 引用量:30 Tian S, Li L, Li W, et al. A survey on few-shot class-incremental learning[J]. Neural Networks, 2024, 169: 307-324. 是关于少量样本增量学习(Few-shot Class-Increm
Better Bench3 年前
持续学习·连续学习·灾难性遗忘·弹性权重合并·ewc
【博士每天一篇文献-算法】Overcoming catastrophic forgetting in neural networks阅读时间:2023-10-24年份:2016 作者:James Kirkpatrick, Razvan Pascanu, Neil Rabinowitz, Joel Veness, Guillaume Desjardins, Andrei A. Rusu, Kieran Milan, John Quan, Tiago Ramalho, Agnieszka Grabska-Barwinska, Demis Hassabis, Claudia Clopath, Dharshan Kumaran, Raia H
我是有底线的