后悔没早点读!Sebastian Raschka 新书《从头开始推理》

本文较长,建议点赞收藏。更多AI大模型应用开发学习视频及资料,在智泊AI

推理模型发展正盛,著名 AI 技术博主 Sebastian Raschka 也正在写一本关于推理模型工作方式的新书《Reasoning From Scratch》。在此之前,他已经出版了多本 AI 领域的著名书籍,包括《Build a Large Language Model (From Scratch)》、《Machine Learning Q and AI》、《Machine Learning with PyTorch and Scikit-Learn》。

近日,他在自己的博客上放出了这本书的第一章,为 LLM 领域的推理进行了入门级的介绍,同时还概述了推断时间扩展和强化学习等技术方法。

本书介绍的方法将引导您完成开发小型但实用的推理模型的过程,用于教学目的。它借鉴了创建 DeepSeek R1、GPT-5 Thinking 等大规模推理模型的方法。此外,本书还包含用于加载现有预训练模型权重的代码。

目前教程正在紧锣密鼓的更新中,目录在这:

第 1 章:理解推理模型
第 2 章:使用预训练的 LLM 生成文本
第 3 章:评估推理模型
第 4 章:利用推理时间缩放改进推理
第 5 章:使用强化学习训练推理模型
第 6 章:提炼推理模型,实现高效推理
第 7 章:改进推理流程和未来方向
附录 A:参考文献和进一步阅读
附录 B:练习解答
附录 C:Qwen3 LLM 源代码
附录 D
附录 E
附录 F:LLM 评估的常见方法

下面的心理模型总结了本书涵盖的主要技术。

硬件要求

本书主要章节的代码设计主要针对消费级硬件,能够在合理的时间范围内运行,无需专门的服务器硬件。这种方法确保了广大读者能够理解本书的内容。此外,如果 GPU 可用,代码会自动利用 GPU。也就是说,第 2-4 章在 CPU 和 GPU 上都能很好地运行。对于第 5 章和第 6 章,如果想要复制本章的结果,建议使用 GPU。

学习资源推荐

如果你想更深入地学习大模型,以下是一些非常有价值的学习资源,这些资源将帮助你从不同角度学习大模型,提升你的实践能力。

本文较长,建议点赞收藏。更多AI大模型应用开发学习视频及资料,在智泊AI

相关推荐
Canace2 分钟前
最新版 Codex 工作流的问题
前端·人工智能·agent
桃西西呀13 分钟前
同一个模型 30% 到 100%?拆解 Harness 工程的 5 个机制,附 8 个坑的自检清单
人工智能·llm·ai编程
小羊4315 分钟前
从MCP到A2A:解读Agent互联协议的未来
agent
Behavior18 分钟前
Meta 发布 Muse Glimmer:30B 参数、一张 24GB 显卡就能常驻的本地 Agent 模型
llm·aigc·ai编程
吴佳浩20 分钟前
为什么现在越来越多的开源模型,都“毕业“于 Qwen?
人工智能·llm·ai编程
尘中远2 小时前
给C++工业软件搭建 Agent
开发语言·c++·qt·ai·agent
leeyi2 小时前
消息丢了怎么办:事务 Outbox 与兜底 CronJob(第106篇)
agent·ai编程·领域驱动设计
tachibana22 小时前
复杂的 RAG 范式
数据库·人工智能·ai·大模型·agent
CoderJia程序员甲3 小时前
GitHub 热榜项目 - 周榜(2026-09-06)
ai·大模型·llm·github·ai教程
梦想的颜色3 小时前
【AI速览】GPT‑6 Astra 硬核深度解析:不是噱头 AGI,而是面向端到端 Agent 工作流的前沿旗舰
gpt·大模型·openai·agent·deepseek·gpt6‑astra·大模型横评