神经网络之特征值与特征向量

1. 定义

给定一个方阵 (A∈Rn×n)(A \in \mathbb{R}^{n \times n})(A∈Rn×n),如果存在一个非零向量 (v≠0)(v \neq 0)(v=0) 和一个标量 (λ)(\lambda)(λ),满足
Av=λv A v = \lambda v Av=λv

那么:

  • (v)(v)(v) 称为矩阵 (A)(A)(A) 的特征向量
  • (λ)(\lambda)(λ) 称为矩阵 (A)(A)(A) 的特征值

直观理解

特征向量是经过矩阵变换 (A)(A)(A) 后,只被拉伸或缩放,而不改变方向 的向量。

特征值就是这个拉伸/缩放的倍数。


2. 几何意义

  • 对称矩阵 (A)(A)(A) 可以看作一个线性变换:把空间中的向量映射到另一个向量。

  • 特征向量对应的是变换中保持方向不变的方向。

  • 特征值告诉我们沿这个方向的伸缩程度:

    • (∣λ∣>1)(|\lambda| > 1)(∣λ∣>1):向量被拉长
    • (0<∣λ∣<1)(0 < |\lambda| < 1)(0<∣λ∣<1):向量被缩短
    • (λ<0)(\lambda < 0)(λ<0):方向反向并缩放

例如:
A=20 03,v1=1 0, v2=0 1 A = \begin{bmatrix} 2 & 0 \ 0 & 3 \end{bmatrix}, \quad v_1 = \begin{bmatrix} 1 \ 0 \end{bmatrix}, \ v_2 = \begin{bmatrix} 0 \ 1 \end{bmatrix} A=20 03,v1=1 0, v2=0 1

这里:
Av1=2v1,Av2=3v2 A v_1 = 2 v_1, \quad A v_2 = 3 v_2 Av1=2v1,Av2=3v2

所以 (v1,v2)(v_1, v_2)(v1,v2) 是特征向量,2 和 3 是特征值。几何上就是 x 方向被拉伸 2 倍,y 方向被拉伸 3 倍。


3. 计算方法

  1. 写出特征方程:
    det⁡(A−λI)=0 \det(A - \lambda I) = 0 det(A−λI)=0

    这里 (I)(I)(I) 是单位矩阵。

  2. 解这个多项式方程得到 (λ1,λ2,...,λn)(\lambda_1, \lambda_2, \dots, \lambda_n)(λ1,λ2,...,λn)(特征值)。

  3. 对每个特征值 (λ)(\lambda)(λ),解线性方程组:
    (A−λI)v=0 (A - \lambda I)v = 0 (A−λI)v=0

    得到对应的特征向量 (v)(v)(v)。


4. 特点

  • (n×n)(n \times n)(n×n) 矩阵最多有 (n)(n)(n) 个特征值(可能有重根)。

  • 对称矩阵:

    • 特征值都是实数
    • 不同特征值对应的特征向量是正交的
相关推荐
触底反弹2 小时前
🔥 前端也能玩转 AI 流式输出!从二进制流到打字机效果,一篇讲透
javascript·人工智能·node.js
腾渊信息科技公司2 小时前
工业数据运维痛点根治方案:基于AI Agent的产线自动化台账系统落地
运维·人工智能·自动化·个人开发·ai编程
西安老张(AIGC&ComfyUI)2 小时前
第030章:ComfyUI视频制作LTX-2.3模型文生视频工作流详解(三)
人工智能·aigc·comfyui
苦猿的大模型日记2 小时前
Day25 | 模型量化横评 GPTQ vs AWQ vs GGUF vs INT8——同一个 Qwen3-8B 压四遍,谁还活着
人工智能
benchmark_cc3 小时前
如何用 Python + QuantDash 快速构建高胜率“配对交易(Pairs Trading)”策略?
开发语言·人工智能·python·pandas·量化交易·quantdash
深海鱼肝油ya3 小时前
小说自动生成系统(二)
人工智能·大模型·agent·智能体·自动化编程·小说生成系统
通问AI3 小时前
Apple Intelligence 国行备案深度技术解析:阿里千问如何被集成到苹果端侧AI架构
人工智能·架构
视***间3 小时前
算力赋能零售与创意新生态:视程空间Pandora,解锁线下场景智能化无限可能
人工智能·边缘计算·智慧零售·ai算力·视程空间·创意开发
冬奇Lab3 小时前
MCP 系列(08):企业治理——Registry、路由与可观测性
人工智能·llm·mcp
冬奇Lab3 小时前
每日一个开源项目(第161篇):Open Interpreter - 开源 AI 编程 Agent,用 Rust 重写,支持 Kimi、Qwen、DeepSeek
人工智能·开源·资讯