深入理解强化学习——多臂赌博机：梯度赌博机算法的数学证明分类目录：《深入理解强化学习》总目录通过将梯度赌博机算法理解为梯度上升的随机近似，我们可以深人了解这一算法的本质。在精确的梯度上升算法中，每一个动作的偏好函数 H t ( a ) H_t(a) Ht(a)与增量对性能的影响成正比： H t + 1 ( a ) = H t ( a ) + α ∂ E [ R t ] ∂ H t ( a ) H_{t+1}(a)=H_t(a)+\alpha\frac{\partial E[R_t]}{\partial H_t(a)} Ht+1(a)=Ht(a)+α∂Ht(a)