二、A2C算法(advantage actor-critic)【也称为:TD actor-critic算法】A2C是QAC的一个推广。基本思想是它在QAC中引入了一个baseline(偏置量)来减少估计的方差(variance)。