今天在看DQN的过程中,对其反向传播的过程有些疑问,于是又复习了一边反向传播。在复习的过程中有了新的理解,在此做一下记录。
反向传播中各层参数的梯度是batch中各个样本对于各个参数的求导的和,这是通过矩阵的乘法实现的。即对batch求和获得与参数维度相同的导数 反向传播过程中对于上游层输出的导数是与之相连的各个下游节点传回的导数与相应权重的加权求和得到的。即对与每个节点连接的参数求和得到(batch, n_features)维度的导数
因篇幅问题不能全部显示,请点此查看更多更全内容
Copyright © 2019- aiwanbo.com 版权所有 赣ICP备2024042808号-3
违法及侵权请联系:TEL:199 18 7713 E-MAIL:2724546146@qq.com
本站由北京市万商天勤律师事务所王兴未律师提供法律服务