我在每个迷你批次中有300个回放记忆。我见过人们计算300个回放记忆的损失,但这对我来说并不是真的有意义。300个回放记忆来自非常不同的游戏状态,为什么将预测和目标之间的300个差异合并到一个值中是有意义的?当模型反向传播时,梯度是否被分成300个分支,每个分支对应于迷你批次中的一个条目?我的策略网络输出10个动作的概率分布,或者300 x 10张量,我的目标概率分布具有相同的形状。我想找出我的预测和目标之间的交叉熵损失。我想知道我是应该在300个大小为10的张量的预测目标对之间找到300个交叉熵损失,还
我有一个很大的数据集(大约400 so ),它由张量数据(shape is (600, 600, 10))组成,我想在将这个数据集输入到一个神经网络之前对它进行规范化,但是这个数据集不适合我的记忆,所以我想知道均值和标准差的增量更新公式是这里,但我不知道如何在张量情况下调整它们,因为我不是每个新的迭代步骤只有一个值,而是一个整体张量,而且我不能取这个新张量的平均值,因为平均值并不是整个数据集的平均值。