卷积神经网络的优化设计

Question

卷积神经网络(CNN)的最佳优化器是什么？

我可以使用RMSProp作为CNN还是仅用于RNN？

Answer 1

是的，您可以使用您熟悉的can优化器。

我不认为CNN有一个最佳的优化器。在我看来最受欢迎的是亚当。然而，有些人喜欢使用带有自定义参数的普通SGD优化器。

一篇出色的文章解释了最流行的基于梯度下降的优化器之间的差异，可以找到这里。