Alexa的研究论文为神经网络优化提供了最佳解决方案
亚马逊的Alexa科研人员发表了一篇论文,为神经网络优化提供了理论基础。虽然该文指出,很难通过计算找到一个完美的解决方案,但它提供了一个公式“近似结构搜索问题(a-ASP)”,可以用遗传算法解决。
在最近的一篇博文中,研究工程师Adrian de Wynter把神经网络架构选择问题转换成了函数逼近;在这个公式中,函数是输入数据到输出的“真”映射,而近似是通过训练形成的神经网络模型。网络架构的选择通常基于直觉或反复试验,但是de Wynter认为,这种“任意选择的神经架构不太可能提供最佳解决方案”...