网络学习中的语境匪徒

Question

在目前的文献中，哪些算法可以用于在线学习，哪些算法不能实现？如果有人也能提供一个文件链接，我会非常感激的！谢谢你的帮助！

Answer 1

我的回答只能被认为是部分的，我还没有编译一个列表，但是我相信所有算法在此实现都是为离线模式和在线模式实现的。这一个，也可以实现在线模式。

不试图暗示你应该使用那个实现，但这是一种超越从文章中进行分析推导的活生生的证据。需要理解的是，某些CB算法与使用离线积累的数据进行训练的良性算法成对，而数学证明它们在离线培训中所遭受的损失是一个很好的预测器，可以预测它们在在线模式下所遭受的损失(如果现实世界仍然“与日志记录中的数据非常相似”)。

有些算法(除了上面提到的)可能只适用于离线训练，或者至少我不知道有一个理论上的反驳，认为一个算法可能离线训练更好，以避免直接使用同样的算法进行在线学习。但是许多算法都是在软件中编码的，只用于离线评估，因为很多研究都停留在离线测试上。所以我觉得这是个好问题！

我认为你当然应该给任何一篇对你有帮助的文章的作者发电子邮件，具体地问他们，如果这篇文章没有做到100%的话，他们甚至可能会在极少数情况下指出一个可靠的在线实现！请注意在线使用需要更多的生产准备软件考虑，并可能是额外的一英里，就软件的质量预期如此.