我尝试在10M+训练数据上训练--oaa vowpal wabbit分类器,发现它只使用一个核心。有没有办法让它使用所有的12个核心?
发布于 2017-06-21 00:54:01
大众使用两个线程:一个用于加载和解析输入数据,另一个用于机器学习。大众附带了一个用于在集群(例如Hadoop)或单机(--span_server localhost)上并行执行(AllReduce)多个大众实例的spanning_tree工具。
也就是说,我认为12个内核对AllReduce来说是不够的。为了获得最佳结果,您无论如何都需要执行超参数搜索,因此您可以使用12个内核并行进行搜索。
https://stackoverflow.com/questions/44639329
复制相似问题