测试/列车自动化工具

Question

我需要测试不同的数据集以及不同的算法实现。当前工作流程如下所示：

• 从列车集合中进行特征提取
• 对这些特征进行训练分类器
• 将此分类器提供给生产代码
• 在测试集上运行生产代码，一个接一个地输入样本。
• 获取生产代码的结果并转换为与测试数据集相同的格式。
• 显示统计

如何尽可能多地自动化这一点？我目前使用了一堆bash/python脚本。我看过sklearn管道，但不确定它们是否会带来任何好处，除非在行中运行函数。

Answer 1

也许这对于这个用例来说有点太过了，但是我对气流，气流有很好的经验。

这是一个Apache项目，对自动化一些东西很有帮助。

否则，有很多商业平台帮助你。只是谷歌的数据科学平台。