Kylo中的数据清洗

Question

我想知道是否有任何方法可以在Kylo (https://kylo.io/)中进行数据清理。我能够让工具使用数据验证规则来指出错误，但我很想知道它是否还可以执行其他功能。示例：

• 删除数据之间的任何空记录
• 检测和删除数据中的重复列

Answer 1

数据清理是在Kylo中使用标准化程序和验证器来处理的。但是，在Kylo0.9.0中，没有用于删除空行或重复列的内置函数。当前函数仅限于在特定列为空的情况下删除行，并删除重复行。

这个功能可以通过编写一个插件：http://kylo.readthedocs.io/en/latest/developer-guides/PluginApiIndex.html来添加。