pentaho的复制块是如何处理重复数据的？

Question

我试图通过五旬节的复制表向导将我的MySQL数据库复制到HANA .它自动创建了一个工作流，但是如果目标DB被部分填充，那么它会处理重复的行还是只复制它们呢？

Answer 1

“复制表”向导不分析重复项。它只是尝试在目标DB中运行一组insert语句。作为ETL开发人员，您的工作是确保重复数据被过滤掉，或者在目标DB上进行更新。检查插入/更新步骤。当然，性能要低得多，因为每行首先进行数据库查找，并根据查找结果发出insert或update。