SSIS

Question

我需要使用SSIS编写报告，将数据从SQL数据库提取到CSV文件中。

数据是本周的销售额和去年同期的销售额。

我编写了一个包含两个数据流任务的SSIS包，一个任务将数据加载到持久化表中，另一个任务将数据提取到CSV中。

问题是性能真的很差。本周，我们将看到大约1000份销售记录，但去年同期的销售记录超过150万份。

同样的表在本周和去年保存，因此它几乎是相同的查询，但具有不同的日期参数。

到目前为止，我已经尝试过：

1. 一个查询与两个CTE的连接。性能为45分钟(
2. )，只为今年的数据插入到表中，并单独更新以添加去年的数据。操作花了20分钟。
3. 两个SQL源，它们具有NOLOCK提示，然后排序并与合并联接连接。我原希望两人都能并行运行，但45分钟后我就停止了。

即使有选项2在20分钟，它将是大约4倍比任何其他SSIS软件包在房地产。

我的问题是，请两次从同一张表中获取数据的最佳设计实践是什么？

Answer 1

我调查过工会的所有想法，但都没成功。我需要今年和去年在同一排，并没有看到如何使它工作。

通过移除一些列并在它们上执行SSIS查找，我将其缩短到不到10分钟，这使性能提高到了一个可接受的水平。

谢谢您一直鼓励我。