我正在尝试定期填充维度表，并且我想到了两种方法来为我的维度获取不同的值：
我不确定哪一种更好（更高效），或者哪一种在行业中被更广泛地采用。
我尝试使用虚拟数据进行一些测试，但我无法得到可靠的答案。
附：从源代码使用SELECT DISTINCT 不是这里的选项。
【问题讨论】：
标签： ssis data-warehouse business-intelligence bids
如果可能，我的第一选择始终是在我的源查询中更正此问题。我意识到这并不总是一种选择，但为了未来读者的完整性：我会首先检查我的源查询中是否存在创建重复项的问题。每当DISTINCT 似乎有必要时，我首先查看查询是否确实存在需要解决的问题。
我的第二个选择是DISTINCT - 如果可能的话 - 因为这是在 SQL 中解决可能比在 SSIS 中更快的情况之一；但我知道这不是你的选择。
从那时起，您可能需要尝试其余选项。除了在 SSIS 中使用聚合或排序之外，您还可以将结果转储到临时表中，然后在其源查询中使用DISTINCT 的单独数据流。聚合和排序都在 SSIS 中阻塞事务，因此使用临时表可能最终会更快 - 但对您来说最快的将取决于许多因素，包括数据的性质以及基础设施的性质。如果您使用 SSIS 选项，您可能还需要记住并行运行的其他内容，因为它们可能会占用大量内存。
如果您的数据在源或源查询中已（或可以）排序，那么下面的链接中还有一个巧妙的想法，用于使用脚本任务创建“半阻塞”版本的聚合和排序：
【讨论】：