基于案例防止 SSIS 错误的最佳实践

Question

我正在使用一个相当大的基于 SSIS 的系统，我们不时遇到的问题之一是用户将输入不是大写的数据，然后出现连接问题。我们尝试创建数字键，但由于我们无法始终从源头控制数据，因此在加入非数字键时仍然会遇到问题。
我想知道防止这个问题的最佳方法是什么？有没有办法让 SSIS 不区分大小写？还是将所有 SQL Server 输出设置为上限的排序规则？

Answer 1

您有几种可能的解决方案。第一个也是最好的方法是修复底层数据库，使其不接受小写字母，但在该字段上设置与它所连接的字段相同的排序规则。现在这可能会影响应用程序，并且用户将收到更多错误，因为他们将不再能够输入小写字母，因此您需要向他们解释更改将带来什么以及为什么需要更改。还是看目的地，真的需要大写吗？或者他们可以添加一个触发器来大写该字段，这样对于应用程序或用户来说数据已更改是不透明的，然后他们将不会收到错误。这会稍微减慢插入速度，但可能不足以引起注意，除非所有数据都来自非常大的导入。

很遗憾，您可能无权更改数据库，而这些人的担忧会推翻您的建议。在这种情况下，您可以通过多种方式之一调整 SSIS 包以自动转换为大写。

如果您使用查询作为数据源（或在查找中），则将 UPPER(fieldname) 而不是 fieldname 添加到联接中。这可能会减慢一些速度（这就是为什么第一个解决方案是首选解决方案的原因。）它是否会减慢速度到无法接受的程度，只有在您尝试之后才能发现。

如果你在做合并连接，在合并之前，在合并连接之前添加一个数据转换任务，并将字段转换为大写。这也可能会导致一些缓慢。