SQL Server 批量插入跳过主键冲突

Question

我目前正在使用 SQL Server 的本机 Bulk Insert 过程将多个表从文本文件加载到数据库中。

这一直运行良好，甚至可以优雅地处理截断、null 和格式错误。如果任何列太大，不应该为空，或者根据格式文件找到的列数不正确，则会跳过这些行并将其转发到错误文件。

然而，最近在我的一个文本文件中输入了一个重复的主键。这导致批量插入失败，没有行被转发到错误文件。

目前我的批量插入命令如下所示：

BULK INSERT table.table FROM 'data_file.txt' WITH(
    BATCHSIZE = 100000,
    CODEPAGE = 1252,
    DATAFILETYPE = 'char',
    FIRSTROW = 2,
    KEEPNULLS,
    MAXERRORS = 1000000000,
    TABLOCK,
    FORMATFILE = 'format_file.txt',
    ERRORFILE = 'error_file.txt'
)

有没有办法使用批量插入来处理主键违规，就像处理其他错误一样？理想情况下，我希望将包含 PK 违规的行转发到同一个错误文件。

Answer 1

要直接回答您的问题，否。

UNIQUE 和 PRIMARY KEY 约束始终强制执行。导入到使用 NOT NULL 约束定义的字符列时，当文本文件中没有值时，BULK INSERT 会插入一个空白字符串。

我建议您使用暂存表或临时表进行批量插入并将其从那里移动到实际表中。

BULK INSERT 不带 CHECK_CONSTRAINTS 选项还会对您的表产生其他影响：

CHECK_CONSTRAINTS

指定在大容量导入操作期间必须检查目标表或视图上的所有约束。如果没有 CHECK_CONSTRAINTS 选项，任何 CHECK 和 FOREIGN KEY 约束都会被忽略，并且在操作之后，表上的约束会被标记为不可信。

如果你不fix it之后可以negatively impact performance查询。