ssis 中的特殊数据加载逻辑

Question

我有一个每天收到的转储文件，我想知道如何通过 ssis 和 sql server 数据库中的脚本任务加载它。转储的格式如下所述，来自

这些应该只有两个记录行，而在文件中我需要编写一个解析器，它可以实际缓冲数据并存储在列名 A B C D .... AC 中。字母是列名，= 之后的数据是需要存储在这些列中的实际数据 如果有人可以帮助我加载这些数据，我需要帮助。

<BEGIN
a=103216789021;
b=125230049;
c=TS1;
d=NON;
e=2;
d=TS1;
f=BC;
g=MIS;
H=100;
I=61005;
J=YES;
K=MC;
L=CW-ALL;
M=0;
N=CLIP;
O=ON;
P=1;
Q=90;
R=90;
S=90;
T=REE;
U=ALL;
V=0;
W=1382326697;
X=1382413166;
Y=01D81E170EE83C06;
Z=YES;
AB=NO;
AC=NO;
<END
<BEGIN
a=103216789021;
b=125230049;
c=TS1;
d=NON;
e=2;
d=TS1;
f=BC;
g=MIS;
H=100;
I=61005;
J=YES;
K=MC;
L=CW-ALL;
M=0;
N=CLIP;
O=ON;
P=1;
Q=90;
R=90;
S=90;
T=REE;
U=ALL;
V=0;
W=1382326697;
X=1382413166;
Y=01D81E170EE83C06;
Z=YES;
AB=NO;
AC=NO;
<END

Answer 1

有一种方法可以在数据流中执行此操作。但这仍然需要一些编程知识。

您将首先编写一个脚本转换，该转换读取每一行并在每次遇到<BEGIN 行时更新一个计数器。否则它不会传递<BEGIN 和<END 行。

然后它将在 = 符号上拆分传入行，并将计数器添加为 RowID 列，以便脚本转换的最终输出如下所示：

RowId   ColumnName   Value
1       a            103216789021
1       b            125230049
...and so on...
1       ac           NO
2       a            103216789021
2       b            125230049
...and so on...

然后，您使用 UNPIVOT 转换将 RowId 用于行，将 ColumnName 用于列名，将 Value 用于值。