SQL Server：导入和归档每周数据

Question

任何想法/建议表示赞赏....

有人要求我想出一种简单的方法来导入我们从外部供应商处收到的新数据（文本文件）。我们得到几个文本文件，每个文件都需要导入到自己的表中。有些表必须将当前/现有数据移动到名为TABLENAME_Previous 的表中（以处理各种现有报告），然后清空当前表并将新数据导入其中。此外，现在“上一个”表中的任何数据都必须附加到存档表中。

这是一个例子：

customer.txt 来自供应商....

1. 首先我们将customers_previous的内容移动到customers_arch

2. 接下来我们将customers的内容移动到customers_previous

3. 最后我们将新的customers.txt文件导入到表customers中

有没有人编写过一个 SQL 例程来执行此操作，或者知道在哪里可以找到一个，修改起来不会太痛苦？

谢谢

Answer 1

你可以试试这样的：

将您以前的数据复制到存档

Insert into customers_arch select * from customers_previous

将您的客户数据复制到上一个：

truncate table customers_previous;
insert into customers_previous select * from customers

然后要加载您的文本文件，请在清除后使用 Bulk Insert 加载您的客户表。

truncate table customers;
bulk    insert customers
from    'd:\yourfolder\customers.txt'
WITH   
      (  
         FIELDTERMINATOR =',',  
         ROWTERMINATOR ='\n'  
      );

更新： 好的，Brian，回答你的另一个问题，如何为保存在 WeeklyTable 中的多个文件运行它。

假设你的 WeeklyTable 是这样的：

Declare @WeeklyTable TABLE(ID int Identity(1,1), [FileName] varchar(50))
insert into @WeeklyTable Values
('Customers'),('Orders'), ('Order_Details')

您可以创建一个动态查询来为每个文件运行脚本。

Declare @Template varchar(max)
Set @Template = '
    -- Start of [[FILENAME]] --------------------
    Insert into [FILENAME]_arch select * from [FILENAME]_previous
    GO

    truncate table [FILENAME]_previous;
    insert into [FILENAME]_previous select * from [FILENAME]
    GO

    truncate table [FILENAME];
    bulk    insert [FILENAME]
    from    ''d:\yourfolder\[FILENAME].txt''
    WITH   
          (  
             FIELDTERMINATOR ='','',  
             ROWTERMINATOR =''\n''  
          );


'
Declare @s varchar(max)
Declare @FileName varchar(50)
Declare @ID int =0

Select TOP 1 @ID=ID, @FileName=[FileName] From @WeeklyTable Where ID>@ID order by ID
While @@ROWCOUNT>0 Begin
    Set @s = REPLACE(@Template, '[FILENAME]', @FileName)
    Print @s
--  EXEC(@s)  -- Uncomment to EXEC the script.
    Select TOP 1 @ID=ID, @FileName=[FileName] From @WeeklyTable Where ID>@ID order by ID
End