【问题标题】:Importing a txt file into SQL Server with a where clause使用 where 子句将 txt 文件导入 SQL Server
【发布时间】:2016-11-16 12:43:29
【问题描述】:

我有一个 6.00 GB 的 .txt 文件。它是一个制表符分隔的文件,所以当我尝试将它加载到 SQL Server 中时,列分隔符是制表符。

我需要将 .txt 文件加载到数据库中,但我不需要 6.00 Gb 文件中的所有行。我需要能够使用像

这样的条件
select * 
into <my table> 
where column5 in ('ab, 'cd')

但这是一个文本文件,在这种情况下无法将其加载到数据库中。

谁能帮我解决这个问题?

【问题讨论】:

  • 不,您不能在 SQL Server 中本地执行此操作
  • 您是从平面文件中导入大部分行还是只导入少数几行?您正在寻找的条件是否可以很容易地完成,例如grep?如果是这样,您可以在导入数据之前对其进行过滤。否则,您可能必须导入整个文件,然后运行 ​​DELETE FROM...WHERE 语句。
  • 谢谢 BOB,我将导入大约 20% 的文件,问题是当我对平面文件进行预览时,默认列名(第 11 列)是我需要的把条件放在。该 colmn 有大约 65 个不同的名称,我需要按 2 个名称进行过滤。我可以尝试使用 Visual Studio 或任何其他工具吗?
  • 我从来没有使用过这个特殊的工具,但是在 windows tool text search 上的快速谷歌搜索产生了 WinGREP 这可能是一个快速的解决方案。
  • 嘿,我想我找到了一种方法,在 windows 中有一个类似 grep 的命令,称为 findstr,当我为 txt 文件提供该命令时,它会显示我需要该名称的所有行,所有我需要将输出存储在单独的文本文件中。有什么想法吗?

标签: sql-server import sql-server-2012 where-clause flat-file


【解决方案1】:

您是否尝试过使用 BULK INSERT 命令?看看这个解决方案:

--Create temporary table
CREATE TABLE #BulkTemporary
(
  Id int,
  Value varchar(10)
)

--BULK INSERT has no WHERE clause
BULK INSERT #BulkTemporary FROM 'D:\Temp\File.txt'
WITH (FIELDTERMINATOR = '\t', ROWTERMINATOR = '\n')

--Filter results
SELECT * INTO MyTable FROM #BulkTemporary WHERE Value IN ('Row2', 'Row3')

--Drop temporary table
DROP TABLE #BulkTemporary

希望这会有所帮助。

【讨论】:

    【解决方案2】:

    只需在暂存表中进行批量插入,然后将您实际需要的数据移到生产表中即可。 Where 子句用于根据 SQL Server 内部的特定条件执行某些操作,而不是用于将数据加载到 SQL Server 中。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2016-03-01
      • 1970-01-01
      • 1970-01-01
      • 2013-02-18
      • 1970-01-01
      • 1970-01-01
      • 2013-09-08
      相关资源
      最近更新 更多