我在通过 odbc Impala（最新版本）进行多次插入时遇到问题。
我正在尝试在具有 4 列的 Impala 表（在 Cloudera 上）中插入 2000 行，但我收到两个错误：
[Cloudera][SQLEngine] (31580) 语句长度超过最大值：16384。 [Cloudera][ImpalaODBC] (110) 在 Impala 中执行查询时出错：[HY000] : AnalysisException: Syntax error in line 1: ...
我正在使用查询参数化查询：
INSERT INTO name_table (a,b,c,d) VALUES (?,?,?,?) , (?,?,?,?) , ....
现在我的问题是：
有没有办法使用 odbc 驱动程序插入数百万行而不使用单次插入？
谢谢。
【问题讨论】：
目前，一个查询最多有 16384 个字符，这看起来应该是一个更高的限制。我们目前正在调查这个下限是否有原因。
也就是说，通过 ODBC 插入多个值的更有效方法是使用查询：
INSERT INTO name_table (a,b,c,d) VALUES (?,?,?,?)
然后使用数组绑定将多个参数集绑定到您的参数。这样，驱动程序可以在内部优化执行，而不会遇到查询长度限制。你已经试过了吗？
【讨论】：
我已经尝试执行以下代码：
OdbcCommand oComm = oConn.CreateCommand();
StringBuilder sb = new StringBuilder();
sb.AppendFormat("INSERT INTO {0}.{1} (a,b,c,d) VALUES (?,?,?,?)", dbName, tableName);
List<OdbcParameter> psl = new List<OdbcParameter>(1000 * 4);
for (int i = 0; i < 1000; i++)
{
var odbcParameter = new OdbcParameter();
odbcParameter.ParameterName = "@a";
odbcParameter.OdbcType = OdbcType.Text;
odbcParameter.Value ="a"+i;
psl.Add(odbcParameter);
odbcParameter = new OdbcParameter();
odbcParameter.ParameterName = "@b";
odbcParameter.OdbcType = OdbcType.Text;
odbcParameter.Value = "b" + i;
psl.Add(odbcParameter);
odbcParameter = new OdbcParameter();
odbcParameter.ParameterName = "@c";
odbcParameter.OdbcType = OdbcType.Text;
odbcParameter.Value = "c" + i;
psl.Add(odbcParameter);
odbcParameter = new OdbcParameter();
odbcParameter.ParameterName = "@d";
odbcParameter.Value = "d" + i;
odbcParameter.OdbcType = OdbcType.Text;
psl.Add(odbcParameter);
}
oComm.Parameters.AddRange(psl.ToArray());
oComm.CommandText = sb.ToString();
oComm.executeNonQUery();
最后，我的表仅由具有前四个参数值的一条记录组成。
我的代码有问题吗？
谢谢。
【讨论】：