Sqoop 导入不适用于蜂巢镶木地板

Question

在 Sqoop-Hive 导入中捕获更改数据

我正在尝试使用 Sqoop 进行更改数据捕获，但是当我编写 -as-parquet 我的 Sqoop 导入命令时它正在下降。但是从我的 Sqoop 命令中删除 -as-parquet 后它正在工作并将数据放入文本中在 hive 表中格式化，但希望在 parquet hive 表中。

我想根据我的数据进行更新操作。

Answer 1

我在下面写了这个命令：

Sqoop import --connect "myoracleconntiondetails" 
             --username myuser --password mypasswd 
             --query 'select * from test_table where $CONDITIONS' 
             --hive_import --hive-database test_dase 
             --hive-table test_dase.test_table --null-string 'NULL' 
             --null-non-string '-99999' --target-dir mydir/full path 
             --split-by mycol --incremental append 
             --merge-key could -as-parquet -m -10

我收到此错误：

运行 sqoop 时出现异常：org.kitesdk.data.validationException：数据集名称 test_dase.test_table 不是字母数字（加上“”） org.kitesdk.data.validation:数据集名称test_dase.test_table不是字母数字（加''）