【问题标题】:How to insert data from a CSV file into Hive?如何将 CSV 文件中的数据插入 Hive?
【发布时间】:2018-10-02 18:54:44
【问题描述】:

我已经创建了一个表,需要从 csv 文件中插入数据。

【问题讨论】:

  • 你能提供一些你已经尝试过的例子吗?
  • 我已经创建了这个表作为例子:create table table_test(name string, last_name string) 行格式分隔字段,以'结尾,'以'\n'结尾的行存储为文本文件位置' /数据存储/文件/测试/';但我需要的是 INSERT INTO table_test(name, last_name) VALUES....所以在值中我需要从 CSV 文件中插入数据而不必创建新表

标签: hadoop hive bigdata


【解决方案1】:

例如,假设您有一个包含 3 列的表,例如员工表。

第一步:

hive> CREATE TABLE employee (id int, name string, salary double) row format delimited fields terminated by ',';

第二步:

hive> LOAD DATA LOCAL INPATH '/home/employee.csv' OVERWRITE INTO TABLE employee;

第三步:

hive> select * from employee;

【讨论】:

  • 谢谢它的工作,但我想插入而不是覆盖......我该怎么做?
  • 省略OVERWRITE
【解决方案2】:

如果您创建带有位置的外部表并将 CSV 上传到该位置目录,则可以查询它。

否则可以使用LOAD DATA命令

【讨论】:

    【解决方案3】:

    您可以使用下面给出的命令和您的 csv 文件的位置来创建表格:

    CREATE EXTERNAL TABLE base_table (
     ID int, 
     Name string,
     Contact_No bigint,
     Time_stamp string
     )
     ROW FORMAT DELIMITED
     FIELDS TERMINATED BY ','
     LOCATION '/user/hive/base_table';
    

    【讨论】:

      猜你喜欢
      • 2018-06-28
      • 2014-04-28
      • 1970-01-01
      • 2014-05-03
      • 2019-06-08
      • 2023-03-12
      • 1970-01-01
      • 2017-10-04
      • 1970-01-01
      相关资源
      最近更新 更多