hadoop sqoop 将csv文件加载到mysql中

Question

我正在学习 hadoop sqoop。我正在开发一个 hortonworks 沙箱（单节点的 hadoop 虚拟机：http://hortonworks.com/products/hortonworks-sandbox/#install）。

我正在尝试通过 sqoop 将 csv 文件加载到 mysql 表中。我在其中创建了一个数据库航班信息和一个表天气。我在 hive 中创建了一个名为 sqoop_tmp 的表，其中包含该 csv 文件的文件位置。

我使用以下命令将 csv 加载到 mysql 中：

    sqoop export --connect jdbc:mysql://localhost/flightinfo –-table weather –-export-dir /apps/hive/warehouse/sqoop_tmp

这是错误信息：

更新：@z-1 我试过你的代码，它返回了一些不同的东西

Answer 1

您必须提供 MySQL 的用户名和密码，并且必须具有访问数据库的权限。

您好像全新安装了 mysql，并且没有配置 root 帐户以使用 root 密码进​​行保护。

您可以使用以下步骤来做到这一点：

1. $ mysqladmin -u root password "newpassword" 例如$ mysqladmin -u root password mysql-root-password
2. 重新启动 MySQL 守护程序。 $ sudo service mysqld restart 或 $ sudo /etcinit.d/mysqld restart
3. 使用$ mysql -u root -P登录MySQL，并在提示时输入密码。

如果您将数据库创建为 root 用户。现在您可以发出以下 sqoop 命令将数据从 hdfs 导出到 sqoop 数据库。

$ sqoop export --connect jdbc:mysql://localhost/flightinfo --username root -P --table weather --export-dir /apps/hive/warehouse/sqoop_tmp

仍然面临权限问题？？用户访问数据库的权限是问题。

然后，您应该可以通过使用以下步骤授予权限来解决。

1. 使用$ mysql -u root -P登录MySQL

2. mysql> GRANT all PRIVILEGES on filghtinfo.* to 'root'@'localhost' IDENTIFIED BY 'password'

   注意：这里设置的密码应该是从sqoop使用的。

Answer 2

用mysql的用户名和密码试试

sqoop export --connect jdbc:mysql://localhost/flightinfo --table weather --export-dir /apps/hive/warehouse/sqoop_tmp --username SomeUser -P

注意 - 用户应该有权限。

Answer 3

试试这个：

sqoop export --connect jdbc:mysql://localhost/flightinfo --table weather --export-dir /apps/hive/warehouse/sqoop_tmp

你有–- 而不是--。这两个不一样。