Sqoop-将所有表从mysql导入到配置单元

Question

我的mysql数据库中有三个表：

具有两个parent_table表的parent_table ： foo ， bar ，其中parent_table具有许多foo和bar以及foo ， bar属于parent_table 。

如何使用sqoop或另一种方法将这些表导入要查询的配置单元中。

Answer 1

这是示例：

sqoop import-all-tables \
  --connect "jdbc:mysql://quickstart.cloudera:3306/retail_db" \
  --username=retail_dba \
  --password=cloudera \
  --warehouse-dir=/user/hive/warehouse/retail_stage.db

--connect子句中的retail_db是mysql数据库–username子句中的mysql_retail_dba是有权访问retail_db下的表的mysql用户–password子句中的mysqldatabase cloudera是mysql用户的密码retail_dba /user/hive/warehouse/retail_stage.db --warehouse-dir中的hadoop目录（在本例中为hive数据库，可以有任何有效的hadoop目录）。 上面的脚本将在/user/hive/warehouse/retail_stage.db下为每个mysql表创建目录。

您可以像在Cloudera Quickstart VM中一样运行此脚本。

Answer 2

您可以先阅读《 Sqoop用户指南》 ，其中介绍了如何使用Sqoop或更多面向用例的书Apache Sqoop Cookbook 。 两种资源都应该能够帮助您了解这种情况下需要做什么。