设为首页 加入收藏

TOP

Sqoop数据导出导入命令
2015-11-10 12:16:29 来源: 作者: 【 】 浏览:0
Tags:Sqoop 数据 导出 导入 命令

1. 将mysql中的数据导入到hive中


sqoop import --connect jdbc:mysql://localhost:3306/sqoop --direct --username root --password 123456 --table tb1 --hive-table tb1 --hive-import -m 1


其中--table tb1是mysql sqoop数据库中的一张表,--hive-table tb1是导入到hive中该表的名字,不需要事先建表。


2. 将hive中的数据导入到mysql中


sqoop export --connect jdbc:mysql://localhost:3306/sqoop --username root --password 123456 --direct --table t4 --export-dir /user/hive/warehouse/tb1/part-m-00000 --input-fields-terminated-by '\001'


--table t4是导入到mysql中表的名字,需要事先建表


3. 将mysql中的数据导入到hdfs中


sqoop import --connect jdbc:mysql://localhost:3306/sqoop --direct --username root --password 123456 --table tb1 -m 1


4. 将hdfs中的数据导入到mysql中


同样需先在mysql中建立tb1表


在用sqoop将mysql中的数据导入到hdfs中,曾报以下错误:


java.sql.SQLException: Streaming result set com.mysql.jdbc.RowDataDynamic@54b0a583 is still active. No statements may be issued when any streaming result sets are open and in use on a given connection. Ensure that you have called .close() on any active streaming result sets before attempting more queries.


经查询,为mysql JDBC驱动bug所致,我用的是mysql-connector-java-5.1.10-bin.jar版本的,后改为mysql-connector-java-5.1.25-bin.jar版本的就没有问题了


相关阅读


】【打印繁体】【投稿】【收藏】 【推荐】【举报】【评论】 【关闭】 【返回顶部
分享到: 
上一篇CentOS 7中如何安装MySQL Server 下一篇使用GoldenGate 实现Oracle for O..

评论

帐  号: 密码: (新用户注册)
验 证 码:
表  情:
内  容: