把MySQL里的数据导入到HDFS

　　1、使用MySQL工具手工导入

　　把MySQL的导出数据导入到HDFS的最简单方法就是，使用命令行工具和MySQL语句。

为了导出整个数据表或整个数据库的内容，MySQL提供了mysqldump工具。

　　比如

　　SELECT col1,col2 FORM TABLE

INTO OUTFILE '/tmp/out.csv'

　　FIELDS TERMINATED BY ',' , LINES TERMINATED BY '\n';

　　这个学格式就好，具体表看自己的。

　　一旦我们把数据导出到文件中，就可以用hadoop fs -put把该文件，从本地linux移到HDFS上。

　　2、使用Sqoop把MySQL里的数据导入到HDFS

　　$ sqoop import --connect jdbc:mysql://192.168.80.128/hive --username hive \ > --password hive --table employees

　　注意，这里根据自己的来，元数据库名，用户名和密码

把MySQL里的数据导入到Hive

　　$ sqoop import --connect jdbc:mysql://192.168.80.128/hive --username hive -password hive --table employees --hive-import --hive-table employees

　　更为详细，见

用Sqoop将mysql中的表和数据导入到Hive中

把HDFS里的数据导出到MySQL

　　$ sqoop export --connect jdbc:mysql://192.168.80.128/hive --username hive -password hive --table employees --export-dir edata --input-fields-terminated-by '\t‘

把HDFS里的数据导出到Hive

$ sqoop export --connect jdbc://mysql://192.168.80.128/hive -username hive -password hive --table employees --export-dir /user/hive/warehouse/employees --input-fields-terminated-by '\001' --input-lines-terminated-by '\n'

本文转自大数据躺过的坑博客园博客，原文链接：http://www.cnblogs.com/zlslch/p/6115754.html，如需转载请自行联系原作者

Hadoop Hive概念学习系列之HDFS、Hive、MySQL、Sqoop之间的数据导入导出（强烈建议去看）（十八）...相关推荐

solr mysql 导入命令_（solr系列:四）将mysql数据库中的数据导入到solr中及删除solr中导入的数据...
在前面的博文中,已完成了在tomcat中对solr的部署,为solr添加了一个自定义的core,并且引入了ik分词器. 那么该如何将本地的mysql的数据导入到solr中呢? 准备工作: 1.mysq ...
solr mysql数据注入_（solr系列:四）将mysql数据库中的数据导入到solr中
在前面的博文中,已完成了在tomcat中对solr的部署,为solr添加了一个自定义的core,并且引入了ik分词器. 那么该如何将本地的mysql的数据导入到solr中呢? 准备工作: 1.mysq ...
mysql 存储引擎和数据导入导出
存储引擎 mysql服务软件自带的功能程序,处理表的处理器每种不同的存储引擎有不同的功能和数据存储方式 show engine 查看引擎修改引擎停止服务修改配置文件 [mysqld] defa ...
第三篇：Mysql存储引擎、数据导入导出、管理表记录、匹配条件
一,存储引擎 1,Mysql工作原理 mysql服务体系结构管理工具: 命令连接池: (空闲进程.内存.CPU) SQL接口: (客户端与服务器建立连接传递SQL给my ...
利用sqoop将hive数据导入导出数据到mysql
http://niuzhenxin.iteye.com/blog/1726414 运行环境 centos 5.6 hadoop hive sqoop是让hadoop技术支持的clouder公司 ...
hive数据导入导出
Hive数据导入导出的几种方式一,Hive数据导入的几种方式首先列出讲述下面几种导入方式的数据和hive表. 导入: 本地文件导入到Hive表: Hive表导入到Hive表; HDFS文件导入到H ...
Hive 实战(1)--hive数据导入/导出基础
前沿: Hive也采用类SQL的语法, 但其作为数据仓库, 与面向OLTP的传统关系型数据库(Mysql/Oracle)有着天然的差别. 它用于离线的数据计算分析, 而不追求高并发/低延时的应用场景. ...
hive常用功能：Hive数据导入导出方式
作为数据仓库的Hive,存储着海量用户使用的数据.在平常的Hive使用过程中,难免对遇到将外部数据导入到Hive或者将Hive中的数据导出来.今天主要就来学习一下Hive的几种数据导入和导出的方式. ...
hive：建库建表、表分区、内部表外部表、数据导入导出
hive建库建表与数据导入建库 hive中有一个默认的库: 库名: default 库目录:hdfs://hdp20-01:9000/user/hive/warehouse 新建库: create ...

Hadoop Hive概念学习系列之HDFS、Hive、MySQL、Sqoop之间的数据导入导出（强烈建议去看）（十八）...

用Sqoop将mysql中的表和数据导入到Hive中

Hadoop Hive概念学习系列之HDFS、Hive、MySQL、Sqoop之间的数据导入导出（强烈建议去看）（十八）...相关推荐

最新文章

热门文章