sqoop 导出hive数据到MySQL数据库当中

常用命令：

查看hive中表的结构： desc table_name;

查看hive中表的详细结构：desc formatted table_name;

我们想要将hive表中的数据导出到MySQL当中，MySQL中必须要有一个表来接收，并且该表的结构要和hive当中的表结构一致，不然会报错。

踩坑：hive当中的 string 字段对应 MySQL当中的 varchar 类型

直接上代码：

sqoop export --connect "jdbc:mysql://192.168.56.101:3306/dbFood?useUnicode=true&characterEncoding=utf-8" --username root --password root --table test05 --fields-terminated-by '\001' --lines-terminated-by '\t' --export-dir /hadoop/hive312/data/warehouse/test03

复制粘贴的时候建议先弄到记事本当中把代码合并成一行 --export-dir 后面有一个空格

！！！重点：如果报错就把 '\001' 替换为 ','

ip 用户名和密码等参数就不说了。

参数1：MySQL当中要接收数据的表名

参数2：要导出表的所在路径可以通过 desc formatted table_name; 查看

参数3：分隔符

sqoop 导出hive数据到MySQL数据库当中相关推荐

SQOOP 导出Hive数据到MySQL
基本知识: Sqoop导出的基本用法:https://sqoop.apache.org/docs/1.4.6/SqoopUserGuide.html#_syntax_4 的10. sqoop-exp ...
sqoop遇到mysql字段为保留字_关于在sqoop 导出数据到mysql数据库的过程对于空字符的处理。...
今天在做sqoop的导入和导出的操作.在导出数据到mysql数据库的时候一直有问题,在导入空字段的时候就出现下面这个错误. WARN hdfs.DFSClient: Caught exception ...
python操作hive数据库代码_python导出hive数据表的schema实例代码
本文研究的主要问题是python语言导出hive数据表的schema,分享了实现代码,具体如下. 为了避免运营提出无穷无尽的查询需求,我们决定将有查询价值的数据从mysql导入hive中,让他们使用H ...
Z05 - 044、Sqoop 导出 - 导出 HDFS 数据到 MySQL
初学耗时:0.5h 注:CSDN手机端暂不支持章节内链跳转,但外链可用,更好体验还请上电脑端. 一.Sqoop 导出 - 导出 HDFS 数据到 mysql 记忆词: 导出 HDFS 数据到 My ...
hive向mysql导数据_导入Hive数据导MySQL
导入Hive数据到MySQL 1. UDF 使用UDF比较方便,代码在http://svn.apache.org/repos/asf/hive/trunk/contrib/src/java/org/a ...
将Excel数据导入mysql数据库的几种方法
将Excel数据导入mysql数据库的几种方法 "我的面试感悟"有奖征文大赛结果揭晓! 前几天需要将Excel表格中的数据导入到mysql数据库中,在网上查了半天,研究了半天,总结 ...
如何将数据存入mysql_怎样将数据存入mysql数据库
怎样将数据存入mysql数据库 mip版关注:231 答案:2 悬赏:80 解决时间 2021-01-18 14:57 已解决 2021-01-17 20:37 怎样将数据存入mysql数据库 ...
从csv文件中导入数据到MySQL数据库
从csv文件中导入数据到MySQL数据库转: 一.Workbench客户端导入(8.0.11基本导不全且速度奇慢) 1.点击如下图标创建数据库(非必要) 2.在表类上右键导入二.SQL语句导入(可 ...
python实现excel数据与mysql数据库互通有无
[阅读全文] python在制作一些小工具上本身就有着得天独厚的优势,大多数非标准库的应用只需要进行简单的安装即可使用. 比如:使用python将excel中的数据导入到mysql数据库表中,或是将m ...

sqoop 导出hive数据到MySQL数据库当中

sqoop 导出hive数据到MySQL数据库当中相关推荐

最新文章

热门文章