sqoop从hdfs上导出数据到MySQL报错:ClassNotFoundException:allclo
Sqoop操作前提:关闭防火墙+开启集群保证其正常。
!!如果第一次输入命令失败,我建议再试一次,手动输入不要直接粘贴。
1.Exception:找不到 class allclo
百度了很久才找到解决办法
即在sqoop的安装目录下执行这句话
./bin/sqoop export --connect jdbc:mysql://localhost:3306/clothing --username root --password Root123! --table allclo --m 1 --export-dir /clo_res.txt --input-fields-terminated-by " " --bindir ./
代码解释
./bin/sqoop export \
--connect jdbc:mysql://localhost:3306/clothing \ # localhost可换,看自己MySQL的权限,一般是这个;我的数据库为clothing
--username root --password Root123! \ #填写自己的密码
--table allclo \ # 我的表为allclo
--m 1 \
--export-dir /clo_res.txt \ # 从HDFS上哪个文件导出数据
--input-fields-terminated-by " " \ # 分隔符为空格,可修改为自己的分隔符
--bindir ./
2.主键报错MySQLIntegrityConstraintViolationException: Duplicate entry ‘100’ for key 'PRIMARY’
在MySQL中建立表的时候
同样也是执行这句话
./bin/sqoop export --connect jdbc:mysql://localhost:3306/clothing --username root --password Root123! --table allclo --m 1 --export-dir /clo_res.txt --input-fields-terminated-by " " --bindir ./
sqoop从hdfs上导出数据到MySQL报错:ClassNotFoundException:allclo相关推荐
- 大批量数据写入mysql报错 #1436 Thread stack overrun
一次插入5万条数据导致数据库报错:General error: 1436 Thread stack overrun: 246144 bytes used of a 262144 byte stack, ...
- mysql导出 error1290_解决MySQL导出数据到文件报错:ERROR 1290
环境: MySQL 8.0 操作: 1. 使用SELECT .. INTO OUTFILE ,想把数据导出到txt文件中,报如下错误: ERROR 1290 (HY000): The MySQL se ...
- scrapy mysql 报错_scrapy爬数据存mysql报错
最近学习python,遇到一个奇葩问题,跪求高手解答 这是数据直接存的json文件 存mysql就会报如下错误 pipeline代码如下: from twisted.enterprise import ...
- eclipse写程序从hdfs上下载文件到本地报错:at org.apache.hadoop.util.Shell.runCommand
1.看看是否有配置HADOOP_HOME这个环境变量,并且在PATH里引用(比如HADOOP_HOME配置C:\hadoop-2.6.4,PATH里加%HADOOP_HOME%\bin) 2.HADO ...
- mysql修改路径报错_mysql修改数据存储路径报错处理
Can't connect to local MySQL server through socket '/var/lib/mysql/mysql.sock' 解决?: >>> vim ...
- sqoop从HDFS导出数据到Mysql,卡在Running job: job_1571036741208_0010不动了,或者map 100% reduce 0%不动了
用sqoop从HDFS导出数据到mysql,一直卡在Running job: job_1571036741208_0010,应该是内存太小,导致速度太慢 在 yarn-site-xml中增加下面两个, ...
- sqoop遇到mysql字段为保留字_关于在sqoop 导出数据到mysql数据库的过程对于空字符的处理。...
今天在做sqoop的导入和导出的操作.在导出数据到mysql数据库的时候一直有问题,在导入空字段的时候就出现下面这个错误. WARN hdfs.DFSClient: Caught exception ...
- spark如何正确的删除hive外部表【删除表时同时删除hdfs上的数据】?
在spark 2.4.x和hive 3.1.x环境下,spark通过sql (drop table xxx)删除hive的外部表,只能删除hive的元数据信息,但没有删除hdfs上的数据,导致hdfs ...
- HSQLDb导出数据到Mysql
HSQLDb导出数据到Mysql 文章http://wiki.pentaho.com/display/COM/Use+Kettle+to+Migrate+Sample+Data+to+MySQL 给出 ...
最新文章
- centos安装anaconda_每天三分钟之TensorFlow学习03:Win下安装TF2
- 02-CSS基础与进阶-day7_2018-09-07-21-27-32
- hubliderx如选择相同单词_高考英语,十六种高效单词记忆法,建议人手一份!
- 《HTTP 权威指南》笔记:第十四章 安全 HTTP
- python自动客服排班_使用或工具的护士排班问题,在某些日子增加不同的轮班时间...
- 计算机网络「五」 运输层
- 12c rac 实例无法启动之磁盘组空间耗尽
- 通信原理第三章 模拟调制系统
- CE教程 第八章 《注入++》
- 金蝶k3 使用两台服务器的优势,金蝶k3报价系统优势如何,电商企业应用尤为明显...
- 163个人域名邮箱申请,163个人邮箱怎么注册创建
- Atitit 团队激励 理论与措施 目录 1. 马斯洛需求理论	1 2. 赫兹伯格双因素理论	1 3. X理论y理论	1 4. 期望理论。。	1 1.马斯洛需求理论 激励方法 福利 奖金
- java编写这个通讯录管理系统_Java如何实现通讯录管理系统
- 关于使用克莱姆法则和矩阵消元法解线性方程组的效率的比较
- 华为防火墙USG6309E开局基础配置之网络设置
- 游戏防外挂、破解解决方案
- tpc-c 服务器性能,TPC-E和TPC-C测试结果比较之我见
- android ui设计最新字体,ui用什么字体_安卓ui设计用什么字体
- JPG、PNG和GIF图片的基本原理及优…
- 如何查找mysql数据库ip_如何查看连接MYSQL数据库的IP信息