Sqoop操作前提:关闭防火墙+开启集群保证其正常。

!!如果第一次输入命令失败,我建议再试一次,手动输入不要直接粘贴。

1.Exception:找不到 class allclo

百度了很久才找到解决办法

即在sqoop的安装目录下执行这句话

./bin/sqoop export --connect jdbc:mysql://localhost:3306/clothing --username root --password Root123! --table allclo --m 1 --export-dir /clo_res.txt --input-fields-terminated-by " " --bindir ./

代码解释

./bin/sqoop export \
--connect jdbc:mysql://localhost:3306/clothing \  # localhost可换,看自己MySQL的权限,一般是这个;我的数据库为clothing
--username root --password Root123! \   #填写自己的密码
--table allclo \ # 我的表为allclo
--m 1 \
--export-dir /clo_res.txt \  # 从HDFS上哪个文件导出数据
--input-fields-terminated-by " " \  # 分隔符为空格,可修改为自己的分隔符
--bindir ./

2.主键报错MySQLIntegrityConstraintViolationException: Duplicate entry ‘100’ for key 'PRIMARY’

在MySQL中建立表的时候

同样也是执行这句话

./bin/sqoop export --connect jdbc:mysql://localhost:3306/clothing --username root --password Root123! --table allclo --m 1 --export-dir /clo_res.txt --input-fields-terminated-by " " --bindir ./

sqoop从hdfs上导出数据到MySQL报错:ClassNotFoundException:allclo相关推荐

  1. 大批量数据写入mysql报错 #1436 Thread stack overrun

    一次插入5万条数据导致数据库报错:General error: 1436 Thread stack overrun: 246144 bytes used of a 262144 byte stack, ...

  2. mysql导出 error1290_解决MySQL导出数据到文件报错:ERROR 1290

    环境: MySQL 8.0 操作: 1. 使用SELECT .. INTO OUTFILE ,想把数据导出到txt文件中,报如下错误: ERROR 1290 (HY000): The MySQL se ...

  3. scrapy mysql 报错_scrapy爬数据存mysql报错

    最近学习python,遇到一个奇葩问题,跪求高手解答 这是数据直接存的json文件 存mysql就会报如下错误 pipeline代码如下: from twisted.enterprise import ...

  4. eclipse写程序从hdfs上下载文件到本地报错:at org.apache.hadoop.util.Shell.runCommand

    1.看看是否有配置HADOOP_HOME这个环境变量,并且在PATH里引用(比如HADOOP_HOME配置C:\hadoop-2.6.4,PATH里加%HADOOP_HOME%\bin) 2.HADO ...

  5. mysql修改路径报错_mysql修改数据存储路径报错处理

    Can't connect to local MySQL server through socket '/var/lib/mysql/mysql.sock' 解决?: >>> vim ...

  6. sqoop从HDFS导出数据到Mysql,卡在Running job: job_1571036741208_0010不动了,或者map 100% reduce 0%不动了

    用sqoop从HDFS导出数据到mysql,一直卡在Running job: job_1571036741208_0010,应该是内存太小,导致速度太慢 在 yarn-site-xml中增加下面两个, ...

  7. sqoop遇到mysql字段为保留字_关于在sqoop 导出数据到mysql数据库的过程对于空字符的处理。...

    今天在做sqoop的导入和导出的操作.在导出数据到mysql数据库的时候一直有问题,在导入空字段的时候就出现下面这个错误. WARN hdfs.DFSClient: Caught exception ...

  8. spark如何正确的删除hive外部表【删除表时同时删除hdfs上的数据】?

    在spark 2.4.x和hive 3.1.x环境下,spark通过sql (drop table xxx)删除hive的外部表,只能删除hive的元数据信息,但没有删除hdfs上的数据,导致hdfs ...

  9. HSQLDb导出数据到Mysql

    HSQLDb导出数据到Mysql 文章http://wiki.pentaho.com/display/COM/Use+Kettle+to+Migrate+Sample+Data+to+MySQL 给出 ...

最新文章

  1. centos安装anaconda_每天三分钟之TensorFlow学习03:Win下安装TF2
  2. 02-CSS基础与进阶-day7_2018-09-07-21-27-32
  3. hubliderx如选择相同单词_高考英语,十六种高效单词记忆法,建议人手一份!
  4. 《HTTP 权威指南》笔记:第十四章 安全 HTTP
  5. python自动客服排班_使用或工具的护士排班问题,在某些日子增加不同的轮班时间...
  6. 计算机网络「五」 运输层
  7. 12c rac 实例无法启动之磁盘组空间耗尽
  8. 通信原理第三章 模拟调制系统
  9. CE教程 第八章 《注入++》
  10. 金蝶k3 使用两台服务器的优势,金蝶k3报价系统优势如何,电商企业应用尤为明显...
  11. 163个人域名邮箱申请,163个人邮箱怎么注册创建
  12. Atitit 团队激励 理论与措施 目录 1. 马斯洛需求理论 1 2. 赫兹伯格双因素理论 1 3. X理论y理论 1 4. 期望理论。。 1 1.马斯洛需求理论 激励方法 福利 奖金
  13. java编写这个通讯录管理系统_Java如何实现通讯录管理系统
  14. 关于使用克莱姆法则和矩阵消元法解线性方程组的效率的比较
  15. 华为防火墙USG6309E开局基础配置之网络设置
  16. 游戏防外挂、破解解决方案
  17. tpc-c 服务器性能,TPC-E和TPC-C测试结果比较之我见
  18. android ui设计最新字体,ui用什么字体_安卓ui设计用什么字体
  19. JPG、PNG和GIF图片的基本原理及优…
  20. 如何查找mysql数据库ip_如何查看连接MYSQL数据库的IP信息

热门文章

  1. 央视被黑内幕,居然存在暴库及上传漏洞
  2. 在定时器中service注入不进去的解决方案
  3. Linux学习6-CentOS搭建appium服务
  4. dubbo + zookeeper 简介和部署
  5. 【总结】实现点击累加效果的几种方式对比
  6. 第 6 章 认知吝啬鬼
  7. CDN和CDN加速原理
  8. LeetCode 6 - ZigZag Conversion
  9. 初步学习nodejs,业余用node写个一个自动创建目录和文件的小脚本,希望对需要的人有所帮助...
  10. Ruby on Rails,创建开发用的MYSQL数据库