安装sqoop1.4.6-cdh5.5.2
运行环境,hadoop2.6.0-cdh5.5.2
所以,下载的sqoop1.4.6也是5.5.2的版本,与之相对。
文件安装在了/usr/local/中
[root@fa01 hadoop]# tar -zxvf /home/hadoop/sqoop-1.4.6-cdh5.5.2.tar.gz -C /usr/local/
[root@fa01 hadoop]# mv ./sqoop-1.4.6-cdh5.5.2 ./sqoop-1.4.6
[root@fa01 hadoop]# chown -R hadoop:hadoop ./sqoop-1.4.6
下载JDBC,放到sqoop-1.4.6/lib目录下
[hadoop@fa01 lib]$ mv mysql-connector-java-5.1.43-bin.jar /usr/local/sqoop-1.4.6/lib
修改配置文件,拷贝一份
[hadoop@fa01 conf]$ cp sqoop-env-template.sh sqoop-env.sh
[hadoop@fa01 conf]$ vi sqoop-env.sh
#Set path to where bin/hadoop is available
export HADOOP_COMMON_HOME=/home/hadoop/hadoop-2.6.0-cdh5.5.2
#Set path to where hadoop-*-core.jar is available
export HADOOP_MAPRED_HOME=/home/hadoop/hadoop-2.6.0-cdh5.5.2
配置环境变量,添加
[hadoop@fa01 bin]$ vi /home/hadoop/.bash_profile
export SQOOP_HOME=/usr/local/sqoop-1.4.6
出现警告:
[hadoop@fa01 bin]$ ./sqoop
Warning: /home/hadoop/sqoopsqoop-1.99.7/../hbase does not exist! HBase imports will fail.
Please set $HBASE_HOME to the root of your HBase installation.
Warning: /home/hadoop/sqoopsqoop-1.99.7/../hcatalog does not exist! HCatalog jobs will fail.
Please set $HCAT_HOME to the root of your HCatalog installation.
Warning: /home/hadoop/sqoopsqoop-1.99.7/../accumulo does not exist! Accumulo imports will fail.
Please set $ACCUMULO_HOME to the root of your Accumulo installation.
Warning: /home/hadoop/sqoopsqoop-1.99.7/../zookeeper does not exist! Accumulo imports will fail.
Please set $ZOOKEEPER_HOME to the root of your Zookeeper installation.
Error: Could not find or load main class org.apache.sqoop.Sqoop
解决方式:
[hadoop@fa01 bin]$ vi configure-sqoop
把上面的四个内容都给#注释掉了,就只剩下最后的报错了。
第一步,拷贝jar包
[hadoop@fa01 sqoop-1.4.6]$ cp sqoop-1.4.6-cdh5.5.2.jar ./lib/
会依旧报错。
第二步,修改启动的配置文件
[hadoop@fa01 bin]$ cd /usr/local/sqoop-1.4.6/bin
先给sqoop做个备份。
[hadoop@fa01 bin]$ cp sqoop sqoop.bak
修改
[hadoop@fa01 bin]$ vi sqoop
添加了一段的内容
exec ${HADOOP_COMMON_HOME}/bin/hadoop jar $SQOOP_HOME/sqoop-1.4.6-cdh5.5.2.jar org.apache.sqoop.Sqoop "$@"
我到这里已经好用。
如果还报错,就把$SQOOP_HOME/下的sqoop-1.4.6-cdh5.5.2.jar放到$SQOOP_HOME/lib目录下。
连接测试:
[hadoop@fa01 bin]$ ./sqoop list-tables --connect jdbc:mysql://192.111.111.111:3306/dasename --username mysqlname --password mysqlmima
转载于:https://blog.51cto.com/feature09/1959236
安装sqoop1.4.6-cdh5.5.2相关推荐
- cdh jar包 sqoop2_安装sqoop1.4.6-cdh5.5.2
运行环境,hadoop2.6.0-cdh5.5.2 所以,下载的sqoop1.4.6也是5.5.2的版本,与之相对. 文件安装在了/usr/local/中 [root@fa01 hadoop]# ta ...
- ubuntu安装sqoop1.4.7
一.安装Sqoop 解压并修改权限 sudo tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /opt/bigdata/ cd /opt/bigda ...
- hadoop基础----hadoop实战(七)-----hadoop管理工具---使用Cloudera Manager安装Hadoop---Cloudera Manager和CDH5.8离线安装
hadoop基础----hadoop实战(六)-----hadoop管理工具---Cloudera Manager---CDH介绍 简介 我们在上篇文章中已经了解了CDH,为了后续的学习,我们本章就来 ...
- Ubuntu安装Sqoop1
安装环境: sqoop版本:1.4.6 Hadoop:2.7.2 MySQL:5.7.15 注意:sqoop1与sqoop2完全不兼容,1.4.6及之前的版本是sqoop1,之后的是sqoop2.ub ...
- CentOS7下部署CDH5.9(HA)
CentOS7下部署CDH5.9(HA) 文件下载 1.Cloudera Manager http://archive.cloudera.com/cm5/cm/5/cloudera-manager-c ...
- sqoop的安装和使用
在sqoop使用前,应先安装好hive和zookeeper,还要在一台虚拟机里安装好mysql 1.先将zookeeper启动:zkServer.sh start,集群启动起来:start-all.s ...
- 安装方式B--使用ClouderaManager的Parcels包进行安装
安装方式B–使用ClouderaManager的Parcels包进行安装 安装方式B使用从ClouderaManager依赖库下载的包进行安装.安装JDK.Agents.CDH.Managed Ser ...
- Sqoop 安装配置、指令介绍【导入、导出】
文章目录 Sqoop 原理 1.导入原理 2.导出原理 Sqoop 安装配置 1.Sqoop 安装 2.Sqoop配置 3.执行效果测试 Sqoop指令介绍 Sqoop 数据导入(import) My ...
- ubuntu安装sqoop2
注意:sqoop1与sqoop2完全不兼容,1.4.6及之前的版本是sqoop1,之后的是sqoop2.ubuntu安装sqoop1 其他环境: hadoop:2.7.2 mysql:5.7.15 s ...
最新文章
- ArrayList和LinkedList的索引问题
- nyoj116士兵杀敌2
- Postman界面了解
- Spring错误小结
- sharepoint2013以其他用户身份登录
- 黄聪:【强烈推荐】搜索引擎排名决定一切吗!
- php 查找键名,array_key_exists()函数搜索数组键名步骤详解
- Python知识点之Python进阶
- 2020 Fall Berkeley CS61A Hog
- 一篇文章带你了解jsMind
- Granger格兰杰因果关系的设计、基本假设和额外要求
- 10G SFP+万兆BIDI单纤光模块使用注意事项
- 设计师必须知道的 5个设计灵感网站
- 如何复制网页上不能复制的文本!!!
- 【指针训练——八道题】
- Cadence Allegro PCB 切换上次视图的方法图文教程及视频演示
- 我的世界java启动程下载_我的世界java正版启动器最新下载
- 华为颁奖Polar码之父,致敬基础研究和探索精神
- 堆和栈区别 java_Java中的堆和栈以及堆栈的区别
- ORA-02049:超时:分布式事务处理等待锁 问题解决
热门文章
- 模型裁剪--Rethinking the Value of Network Pruning
- 人群分析--Beyond Counting: Comparisons of Density Maps for Crowd Analysis Tasks
- 目标检测 RCNN, SPPNet, Fast RCNN, Faster RCNN 总结
- Intent和PendingIntent的区别
- LeetCode 22. Generate Parentheses--Python 解法--广度优先、深度优先解法
- LeetCode 804	Unique Morse Code Words--python,java解法
- java实现线程同步的方法_Java实现线程同步方法及原理详解
- java怎么定义字符长度_java – 当字符串长度超过列长度定义时,如何以静默方式截断字符串?...
- bottleneck resnet网络_关于ResNet及其变体的总结(上)
- Java自学路线总结,已Get腾讯Offer