sqoop的安装和使用
在sqoop使用前,应先安装好hive和zookeeper,还要在一台虚拟机里安装好mysql
1.先将zookeeper启动:zkServer.sh start,集群启动起来:start-all.sh
2.启动mysql:service mysql start
然后进入mysql的客户端:
3.在windows下安装mysql的客户端(可在西西软件园下载)
下载完成后,进入客户端
4.接下来安装sqoop-1.4.6
具体代码可参考:
tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz
mv sqoop-1.4.6.bin__hadoop-2.0.4-alpha /home/install/sqoop-1.4.6
cd /home/install/sqoop-1.4.6
vi option1
import
--connect
jdbc:mysql://node15/test
--username
root
--password
123456
--table
t_user
--columns
id,name,age
--where
1=1
--target-dir
/sqoop/data
--as-textfile
--delete-target-dir
-m
1
--fetch-size
10
--null-string
''
--lines-terminated-by
'\n'
--fields-terminated-by
','
执行:bin/sqoop --options-file option1
此时,查看http://node1:50070,看是否有t_user表
http://node1:8088,看是否出现了t_user.jar
5.接下来可查看数据:hdfs dfs -cat /sqoop/data/*
转载于:https://www.cnblogs.com/Mandylover/p/5128512.html
sqoop的安装和使用相关推荐
- Sqoop技术—安装及使用教程
一.Sqoop是干嘛的?这玩意儿啥用处? Sqoop是数据迁移的工具 <<<<<------------- 主要作用是在Hadoop和关系型数据库(muysql.orac ...
- sqoop的安装与使用,sqoop安装使用
sqoop的安装与使用,sqoop安装使用 1.什么是Sqoop Sqoop即 SQL to Hadoop ,是一款方便的在传统型数据库与Hadoop之间进行数据迁移的工具,充分利用MapReduce ...
- sqoop mysql 安装_Sqoop安装及验证_MySQL
Sqoop安装及验证环境:系统Red Hatlinux 6.4 Hadoop版本1.2.1 Sqoop版本1.4.4 Mysql数据库版本5.6.15 通过Sqoop实现Mysql /Oracle与H ...
- Sqoop的安装配置及工作机制
文章目录 @[toc] 目录: 1.简介 2.sqoop安装 2.1.下载并解压 2.2.修改配置文件 2.3.加入mysql或oracle的jdbc驱动包 2.4.验证启动 3.Sqoop的原理 3 ...
- 详解:Sqoop的安装
Sqoop安装 也可以通过外部ui来搞 ,这样可以更方便,但是我们这里是手工安装的,为了锻炼基本功 一:下载 因为我用的是CHD 版本 所以不再官网下载 百度:cdh tar > ctrl+f ...
- Sqoop的安装与简单使用
1.下载地址:http://mirrors.hust.edu.cn/apache/sqoop/1.4.6/ 2.上传安装包sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar ...
- Sqoop数据分析引擎安装与使用
Sqoop数据分析引擎安装与使用 ==>什么是Sqoop ? Sqoop 是一个开源的数据处理引擎,主要是通过 JDBC 为媒介, 在Hadoop(Hive)与 传统的关系型数据库(Orac ...
- Window 安装Sqoop 环境
第一步:下载Sqoop,官网下载地址:http://mirror.bit.edu.cn/apache/sqoop/ 下载: sqoop-1.4.7.tar.gz 第二步:将下载Sqoop.tar.gz ...
- sqoop简介与安装配置
SQOOP的描述 SQOOP是用于对数据进行导入导出的. (1)把MySQL.Oracle等数据库中的数据导入到HDFS.Hive.HBase中 (2)把HDFS.Hive.HBase中的数据导出到M ...
最新文章
- CentOS 7 学习(一) 配置LAMP和Nginx
- 分布式思想和rpc解决方案介绍
- python画图哆啦a梦-python 绘制哆啦A梦
- 疫情退票引爆的潘多拉盒子,境外旅游商家濒临倒闭
- Java中的<T>是什么?
- SegNet网络简析及caffe工程应用
- HALCON示例程序particle.hdev测量小圆部分
- hibernate保存失败_Hibernate:保存与保存并保存或更新
- finallshell使用_Finalshell软件安装使用
- python基础知识-一篇文章搞定Python全部基础知识
- Nginx 读写分离详解
- 阶段3 2.Spring_07.银行转账案例_3 分析事务的问题并编写ConnectionUtils
- 中国移动G3随e行最详教程
- 腾讯云支付平台配置掌优云音响
- php调用海康,手把手教你php对接海康api
- 宝塔安装RSSHub订阅服务
- 《MySQL DBA: InnoDB_doublewrite/ChangeBuffer/AHI/FNP》
- 使用CSS画一个扇形
- svn 锁死解除方案
- GFW 三定律,太有创意了,太真实了,胆太大,竟敢光天化日下说实话!
热门文章
- JS工具类——Select操作类
- 720p/30fps,谷歌人体分割模型Bodypix再次更新,针对Coral开发板优化
- CVPR 2019 | 步步为营!通过迭代式模糊核预测提高超分辨质量
- 超全机器学习工程师成长路线图,GitHub已收获6400+Star!
- python字符串结合操作符的使用
- python爬虫入门,10分钟就够了,这可能是我见过最简单的基础教学
- AI前沿 | Gartner曲线5大趋势:传感和移动、超能人类、自动机器人、高级人工智能…...
- Github | 人脸识别手册 (分类论文集)
- 2020年300分计算机考研能上那个学校,2020年研究生考试很难吗 网友:我考300分能读吗?...
- bulk批量下载影像