oracle+olh+hive,hadoop+hive+hbase的简单安装 | YallonKing
hadoop+hive+hbase的简单安装
hadoop、hive、hbase下载地址:http://mirror.bit.edu.cn/apache/
(一)hadoop安装:
解压hadoop-0.20.2.tar.gz
#tar xf hadoop-0.20.2.tar.gz
在目录 /root/hadoop-0.20.2/conf 下修改文件 hadoop-env.sh
添加:
export JAVA_HOME=/usr
--根据自己具体情况
在目录 /root/hadoop-0.20.2/conf 下修改文件 hdfs-site.xml
fs.default.name
hdfs://oraking:9000
mapred.job.tracker
hdfs://oraking:9001
dfs.replication
1
hadoop.tmp.dir
/root/data
在目录 /root/hadoop-0.20.2/conf 下修改以下2个文如下:
--此处为主机名
配置ssh互信
参考以下命令:
ssh-keygen -t rsa
将生成的私钥cp到 /root/.ssh/authorized_keys
如下:
运行hadoop
格式化文件系统
[root@oraking hadoop-0.20.2]# bin/hadoop namenode -format
启动hadoop守护进程
[root@oraking hadoop-0.20.2]# bin/start-all.sh
(二)安装hive
解压文件:hive-0.7.1.tar.gz
修改root环境变量,添加以下:
HADOOP_HOME=/root/hadoop-0.20.2
PATH=$PATH:$HADOOP_HOME/bin
HIVE_INSTALL=/root/hive-0.7.1
PATH=$PATH:$HIVE_INSTALL/bin
export HADOOP_HOME
export HIVE_INSTALL
export PATH
测试hive
(三)hbase的安装
解压 hbase-0.19.3
编辑文件
[root@oraking hbase-0.19.3]# cat conf/hbase-env.sh 添加以下:
export JAVA_HOME=/usr
export HBASE_CLASSPATH=/root/hadoop-0.20.2/conf
编辑文件 [root@oraking hbase-0.19.3]# cat conf/hadoop-site.xml 添加以下:
fs.default.name
hdfs://oraking:9000
mapred.job.tracker
hdfs://oraking:9001
dfs.replication
1
hadoop.tmp.dir
/root/data
[root@oraking hbase-0.19.3]# cp ../hadoop-0.20.2/conf/hdfs-site.xml conf/
[root@oraking hbase-0.19.3]# cat conf/regionservers
oraking
[root@oraking hbase-0.19.3]# cp hbase-0.19.3.jar ../hadoop-0.20.2/lib/
启动hbase
[root@oraking hbase-0.19.3]# bin/start-hbase.sh
starting master, logging to /root/hbase-0.19.3/bin/../logs/hbase-root-master-oraking.out
oraking: starting regionserver, logging to /root/hbase-0.19.3/bin/../logs/hbase-root-regionserver-oraking.out
[root@oraking hbase-0.19.3]#
oracle+olh+hive,hadoop+hive+hbase的简单安装 | YallonKing相关推荐
- hadoop(ha)hbase(双master)安装
一.软件包准备 CentOS Linux release 7.2 Linux version 3.10.0-327.el7.x86_64 jdk-7u65-linux-x64.tar.gz zook ...
- 零基础linux安装hadoop步骤,hadoop的Linux下简单安装步骤
首先安装Hadoop cluster版本: $ curl -O http://archive.cloudera.com/cdh/3/hadoop-0.20.2-cdh3u6.tar.gz $ cd / ...
- Phoenix下载、安装、配置(附hadoop、hbase版本对应关系)
目录 1 Phoenix简介 2 版本对应关系 Hadoop与Hbase版本对应关系 Hbase与Phoenix版本对应关系 我的版本 3 phoenix安装 下载 解压 复制jar包到hbase/l ...
- hadoop、hbase、hive、spark分布式系统架构原理
全栈工程师开发手册 (作者:栾鹏) 架构系列文章 机器学习.数据挖掘等各种大数据处理都离不开各种开源分布式系统,hadoop用户分布式存储和map-reduce计算,spark用于分布式机器学习,hi ...
- 大数据基础(二)hadoop, mave, hbase, hive, sqoop在ubuntu 14.04.04下的安装和sqoop与hdfs,hive,mysql导入导出
hadoop, mave, hbase, hive, sqoop在ubuntu 14.04.04下的安装 2016.05.15 本文测试环境: hadoop2.6.2 ubuntu 14.04.04 ...
- Sqoop是一款开源的工具,主要用于在HADOOP(Hive)与传统的数据库(mysql、oracle...)间进行数据的传递...
http://niuzhenxin.iteye.com/blog/1706203 Sqoop是一款开源的工具,主要用于在HADOOP(Hive)与传统的数据库(mysql.postgresql...) ...
- hadoop+HBase+ZooKeeper+Hive完全分布式集群部署安装
本文源自:https://www.cnblogs.com/linxizhifeng/p/7207655.html 1. 系统环境 1.1. 软件版本 下表为本系统环境所安装的软件的版 ...
- hadoop+zookeeper+hbase+hive
hadoop安装配置 hadoop安装文档:https://blog.csdn.net/pucao_cug/article/details/71698903 zookeeper安装文档:https:/ ...
- hadoop hive hbase 集群搭建
摘要:去年开发BI系统,其中ETL用到了Hadoop和Hive,我用三台Dell服务器,搭建了一个Hadoop集群,用于开发测试. 在接下来的几篇中,我会介绍些BI架构设计的内容,以及在开发中遇到的困 ...
最新文章
- python爬虫百度百科-python爬虫(一)_爬虫原理和数据抓取
- 俄罗斯方块:win32api开发
- AL2018届校招笔试——自然语言处理
- 长大了Java! 提出Java桌面版
- 分布式交换机配置备份和还原
- Fiddler如何查找登陆的可用cookie用于其他请求?方式一
- matlab估计arma残差,python ARIMA 时间序列
- Kubernetes网络模型概念
- Python 爬虫经常需要睡眠防止被封IP time sleep
- [转]虚函数实现原理
- 【问】安装SQL 2012R2时提示NetFx3
- Java三种方法实现字符串排序
- PTA 基础编程题目集 (参考代码)
- POJ 2387 Dijkstra
- linux 历史重大更新整理
- 气象插值软件anusplin的使用
- 42表盘直径是从哪测量_手表尺寸怎么测量的?手表尺寸测量方法
- 智能农场 阳光温湿度 检测 远程控制开关 机智云
- 陆正耀旗下宝沃汽车申请破产:无力清偿到期债务 资金链断裂
- MySQL Cursors:一个Trigger中,同时存在两个cursors的问题。