Hive安装部署及简单测试 网页《一》
1.首先关闭机器上之前配置的分布式Hadoop
命令: (在hadoop的安装目录中) sbin/stop-dfs.sh
关闭: yarn 命令: sbin/stop-yarn.sh
2.先使用hadoop-senior.zuoyan.com 上的 伪分布式Hadoop进行配置 Hive (将需要的文件上传到服务器上)
2.1 启动 hdfs
2.2 启动yarn
2.3 将secondaryNamenode 停止掉 节省点内存 命令:sbin/hadoop-daemon.sh stop secondarynamenode
2.4 启动historyserver
命令: sbin/mr-jobhistory-daemon.sh start historyserver
3.将Hive的安装包进行解压
tar -zxvf apache-hive-0.13.1-bin.tar.gz -C /opt/modules/
更改一下名称:
mv apache-hive-0.13.1-bin/ hive-0.13.1
4.进入Hive解压目录中进行配置文件
4.1 更改文件名称 将 hive-env.sh.template 更改为hive.env.sh
4.2 设置Hadoop_Home 和Hive的conf
这个具体的目录 根据自己的实际情况来改
4.3查看dfs文件系统上的文件目录 创建 tmp 文件目录 和 /user/hive/warehouse(如果没有这个目录,默认创建的就是这个目录,用来存放Hive中的表)
创建dfs上的目录 命令 :
mkdir: Cannot create directory /user/hive/warehouse. Name node is in safe mode.
结果出现了意外 !!! Σ( ° △ °|||)︴
可以很明白的看见 在安全模式下
执行命令 :bin/hadoop dfsadmin -safemode leave 就可以解决这个问题,然后在创建文件目录
创建好文件目录后,就需要对这两个文件目录赋予权限
命令
bin/hdfs dfs -chmod g+x /tmpbin/hdfs dfs -chmod g+x /user/hive/warehouse
查看一下权限 bin/hdfs dfs -ls -R /
5.打开Hive
使用命令: bin/hive
可以使用count(*) 命令来统计 ,可以查看出使用的就是yarn
转载于:https://www.cnblogs.com/kangxinxin/p/9767009.html
Hive安装部署及简单测试 网页《一》相关推荐
- 在Centos7下Hyperledger Cello安装部署和简单使用
超级账本Hyperledger Cello安装部署和简单使用 Cello GitHub Hyperledger Cello 帮助有效管理区块链网络. 用途 快速构建区块链即服务(BaaS)平台. 立即 ...
- HIVE安装部署(一)
1.Hive 基本概念 1.1.什么是 Hive 1) Hive简介 Hive:由 Facebook 开源用于解决海量结构化日志的数据统计工具. Hive 是基于 Hadoop 的一个数据仓库工具,可 ...
- (第二章) hive安装之Hive安装部署
Hive安装部署 1.Hive安装及配置 (1)把apache-hive-1.2.1-bin.tar.gz上传到linux的/opt/software目录下 (2)解压apache-hive-1.2. ...
- (一)win10下MySQL 8.0.23安装教程及简单测试
文章目录 (一)win10下MySQL 8.0.23安装教程及简单测试 1.MySQL官网下载 2.配置环境变量 3.命令行cmd安装MySQL 3.1 管理员权限运行cmd 3.2 数据库初始化 3 ...
- flume java 安装部署_[Hadoop] Flume安装部署与简单使用
1. Flume Flume是一个分布式的日志收集框架,针对日志数据进行采集汇总,把日志从A地方搬运到B地方去. 使用场景: RDBMS ==> Sqoop ==> Hadoop 分散在各 ...
- sFlow-rt 3.0流量监控工具安装部署及简单实验
首先我敢说,现在网上没有谁的文章比我这篇实验记录更加全面.在做这个实验的过程中遇到了许多问题已经解决了,看了许多博客写的内容要不就是工具太落伍了,要不就是条理不清晰,要不就是省略了重要步骤,初学者看了 ...
- Hive(2):Apache Hive 安装部署
1 元数据相关名词 1.1 Metadata Metadata即元数据.元数据包含用Hive创建的database.table.表的位置.类型.属性,字段顺序类型等元信息.元数据存储在关系型数据库中. ...
- python web开发c6——阿里云上ubuntu+flask+gunicorn+nginx服务器部署(一)简单测试
简述 Nginx在服务器部署中的作用 请求通过Nginx实现反向代理,将请求提交给代理服务器.本文中只用了一台服务器,所以是代理到本机. gunicorn的作用 作为服务器代码的容器.接收Nginx的 ...
- 数据仓库Hive安装部署及基本操作
Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的SQL查询功能,可以将SQL语句转换为MapReduce任务进行运行. 其优点是学习成本低,可以通过 ...
- Steampipe的安装部署及简单使用(附带AWS CLI的安装与使用)
介绍 Steampipe 将 API 和服务公开为高性能关系数据库,使您能够编写基于 SQL 的查询来探索动态数据.Mods 通过使用简单 HCL 构建的仪表板.报告和控件扩展了 Steampipe ...
最新文章
- 2018-3-19李宏毅机器学习笔记八--HomeWork1-PM2.5 Predicition
- [ZJOI2015] 幻想乡战略游戏(树链剖分 + 线段树二分 + 带权重心)
- iPhone 12或于7月开始量产,售价4615元起
- 布隆过滤器速度_高并发系统一定要考虑的 Bloom Filter 布隆过滤器
- 攀枝花a货翡翠,晋城a货翡翠
- Centos下磁盘管理的常用命令记录(如查找大文件)
- [转]十个让你变成糟糕的程序员的行为
- 适合有基础的Java实战项目——坦克大战 练手实战项目
- HTML+CSS实现小米登录界面
- PHP yield简介
- 川土微电子 | 隔离电源的辐射抑制设计参考(四)
- 第10章第13节:使用iSlide的图标库往幻灯片中插入一枚图标 [PowerPoint精美幻灯片实战教程]
- 矩阵特征值和特征向量matlab,MATLAB计算矩阵特征值和特征向量
- win7打开xp共享的计算机,高手教你如何让XP与Win7系统局域网共享
- 如何在 Word 的方框中打勾 √ ?☑ ☒
- 支付宝前端团队详解基于Node.js Web框架Chair
- 云南省计算机云教室,“云教室”落户云南祥云这个小山村
- 编写Shell脚本实现用户管理
- 基于cocos2dx的横版动作游戏制作(二)
- 虚拟服务器挂千牛,云服务器挂千牛