1.首先关闭机器上之前配置的分布式Hadoop

  命令: (在hadoop的安装目录中)  sbin/stop-dfs.sh

               

  关闭: yarn   命令:  sbin/stop-yarn.sh

2.先使用hadoop-senior.zuoyan.com 上的 伪分布式Hadoop进行配置 Hive (将需要的文件上传到服务器上)

2.1 启动 hdfs

     

2.2 启动yarn

          

2.3 将secondaryNamenode 停止掉  节省点内存  命令:sbin/hadoop-daemon.sh stop secondarynamenode

     

   2.4 启动historyserver

      命令: sbin/mr-jobhistory-daemon.sh start historyserver

     

3.将Hive的安装包进行解压

        tar -zxvf apache-hive-0.13.1-bin.tar.gz -C /opt/modules/

  更改一下名称:

        mv apache-hive-0.13.1-bin/ hive-0.13.1

  

4.进入Hive解压目录中进行配置文件

    4.1  更改文件名称  将 hive-env.sh.template 更改为hive.env.sh

                   

4.2 设置Hadoop_Home   和Hive的conf

        

          这个具体的目录 根据自己的实际情况来改

4.3查看dfs文件系统上的文件目录 创建  tmp 文件目录 和 /user/hive/warehouse(如果没有这个目录,默认创建的就是这个目录,用来存放Hive中的表)

                  

       创建dfs上的目录  命令  :

                   mkdir: Cannot create directory /user/hive/warehouse. Name node is in safe mode.

        结果出现了意外 !!! Σ( ° △ °|||)︴

                 

          可以很明白的看见 在安全模式下

        执行命令   :bin/hadoop dfsadmin -safemode leave   就可以解决这个问题,然后在创建文件目录

        

           创建好文件目录后,就需要对这两个文件目录赋予权限

        命令   

        bin/hdfs dfs -chmod g+x /tmpbin/hdfs dfs -chmod g+x /user/hive/warehouse

        查看一下权限  bin/hdfs dfs -ls -R /

         

         

5.打开Hive

    使用命令: bin/hive

                      

   可以使用count(*) 命令来统计 ,可以查看出使用的就是yarn

                       

    

  

      

    

    

    

     

转载于:https://www.cnblogs.com/kangxinxin/p/9767009.html

Hive安装部署及简单测试 网页《一》相关推荐

  1. 在Centos7下Hyperledger Cello安装部署和简单使用

    超级账本Hyperledger Cello安装部署和简单使用 Cello GitHub Hyperledger Cello 帮助有效管理区块链网络. 用途 快速构建区块链即服务(BaaS)平台. 立即 ...

  2. HIVE安装部署(一)

    1.Hive 基本概念 1.1.什么是 Hive 1) Hive简介 Hive:由 Facebook 开源用于解决海量结构化日志的数据统计工具. Hive 是基于 Hadoop 的一个数据仓库工具,可 ...

  3. (第二章) hive安装之Hive安装部署

    Hive安装部署 1.Hive安装及配置 (1)把apache-hive-1.2.1-bin.tar.gz上传到linux的/opt/software目录下 (2)解压apache-hive-1.2. ...

  4. (一)win10下MySQL 8.0.23安装教程及简单测试

    文章目录 (一)win10下MySQL 8.0.23安装教程及简单测试 1.MySQL官网下载 2.配置环境变量 3.命令行cmd安装MySQL 3.1 管理员权限运行cmd 3.2 数据库初始化 3 ...

  5. flume java 安装部署_[Hadoop] Flume安装部署与简单使用

    1. Flume Flume是一个分布式的日志收集框架,针对日志数据进行采集汇总,把日志从A地方搬运到B地方去. 使用场景: RDBMS ==> Sqoop ==> Hadoop 分散在各 ...

  6. sFlow-rt 3.0流量监控工具安装部署及简单实验

    首先我敢说,现在网上没有谁的文章比我这篇实验记录更加全面.在做这个实验的过程中遇到了许多问题已经解决了,看了许多博客写的内容要不就是工具太落伍了,要不就是条理不清晰,要不就是省略了重要步骤,初学者看了 ...

  7. Hive(2):Apache Hive 安装部署

    1 元数据相关名词 1.1 Metadata Metadata即元数据.元数据包含用Hive创建的database.table.表的位置.类型.属性,字段顺序类型等元信息.元数据存储在关系型数据库中. ...

  8. python web开发c6——阿里云上ubuntu+flask+gunicorn+nginx服务器部署(一)简单测试

    简述 Nginx在服务器部署中的作用 请求通过Nginx实现反向代理,将请求提交给代理服务器.本文中只用了一台服务器,所以是代理到本机. gunicorn的作用 作为服务器代码的容器.接收Nginx的 ...

  9. 数据仓库Hive安装部署及基本操作

    Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的SQL查询功能,可以将SQL语句转换为MapReduce任务进行运行. 其优点是学习成本低,可以通过 ...

  10. Steampipe的安装部署及简单使用(附带AWS CLI的安装与使用)

    介绍 Steampipe 将 API 和服务公开为高性能关系数据库,使您能够编写基于 SQL 的查询来探索动态数据.Mods 通过使用简单 HCL 构建的仪表板.报告和控件扩展了 Steampipe ...

最新文章

  1. 2018-3-19李宏毅机器学习笔记八--HomeWork1-PM2.5 Predicition
  2. [ZJOI2015] 幻想乡战略游戏(树链剖分 + 线段树二分 + 带权重心)
  3. iPhone 12或于7月开始量产,售价4615元起
  4. 布隆过滤器速度_高并发系统一定要考虑的 Bloom Filter 布隆过滤器
  5. 攀枝花a货翡翠,晋城a货翡翠
  6. Centos下磁盘管理的常用命令记录(如查找大文件)
  7. [转]十个让你变成糟糕的程序员的行为
  8. 适合有基础的Java实战项目——坦克大战 练手实战项目
  9. HTML+CSS实现小米登录界面
  10. PHP yield简介
  11. 川土微电子 | 隔离电源的辐射抑制设计参考(四)
  12. 第10章第13节:使用iSlide的图标库往幻灯片中插入一枚图标 [PowerPoint精美幻灯片实战教程]
  13. 矩阵特征值和特征向量matlab,MATLAB计算矩阵特征值和特征向量
  14. win7打开xp共享的计算机,高手教你如何让XP与Win7系统局域网共享
  15. 如何在 Word 的方框中打勾 √ ?☑ ☒
  16. 支付宝前端团队详解基于Node.js Web框架Chair
  17. 云南省计算机云教室,“云教室”落户云南祥云这个小山村
  18. 编写Shell脚本实现用户管理
  19. 基于cocos2dx的横版动作游戏制作(二)
  20. 虚拟服务器挂千牛,云服务器挂千牛

热门文章

  1. 浅谈Js对象的概念、创建、调用、删除、修改!
  2. linux挂载win下的共享文件
  3. Lucene系列-分析器
  4. 登陆系统的设计1 - 设计用户数据表
  5. java高级多线程编程--关于线程的停止问题
  6. 百度ERNIE新突破!登顶中文医疗信息处理权威榜单CBLUE冠军
  7. 【特征选择】特征选择的通俗讲解!
  8. 【语义相似度】ESIM:语义相似度领域小模型的尊严
  9. 权重不确定的概率线性回归
  10. 【书单】NLP秘笈,从入门到进阶