hue集成hive详解

1、下载hue压缩包
下载的方式很多，可以根据自己的偏好选择下载方式

2、解压：tar -zxvf 下载的压缩包 -C 指定的目录

3、搭建hue运行环境
hue是用Python语言，需要Py环境
yum search python | grep -i devel (找到对应的python-devel)
yum install python-devel.x86_64
然后在/root/apps/hue-4.2.0 目录下make apps会报错：
（1）出现No package ‘libffi’ found的问题
yum install -y libffi libffi-devel
（2）出现问题unable to execute gcc: No such file or directory
yum -y install gcc gcc-c++ kernel-devel
（3）出现一堆声明参数不存在的问题并提示：command ‘gcc’ failed with exit status 1
yum install gcc openssl-devel
（4）出现error: command ‘gcc’ failed with exit status 1错误，这次是关于lxml文件夹下的
yum install libxslt-devel
（5）出现问题EnvironmentError: mysql_config not found
yum -y install mysql-server mysql mysql-devel
（6）error: command ‘gcc’ failed with exit status 1
yum install gmp-devel
（7）出现问题sqlite3.h：没有那个文件或目录
yum install sqlite-devel
（8）出现问题lber.h：没有那个文件或目录 ldap.h：没有那个文件或目录的错误
yum install openldap-devel
最终make apps不报错，完成！

详情请访问：https://www.cnblogs.com/rainydayfmb/p/7004515.html

4、hive相关配置
hive-size.xml配置：

<property>
<name>hive.server2.thrift.port</name>
<value>10000</value>
</property><property>
<name>hive.server2.thrift.bind.host</name>
<value>hadoop02</value>
</property><property>
<name>hive.server2.long.polling.timeout</name>
<value>5000</value>
</property><property>
<name>hive.metastore.uris</name>
<value>thrift://hadoop02:9083</value>
</property>

5、hadoop集群的配置：解决用户访问权限的问题
core-size.xlm配置：


<property><name>hadoop.proxyuser.root.hosts</name><value>*</value>
</property><property><name>hadoop.proxyuser.root.groups</name><value>*</value>
</property>

hdfs-size.xml配置：

<property><name>dfs.webhdfs.enabled</name><value>true</value>
</property>

远程发送到集群其它节点对应目录下
scp core-site.xml hdfs-site.xml hdp02:/home/hadoop/apps/hadoop-2.7.6/etc/hadoop/
scp core-site.xml hdfs-site.xml hdp03:/home/hadoop/apps/hadoop-2.7.6/etc/hadoop/

6、hue的相关配置:
进入/root/apps/hue-4.2.0/desktop/con目录，修改 hue.ini文件
修改[beeswax]下的内容：
hive_server_host=hadoop02
hive_server_port=10000
hive_conf_dir=/root/apps/apache-hive-2.3.2-bin/conf

7、解决hue页面上database is locked 的问题：
https://www.cnblogs.com/justinyang/p/8728522.html
（1）修改数据库：
进入/root/apps/hue-4.2.0/desktop/con目录，修改 hue.ini文件
修改[[database]]的内容：
engine=mysql
host=hadoop03
port=3306
user=root
password=root
name=hive
（2）始化数据库
bin/hue syncdb
(3)然后bin/hue migrate
8、启动
（1）hive启动：
启动Hive metastore：bin/hive --service metastore &
启动hiveserver2：bin/hive --service hiveserver2 &
（2）启动hue
启动脚本：
#!/bin/sh
nohup /root/apps/hue-4.2.0/build/env/bin/hue runserver hadoop01:8000 > start.out&
停止脚本：
#!/bin/sh
ps -ef | grep hue | awk ‘{print $2}’ | xargs kill -9

到此，完成！！！！！！！！！！！！！！！！

hue集成hive详解相关推荐

HBase集成Hive详解
目录一.HBase与Hive的对比二.HBase整合Hive配置三.需求一:将Hive表当中分析的结果保存到HBase表四.需求二:创建Hive外部表,映射HBase当中已有的表模型 Hive ...
大数据技术Hbase 和 Hive 详解
目录两者的特点各自的限制应用场景大数据技术Hbase 和 Hive 详解, 今天给大家介绍一下关于零基础学习大数据视频教程之HBASE 和 HIVE 是多么重要的技术,那么两者有什么区别呢 ? ...
php java集成_PHP和Java 集成开发详解分析强强联合第1/4页
PHP和Java 集成开发详解分析强强联合第1/4页更新时间:2008年11月14日 12:28:23 作者: 很久以前,有人从www上看到看到天空上一个很亮的亮点,它就是Java语言,与此同 ...
Apache Hue: Hue集成Hive
Hue集成Hive 如果需要配置hue与hive的集成,我们需要启动hive的metastore服务以及hiveserver2服务(impala需要hive的metastore服务,hue需要hvie ...
最全面的HIVE详解
Hive简介 hive详解 hive入门必看上图是OLAP引擎整体架构图,分为三个层面:数据存储层,计算资源层以及OLAP服务层.(我们从olap引入hive,如果重点关注hive,这部分作为扩展即 ...
Apache Sentry 第一弹：Server启动、连接Hue、分组详解
2019独角兽企业重金招聘Python工程师标准>>> 前言: Sentry是Hadoop安全方面的一个开源组件,目前还在孵化中,地址:https://sentry.incubato ...
全网最详细的大数据集群环境下如何正确安装并配置多个不同版本的Cloudera Hue（图文详解）...
不多说,直接上干货! 为什么要写这么一篇博文呢? 是因为啊,对于Hue不同版本之间,其实,差异还是相对来说有点大的,具体,大家在使用的时候亲身体会就知道了,比如一些提示和界面. 全网最详细的大数据集群 ...
java docker 持续集成_最佳实战Docker持续集成图文详解
前言关于Docker的文章铺天盖地,但精品文章往往翻译居多.都说Docker天生适合持续集成/持续部署,但同样,可落地.实际可操作性的文章也很罕见. 基于这些情况,虽然我们专栏定位为运维管理性文字, ...
Hue 集成Hive
如果需要配置hue与hive的集成,我们需要启动hive的metastore服务以及hiveserver2服务(impala需要hive的metastore服务,hue需要hvie的hiveserve ...

hue集成hive详解

hue集成hive详解相关推荐

最新文章

热门文章