本地安装kylin学习环境

本地安装kylin学习环境：
（以HDP2.5和kylin2.5.0+为例）
原理简介:HDP是一个集成的大数据环境，包括了通用的大数据组件例如MR，hive，HBASE等等，而且有统一的ambari进行管理，使用十分方便。HDP的大数据集群环境是以docker的方式在虚拟机内运行的，相当于是VMware运行的centos虚拟机内运行一个docker，docker内就是大数据集群，我们需要在docker内配合已有的大数据集群来搭建自己的kylin。涉及到docker的端口映射，大数据集群的环境设定等问题
① 下载HDP sandbox for VMware并导入虚拟机
② 开启虚拟机，以SSH方式登录，密码默认为root/Hadoop
③ Systemctl disable sandbox.service
④ 重启虚拟机
⑤ vi /root/start-scripts/start-sandbox.sh
在-p 6080:6080 \下一行添加 –p 7070:7070
注意：这一步可以添加自己需要的端口，但要注意不要和虚拟机冲突，否则会导致docker无法启动
⑥ docker rm sandbox
⑦ systemctl enable sandbox.service
⑧ 重启
⑨ 浏览器打开IP:4200，以root/hadoop登录后，会提示输入旧密码hadoop,在输入两次新的密码即可，记住此处密码，以后常用
⑩ ambari-admin-passward-reset
设置ambari的账户和密码，设置为admin/admin即可，也可自行设定
⑪ 浏览器打开IP:8080，以admin/admin登录ambari，查看各组件运行状态，并且注意，ambari并不默认开启HBASE，需手动开启，以后每次启动kylin都需要注意HBASE状态
⑫ 回到IP:4200,wget下载kylin
cd /usr/local/
wget http://mirror.bit.edu.cn/apache/kylin/apache-kylin-2.5.0/apache-kylin-2.5.0-bin-hbase1x.tar.gz
⑬ 下载后解压，设置KYLIN_HOME为解压后的目录
⑭ 注意必须单独设置SPARK_HOME，否则kylin无法启动，HDP的SPARK目录为：
/usr/hdp/2.5.0.0-1245/spark2
⑮ bin/kylin.sh start 运行kylin
bin/sample.sh 导入样例数据和模型和cube 重启kylin或重新加载元数据后可用

本地安装kylin学习环境相关推荐

win 10 下安装深度学习环境（tensorflow + pytorch, CUDA + CUDNN）
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录前言一.查看自己的电脑支持的CUDA版本二.CUDA与CUDNN的下载 1.CUDA的下载 2.CUDNN的下载 3.C ...
linux安装java学习环境(未完待续)
linux安装java学习环境数据库连接命令连接mysql数据库格式为: mysql -hip地址 -p端口号 -u root -p 输入密码例如: mysql -hlocalhost -p33 ...
超详细 WSL2安装+深度学习环境配置
超详细 WSL2安装+深度学习环境配置一点记录 ! 正式开始 ! 先决条件 WSL 启用一.命令安装二.手动安装(推荐方式) 三.设置 WSL 默认大版本四.更新 WSL2 版本(可选) 五. ...
ubuntu系统(八)：ubuntu18.04双系统安装+ros安装+各种软件安装+深度学习环境配置全家桶
0 说明 1.安装ubuntu18.04系统 1.1 ubuntu18.04镜像地址(可以用迅雷等下载): 1.2 下载Rufus: 1.3 制作镜像: 1.4 磁盘分区 1.5 关闭win11快速启 ...
golang源码安装和学习环境搭建
1).源代码安装go语言 Go的工具链采用C语言编写,要构建它,你需要安装一个C编译器; sudo apt-get install build-essential ...
Acer 暗影骑士擎安装深度学习环境
深度学习安装步骤可以概括为以下三步: 第一步安装Anaconda 1.1 可以参考史上最全最详细的Anaconda安装教程 1.2创建一个新的虚拟环境环境激活刚刚创建的环境列出你所有创建的环境 ...
暗影精灵双系统（win10和Ubuntu16.04）安装+Cuda和tensorflow安装-深度学习环境配置
参考教程一:https://blog.csdn.net/qq_42121640/article/details/80635071 参考教程二:https://blog.csdn.net/zr45992 ...
学习python环境安装_Python学习环境安装,python
1.python 安装,官网下载,之前已经安装过,这里不再说明 2.安装PyCharm 下载后双击程序安装,注意要选择(add to path),否则安装后要设置环境变量 3.安装PyCharm格式化 ...
activeperl安装不成功_手把手教你：Windows系统上安装GPU深度学习环境
前言在入手学习深度学习的过程当中,有好几个朋友都咨询过我如何安装深度学习环境,之前写过一篇在Ubuntu环境下安装深度学习环境,但是有部分朋友在Windows电脑上安装深度学习环境遇到过许多的问题, ...

本地安装kylin学习环境

本地安装kylin学习环境相关推荐

最新文章

热门文章