对接FusionInsight HD 6.5.1
登录
source /opt/client/bigdata_env
kinit admin
或者kinit user1
修改hosts文件
内容如下:
192.168.171.71 hw003
192.168.171.61 hw002
idea相关配置
在com.huawei.bigdata.hdfs.examples.HdfsExample
类中有实例代码,修改变量PRNCIPAL_NAME
为当前集群的用户名,同时将文件user.keytab
拷贝到conf
文件夹中。
在导入FusionInsight_Cluster_1_HDFS_Client\FusionInsight_Cluster_1_HDFS_ClientConfig\HDFS\hdfs-example-security
项目时,如果遇到相关的jar包导入不进来,需要在目录中进行寻找,并导入。
hive
- 使用客户端
beeline
- 创建数据表:
create table sales (transactionId int, customerId int, itemId int, amountPaid double) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' STORED AS TEXTFILE tblproperties("skip.header.line.count"="1") ;
- 从hdfs中导入数据到这个数据表中:
load data inpath '/tmp/ddy/sales.csv' into table sales;
- 查看数据表内容:
select * from sales;
- 查看到刚才创建的数据库:
hdfs dfs -ls /user/hive/warehouse/ddy_hive.db
- 查看刚才的导入的数据表:
对接FusionInsight HD 6.5.1相关推荐
- 快速获得CDH/CDP/华为FusionInsight HD包含的组件的版本号的方法
在使用商业发行版的过程中,由于需要确认某个特性是否被当前的版本支持,或者是在和其他的同事进行疑难问题交流时,经常会出现需要确定某个组件(比如HBase.Kafka)的版本号的情况.因此这里介绍一下快速 ...
- 学习FusionInsight HD 安装与部署文档
政府项目一般都会用到华为的项目, 所以必须学习华为的东西. 这里学习的是FusionInsight HD 6.5.1的安装与部署文档. 相关文档可以在华为官网下载. 1. FusionInsigh ...
- 华为大数据平台FusionInsight HD部署中遇到的问题汇总
1.下载华为的FusionInsight 版本配置规划工具,有关浮动IP的填写(不需要自己手动去机器上进行配置): 与集群节点的IP处于同一网段,且唯一.即该IP地址在该网段没有节点使用.在服务器上P ...
- fusioninsight HD连接hive
安全模式 windows环境下连接: 我使用的是pyhive连接方式,还需下载sasl包(本地下载不下来,要到指定网站去下),连接hiveserver一直报错: from pyhive import ...
- 带你认识FusionInsight Flink:既能批处理,又能流处理
摘要:本文主要介绍了FusionInsight Flink组件的基本原理.Flink任务提交的常见问题.以及最佳实践FAQ. 本文分享自华为云社区<FusionInsight HD Flink组 ...
- Presto对接安全的大数据生产环境
说明 Presto是一个开源的分布式SQL查询引擎,适用于交互式分析查询,数据量支持GB到PB字节. Presto的设计和编写完全是为了解决像Facebook这样规模的商业数据仓库的交互式分析和处理速 ...
- FusionInsight LibrA V100R002C80SPC300安装指南
FusionInsight LibrA是企业级的大规模并行处理关系型数据库.FusionInsight LibrA采用MPP(Massive Parallel Processing)架构,支持行存储与 ...
- 手把手教你如何配置DBeaver对接FusionInsigth MRS Spark2x
摘要:dbeaver是免费和开源为开发人员和数据库管理员通用数据库工具.本文介绍如何配置dbeaver对接FusionInsigth MRS Spark2x. 本文分享自华为云社区<DBeave ...
- FusionInsight
作者:知乎用户 链接:https://www.zhihu.com/question/33570348/answer/187976691 来源:知乎 著作权归作者所有.商业转载请联系作者获得授权,非商业 ...
最新文章
- 双列集合,往treeMap里添加元素的时候注意的事项
- 元宇宙iwemeta:元宇宙催生新的行业机会,看看你能抓住哪些机遇?
- Python 实现单例模式
- 新闻更新延时引发的学习,CACHE的利用。
- download plugin update site for offline installation
- Android9.0 setMasterVolume流程分析(二十三)
- 微服务~Consul服务注册与发现
- 一个计算器--支持去空格
- STM32——库函数版——数码管静态显示程序
- 核心单词Word List 2
- 深度学习实战 2 YOLOv5 添加CBAM、CA、ShuffleAttention注意力机制
- 袋鼠云研发手记 | 袋鼠云EasyManager的TypeScript重构纪要...
- HTML导出PDF有边框,使用jspdf导出的pdf的页面边框
- ArcGIS学习05:坐标系
- Unity-Live2d(模型参数设置,当前参数保存与恢复所保存参数, 部分位置透明度设置,自动眨眼)
- ECCV22 | ByteTrack:简单、高效、实用的多目标跟踪方法
- PIN、PAN、PIN block说明
- 普通二/三本学校程序员(搬砖工)的出路?
- 全国计算机等级考试二级教程——c语言程序设计》,格式为doc.,全国计算机等级考试二级笔试样卷C语言程序设计样本.doc...
- 多功能计算器1.0.5
热门文章
- 温故而知新:HttpApplication,HttpModule,HttpContext及Asp.Net页生命周期
- ASP.NET2.0 验证cookie详解
- TCP三次握手建立连接的过程
- ELK:kibana使用的lucene查询语法
- Linux下查看MySQL的安装路径
- Go之Beego报错RegisterModel must be run before BootStrap
- Linux之Centos允许root连接ftp
- Linux的Nginx五:进程|过程
- java 中sun.net.ftp_开发FTP不要使用sun.net.ftp.ftpClient
- jAVA not find main_java编程时出现Could not find the main class 怎么解决???