1.HIVE简介

1.什么是HIVE

hive是基于Hadoop构建的一套数据仓库分析系统，它提供了丰富的SQL查询方式来分析存储在Hadoop分布式文件系统中的数据：

可以将结构化的数据文件映射为一张数据库表，并提供完整的SQL查询功能；

可以将SQL语句转换为MapReduce任务运行，通过自己的SQL查询分析需要的内容，这套SQL简称Hive SQL，使不熟悉mapreduce的用户可以很方便地利用SQL语言查询、汇总和分析数据。

2.HIVE特点

可扩展: Hive可以自由的扩展集群的规模，一般情况下不需要重启服务。
延展性: Hive支持用户自定义函数，用户可以根据自己需求来实现自己的函数。
容错:良好的容错性，节点出现问题SQL仍可完成执行。

2.HIVE架构

1.架构图

用户接口：Client

CLI（hive shell）
JDBC/ODBC(java访问hive)
WEBUI（浏览器访问hive）

元数据：Metastore

元数据包括：表名、表所属的数据库（默认是default࿰

一文读懂Hive(架构原理,DDL,常用函数,优化技巧)相关推荐

一文读懂贝叶斯原理（Bayes‘ theorem）
一文读懂贝叶斯原理(Bayes' theorem) 前言:贝叶斯定理是18世纪英国数学家托马斯·贝叶斯(Thomas Bayes)提出得重要概率论理论.以下摘一段 wikipedia 上的简介: 一. ...
一文读懂CDN加速原理
一文读懂CDN加速原理什么是 CDN 工作原理传统访问过程 CDN 访问过程组成要素智能调度 DNS 缓存功能服务负载均衡设备内容 Cache 服务器共享存储名词解释 CNAME记录( ...
一文读懂 SOA 架构和微服务架构的区别
点击关注公众号,回复"1024"获取2TB学习资源! 场景如果我们打开支付宝首页,去看我们的余额,它会展示你的总资产,昨日收益.累计收益等信息.假如这个页面所展示的信息,都来自各 ...
HDFS原理 | 一文读懂HDFS架构与设计
1 前言 HDFS(Hadoop Distributed File System)是我们熟知的Hadoop分布式文件系统,是一个高容错的系统,能提供高吞吐量的数据访问,非常适合大规模数据集上的应用.H ...
从单体到Flink：一文读懂数据架构的演变
导读:近年来随着开源社区的发展,越来越多新的技术被开源,例如雅虎的Hadoop分布式计算框架.UC伯克利分校的Apache Spark等,而伴随着这些技术的发展,促使着企业数据架构的演进,从传统的关系 ...
一文读懂分布式架构知识体系（内含超全核心知识大图）
作者 | 晓土阿里巴巴高级工程师姊妹篇阅读推荐:<云原生时代,分布式系统设计必备知识图谱(内含22个知识点)> 导读:本文力求从分布式基础理论.架构设计模式.工程应用.部署运维.业界方 ...
一文读懂遗传算法工作原理（附Python实现）
Datawhale干货选自:AnalyticsVidhya,编译:机器之心近日,Analyticsvidhya 上发表了一篇题为<Introduction to Genetic Algori ...
一文读懂扩散模型原理、推断加速和可控生成
在刚刚过去的2022年,扩散模型(Diffusion Models)成为了深度生成模型中新的SOTA.近期,中国人民大学助理教授李崇轩和清华大学博士生鲍凡在由智源社区主办的"2022大模型创 ...
入门必备 | 一文读懂神经架构搜索
作者 | Md Ashiqur Rahman 编译 | 刘静转载自图灵TOPIA(ID: turingtopia) 近期谷歌大脑团队发布了一项新研究:只靠神经网络架构搜索出的网络,不训练,不调参,就 ...

一文读懂Hive(架构原理,DDL,常用函数,优化技巧)