Hadoop:用 hdfs 进行存储,用 MapReduce 进行计算;

所谓 hadoop 家族或 hadoop 生态圈,最根本的还是 hdfs(存储数据的文件系统)以及 MapReduce(用以操作操作数据)。hadoop 家族的其他产品,都是对二者的进一步抽象和封装。

端口号

主机名为hadoop0、

  • (1)hadoop:50070

    hadoop0:50070
  • (2)hbase:60010

    hadoop0:60010

hadoop 家族产品的下载地址

http://www-eu.apache.org/dist/**/

  • hadoop:http://www-eu.apache.org/dist/hadoop/
  • hbase:http://www-eu.apache.org/dist/hbase/
  • pig:http://www-eu.apache.org/dist/pig/
  • sqoop:http://www-eu.apache.org/dist/sqoop/
  • hive:http://www-eu.apache.org/dist/hive/
  • flume:http://www-eu.apache.org/dist/flume/

hadoop 生态圈相关推荐

  1. Hadoop生态圈-hive五种数据格式比较

    Hadoop生态圈-hive五种数据格式比较 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任.

  2. Hadoop生态圈-Flume的组件之自定义拦截器(interceptor)

    Hadoop生态圈-Flume的组件之自定义拦截器(interceptor) 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 本篇博客只是举例了一个自定义拦截器的方法,测试字节传输速 ...

  3. Hadoop生态圈-hive编写自定义函数

    Hadoop生态圈-hive编写自定义函数 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任.

  4. Hadoop生态圈一览

    根据Hadoop官网的相关介绍和实际使用中的软件集,将Hadoop生态圈的主要软件工具简单介绍下,拓展对整个Hadoop生态圈的了解. 这是Hadoop生态从Google的三篇论文开始的发展历程,现已 ...

  5. Hadoop生态圈-Hive的自定义函数之UDF(User-Defined-Function)

    Hadoop生态圈-Hive的自定义函数之UDF(User-Defined-Function) 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 转载于:https://www.cnb ...

  6. Hadoop生态圈以及各组成部分的简介

    1.Hadoop是什么? 适合大数据的分布式存储与计算平台 HDFS: Hadoop Distributed File System分布式文件系统 MapReduce:并行计算框架 2.Hadoop生 ...

  7. Hadoop生态圈-Hbase的rowKey设计原则

    Hadoop生态圈-Hbase的rowKey设计原则 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 转载于:https://www.cnblogs.com/yinzhengjie/ ...

  8. Hadoop专业解决方案-第1章 大数据和Hadoop生态圈

    一.前言: 非常感谢Hadoop专业解决方案群:313702010,兄弟们的大力支持,在此说一声辛苦了,经过两周的努力,已经有啦初步的成果,目前第1章 大数据和Hadoop生态圈小组已经翻译完成,在此 ...

  9. Hadoop生态圈-Ambari控制台功能简介

    Hadoop生态圈-Ambari控制台功能简介 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 在经历一系列安装过程之后(部署过HDP后我终于发现为什么大家喜欢用它了,部署比CDH简 ...

  10. 【转载】Apache Ranger剖析:Hadoop生态圈的安全管家

    前言 2016年,Hadoop迎来了自己十周岁生日.过去的十年,Hadoop雄霸武林盟主之位,号令天下,引领大数据技术生态不断发展壮大,一时间百家争鸣,百花齐放.然而,兄弟多了不好管,为了抢占企业级市 ...

最新文章

  1. The way to Go(6): Go程序的基本结构和要素
  2. 总结下我所学 设计模式
  3. python pip安装模块失败的原因
  4. 浅谈MySQL架构体系
  5. ABAP 实现新会话新窗口方法
  6. C#中lock死锁实例教程
  7. Java中集合(六)Queue
  8. [2019HDU多校第一场][HDU 6590][M. Code]
  9. c语言数组与指针的基础知识,C语言学习笔记之数组与指针的关系
  10. 像素/厘米与像素/英寸区别_像素/体素艺术入门指南
  11. python描述符 descriptor
  12. 画PCB四层板细节总结
  13. 禾赛科技李一帆:别让无人车的未来被一个小传感器憋死
  14. scrapy下载图片(《精通scrapy网络爬虫》第九章)
  15. VennDiagram 画文氏图/维恩图/Venn
  16. DP(Nietzsche)的hu测 T1(状压dp)
  17. 怎么学好html5和css3,如何提高你的CSS水平
  18. 如何制作VR全景图片全景图片制作教程
  19. 原生JS实现——flappy bird 像素小鸟 项目总结
  20. python按列名删除某列_python-根据熊猫中的列名删除多个列

热门文章

  1. xsync 集群同步脚本介绍(拷贝文件不同的部分)
  2. 配置多台机器SSH相互通信信任
  3. Mysql中循环拼接参数_利用循环向数据库中插入数据,参数重复的问题
  4. ideagit更新一个文件_idea使用ssh下载的git代码怎么没法更新
  5. sparksql读取mysql表的两种方式
  6. linux sqlite3使用界面,Linux 中 sqlite3 基本操作
  7. Keras——用Keras搭建分类神经网络
  8. -bash: arm-uclinuxeabi-gcc: command not found
  9. 吴宗宪经典暴笑语录(笑不死你肯定是个异类)
  10. 端到端文本检测与识别——FOTS