hadoop题目（一）

一、简要描述如何安装配置一个开源hadoop，只描述即可，列出完整步骤。

　　答：①创建一个用户和用户组，用来管理hadoop项目；

　　　 ②修改确定IP地址：vim /etc/sysconfig/network-scripts/ifcfg-eth0；

　　 ③修改主机名：vim /etc/sysconfig/network

　　 ④修改host主机名和IP地址映射：vim /etc/hosts

　　　　⑤查看和关闭防火墙：service iptables status 关闭防火墙： service iptables stop

　　　　⑥安装ssh并配置免密码登录：ssh-keygen -t rsa 执行完这个命令后，会自动生成两个文件id_rsa（私钥）、id_rsa.pub（公钥）,将公钥拷贝到要免登陆的机器上：cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

　　　　⑦上传并安装jdk,修改~/.bashrc文件，配置Java环境变量

　　　　⑧安装hadoop：tar -zxvf hadoop....tar.gz

　　　　⑨配置conf文件：

　　　　对于hadoop1.* 版本（hadoop-env.sh,core-site.xml,hdfs-site.xml,mapred-site.xml）

　　　　对于hadoop2.* 版本（hadoop-env.sh,core-site.xml,hdfs-site.xml,mapred-site.xml,yarn-site.xml,salves文件）

　　　　⑩安装配置zookeeper集群

　　　　⑪格式namenode,对于hadoop1.*版本：hadoop namenode -format；对于hadoop2.* 版本：hdfs namenode -format

二、正常工作的hadoop集群中hadoop都分别需要启动哪些进程，它们的作用分别是什么？

　　　　hadoop2.*版本：会启动NameNode、DFSZKFailoverController，ResourceManager,DataNode、NodeManager、JournalNode

转载于:https://www.cnblogs.com/cherish-cxh/p/9809945.html

hadoop题目（一）相关推荐

linux hadoop etc目录,题目Linux平台下Hadoop的安装配置
1Linux平台下Hadoop的安装配置以下操作均是在虚拟机VWMare10.0平台上安装ubuntu12.04实现.首先要在ubuntu下穿件Hadoop用户. Ubuntulinux查看系统版本 ...
要做的题目-要用到hadoop资源
关于项目,我出两个练手题目: 一.多机数据处理.有 10 台机器,每台机器上保存着 10 亿个 64-bit 整数(不一定刚好 10 亿个,可能有上下几千万的浮动),一共约 100 亿个整数(其实一共 ...
hadoop大数据工程师、数据开发工程师、数据仓库工程师面试题目分享
仅限于工作年限1-3年一.HIVE岗 1.order by,distribute by,sortby的区别点击打开链接 2.内部表.外部表的区别及使用场景点击打开链接 3.讲一下hadoop生 ...
Hadoop面试45个题目及答案
1.Hadoop集群可以运行的3个模式? 单机(本地)模式伪分布式模式全分布式模式 2. 单机(本地)模式中的注意点? 在单机模式(standalone)中不会存在守护进程,所有东西都运行在一个 ...
Facebook的实时Hadoop系统
原文地址: http://blog.solrex.org/articles/facebook-realtime-hadoop-system.html 作者:杨文博 Facebook 在今年六月 SIG ...
Hadoop准备篇之（一）：Page Rank算法初探
为什么会将Page Rank放在hadoop学习笔记里,是因为hadoop课程第一周就重点提到了Google当年三大论文(GFS, Map-Reduce和Big Table)以及hadoop思想的来源 ...
python版mapreduce题目实现寻找共同好友
看到一篇不知道是好好玩还是好玩玩童鞋的博客,发现一道好玩的mapreduce题目,地址http://www.cnblogs.com/songhaowan/p/7239578.html 如图由于自己太 ...
Java开发者跳槽必备：2021阿里Java面试题目大汇总
5.高并发 6.中间件 7.之前项目经历,运用的技术,遇到的问题,如何解决,个人有什么收获和成长: 8.对于技术的热情(平时是否看些技术书籍,逛论坛,写博客,写源代码或程序等): JAVA开发技术面试 ...
Hadoop权威指南学习笔记三
HDFS简单介绍声明:本文是本人基于Hadoop权威指南学习的一些个人理解和笔记,仅供学习參考.有什么不到之处还望指出,一起学习一起进步. 转载请注明:http://blog.csdn.net/my ...

hadoop题目（一）

hadoop题目（一）相关推荐

最新文章

热门文章