大数据之-Hadoop3.x_MapReduce_WordCount案例集群运行---大数据之hadoop3.x工作笔记0093

然后我们再来看让我们写的那个WordCount的,用java写的这个程序在hadoop的集群上运行.

怎么实现?

我们知道上一节,我们已经可以把我们的WordCount的MapReduce程序,我们自己写的,在idea中调试运行了,但是

我们想一下,我们的这个程序是在我们的集群上运行的吗?

很显然不是,我们的集群还没有打开来对吧,怎么运行,所以他是在本地执行的,

用的是hadoop支持的,本地模式.

那么接下来我们就去看看,我们怎么把我们写的WordCount的MapReduce程序,在我们搭建的hadoop集群上

运行.

jpsall 我们去看看我们的集群可以看到,没有执行对吧. 这个jpsall是之前我们封装的一个程序可以帮我们直接

查看集群中所有的,机器的状态

可以看到我们的集群还没有开启呢

大数据之-Hadoop3.x_MapReduce_WordCount案例集群运行---大数据之hadoop3.x工作笔记0093相关推荐

k8s高可用集群_搭建高可用集群(部署master2和node节点)---K8S_Google工作笔记0058
技术交流QQ群[JAVA,C++,Python,.NET,BigData,AI]:170933152 然后上一节我们把master1节点,搭建完成了,接下来我们把下面的 master2节点以及node ...
拆分命令_在MongoDB分片集群中拆分数据块chunks
MongoDB Manual (Version 4.2)> Sharding > Data Partitioning with Chunks > Split Chunks in a ...
好程序员大数据技术分享：Zookeeper集群管理与选举
为什么80%的码农都做不了架构师?>>> 大数据技术的学习,逐渐成为很多程序员的必修课,因为趋势也是因为自己的职业生涯.在各个技术社区分享交流成为很多人学习的方式,今天很荣幸找 ...
spark 并行处理_如何使用Spark集群并行处理大数据
spark 并行处理 by Hari Santanam 通过Hari Santanam 如何使用Spark集群并行处理大数据 (How to use Spark clusters for parall ...
CDH大数据平台搭建之SPARK集群搭建
CDH大数据平台搭建之SPARK集群搭建一.安装规划二.下载三.安装及配置 1.解压 2.修改配置文件四.启动五.JPS检查节点一.安装规划参考CHD大数据平台搭建之集群规划二.下载 ...
Python +大数据-Hadoop生态-Linux(二)-集群搭建和安装
Python +大数据-Hadoop生态-Linux(二)-集群搭建和安装今日课程学习目标 1.掌握Linux用户.权限管理 2.掌握Linux常用系统命令 3.掌握服务器集群环境搭建 4.了解sh ...
CDH大数据平台搭建之KAFKA集群搭建
CDH大数据平台搭建之KAFKA集群搭建一.安装规划二.下载KAFKA 三.安装及配置 1.先安装zookeeper 2.解压 3.新建文件夹 4.修改config目录server.propert ...
数据沙箱在大数据生产、测试物理集群隔离场景中最佳实践
大数据平台不仅需要稳定地运行生产任务,还需要提供数据开发的能力.因此,不少大数据平台都会为每个任务区分开发模式与线上模式,可以通过提交上线的方式,将开发模式任务提交到线上,让其用于线上数据生产工作. ...
数据中心空调故障案例集（第二季）
一.蓄冷罐氮封装置故障故障现象:冬季,某蓄冷罐内出现压力异常告警. 故障原因:环境温度过低,导致隔膜阀被冻结,失去调节作用. 对策:需对隔膜阀进行保温. 氮封装置故障二.冷机发生喘振故障现象:冷 ...

大数据之-Hadoop3.x_MapReduce_WordCount案例集群运行---大数据之hadoop3.x工作笔记0093

大数据之-Hadoop3.x_MapReduce_WordCount案例集群运行---大数据之hadoop3.x工作笔记0093相关推荐

最新文章

热门文章