006 关于大数据的本地模式环境的搭建

当伪分布式搭建结束之后，为了方便程序员的自己的调试，可以尝试搭建本地模式

　开始搭建

一：前期准备

1.新建一个目录

2.解压hadoop压缩包

二：搭建环境

3.获取JAVA_HOME

4.修改hadoop-env.sh的JAVA_HOME

5.检验正确性

三：验证本地模式的正确性

6.新建一个input目录

　　mkdir input

7.将wc.input复制到input目录下

8.运行wordcount

9.将会出现output

10.查看运行的结果

转载于:https://www.cnblogs.com/juncaoit/p/5897618.html

006 关于大数据的本地模式环境的搭建相关推荐

武汉理工大学大数据架构与模式期末复习
武汉理工大学大数据架构与模式期末复习在发现学长学姐们上一届是大作业结课而我们是考试结课之后整理复习的结果,可能不会很全,感觉最后老师稍微划知识点的时候没有为难我们(),总之大体是这么些考试内容,也 ...
助力工业物联网，工业大数据项目介绍及环境构建【一、二】
文章目录工业大数据项目介绍及环境构建 01:专栏目标 02:项目背景 03:项目需求 04:业务流程 05:技术选型 06:Docker的介绍 07:Docker的网络 08:Docker的使用 0 ...
大数据架构和模式（五）：利用大数据识别保险行业中的欺诈业务案例
大数据架构和模式(五):利用大数据识别保险行业中的欺诈业务案例 [复制链接] pig2 1232 主题 2069 帖子 1万积分超级版主积分 11358 收听TA 发消息电梯直达楼主 ...
大数据架构和模式（一）——大数据分类和架构简介
概述大数据可通过许多方式来存储.获取.处理和分析.每个大数据来源都有不同的特征,包括数据的频率.量.速度.类型和真实性.处理并存储大数据时,会涉及到更多维度,比如治理.安全性和策略.选择一种架构并构 ...
SinoBBD跨入大数据产业发展新模式
文章讲的是SinoBBD跨入大数据产业发展新模式,新上任的北京供销大数据集团(英文简称"SinoBBD")首席运营官徐圭平先生,行程极为繁忙.加入集团仅一个月,他已赴美与合作企业见 ...
大数据产业发展三大模式可毕其功于一役
大数据产业发展三大模式可毕其功于一役随着大数据的发展和应用的深入,大数据时代已经悄无声息的来临,而在大数据时代下,如何发展大数据产业,成为业界关注的焦点. 以前是各种传播公司和科技巨头如I ...
Python+大数据-知行教育(一)-环境搭建数据仓库
Python+大数据-知行教育(一)-环境搭建数据仓库 1. 教育项目的数仓分层回顾: 原有的基础分层 ODS层: 源数据层作用: 对接数据源, 和数据源的数据保持相同的粒度(将数据源的数据完整的 ...
「巨杉学」开展大数据金融人才培养模式探索课题培训
为推进教师培训提质增效和教师队伍高质量发展,7月29日上午,由北京电子科技职业学院.广州番禺职业技术学院主办,广州市数字金融协会协办的国家级培训项目--2021年高职院校教师数字金融应用能力提升高级研 ...
Windows PC上创建大数据职业技能竞赛实验环境之四--客户端环境的搭建
Hadoop集群访问客户端 X window Jet brain Idea和客户端开发环境以上环境我们将在WSL的Ubuntu docker容器中实现,其中对X和Idea的访问,通过Windows ...
大数据Spark高可用环境之Scala语言的下载安装
大数据Spark高可用环境之Scala语言的下载安装这里写目录标题大数据Spark高可用环境之Scala语言的下载安装 1.安装Scala 1.1 Scala的下载 1.2 传入XShell 2. ...

006 关于大数据的本地模式环境的搭建

006 关于大数据的本地模式环境的搭建相关推荐

最新文章

热门文章