hadoop的配置文件在：/root/apps/hadoop安装目录/etc/hadoop/

1.修改hadoop-env.sh,配置java环境变量
export JAVA_HOME=/usr/local/share/java
2.修改core-site.xml,设置文件系统和访问位置

<configuration><property><name>fs.defaultFS</name><value>hdfs://master:9000</value></property>
</configuration>

3.修改hdfs-site.xml,设置文件存储的位置(datanode和namenode不在同一个文件夹,所以可以共存在一个机器,通过端口访问)

<configuration>
<property>
<name>dfs.namenode.name.dir</name>
<value>/root/hdpdata/name/</value>
</property><property>
<name>dfs.datanode.data.dir</name>
<value>/root/hdpdata/data</value>
</property>
</configuration>

启动HDFS

1.修改vi /etc/profile

export JAVA_HOME=/usr/local/share/java
export HADOOP_HOME=/usr/local/share/hadoop-2.8.1
export PATH=:$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

2.初始化hdfshdfs namenode -format
3.启动hdfs:start-dfs.sh

可以登录网页查看localhost:50070或使用hadoop shell或使用各种语言的api。

hadoop hdfs 单机配置相关推荐

2.Hadoop HDFS 安装配置
1.将hadoop包解压放到/opt/hadoop下 2.配置 2.1.进入hadoop目录 2.2.编辑hadoop.env.sh文件配置jdk环境变量 #vi etc/hadoop/hadoop ...
hadoop安装单机配置
环境变量配置(两种方法): 1.直接使用export命令 $export HADOOP_HOME=/home/用户名/hadoop-0.20.203.0(hadoop安装的绝对路径) $export ...
Hadoop Hbase单机配置
1.配置java_home export JAVA_HOME=/usr/jdk64/jdk1.8.0_112 2.配置hbase <configuration><property&g ...
hadoop fs命令无法使用_「大数据」「Hadoop」HDFS的配置与管理
HDFS(Hadoop Distributed File System)是Hadoop三个基础组件之一,为另外的组件以及大数据生态中的其他组件提供了最基本的存储功能,具有高容错.高可靠.可扩展.高吞吐 ...
Hadoop伪分布式配置和搭建，hadoop单机安装，wordcount实例测试，hadoop安装java目录怎么找，问题及问题解决方法
Hadoop伪分布式配置和搭建,hadoop单机安装,wordcount实例测试,hadoop安装java目录怎么找,问题及问题解决方法环境说明系统:ubuntu18.04 主机名:test1 用 ...
hadoop单机配置(非分布式)
1.1 环境使用deepin系统.Hadoop3.1.3和Java环境jdk-8u162-linux-x64.tar.gz. https://pan.baidu.com/s/1K1U1dypbgJe ...
hadoop hdfs 集群配置
配置过程修改配置文件 hadoop的配置文件在:/root/apps/hadoop安装目录/etc/hadoop/ 修改hadoop-env.sh,配置java环境变量 export JAVA_HO ...
大数据2 Hadoop伪分布模式配置部署
为什么80%的码农都做不了架构师?>>> Hadoop伪分布模式配置部署一.实验环境说明注意:本实验需要按照上一节单机模式部署后继续进行操作 1. 环境登录无需密码自动登 ...
Hadoop安装及配置
Hadoop的三种运行模式单机模式(Standalone,独立或本地模式):安装简单,运行时只启动单个进程,仅调试用途: 伪分布模式(Pseudo-Distributed):在单节点上同时启动nam ...

hadoop hdfs 单机配置

启动HDFS

hadoop hdfs 单机配置相关推荐

最新文章

热门文章