Hadoop（3）-Hadoop-3.3.0单机版安装步骤

Hadoop（3）-Hadoop-3.3.0单机版安装步骤

1、环境准备

首先需要准备一台虚拟机，比如这里使用centos系统修改主机名：

2、下载Hadoop

3、hadoop单机版安装步骤

说明：这里选择安装在 /usr/local/hadoop 路径下，对应的数据保存在 /data/hadoop/ 目录下

执行如下命令，解压下载的hadoop安装包

tar -zxvf hadoop-3.3.0.tar.gz

执行如下命令，将解压后的文件夹拷贝至 /usr/local/下，命重命名为hadoop

mv hadoop-3.3.0 /usr/local/hadoop

如：

执行如下命令，在 /data 目录下创建hadoop数据存储的目录

mkdir -p /data/hadoop/tmp /data/hadoop/hdfs/data /data/hadoop/hdfs/name

创建的目录结构如下所示：

=rootexport HDFS_DATANODE_USER=rootexport HDFS_SECONDARYNAMENODE_USER=root

修改/usr/local/hadoop/etc/hadoop/core-site.xml

fs.defaultFS hdfs://hadoop:9000 hadoop.tmp.dir /data/hadoop/tmp

如下，两个位置分别为虚拟机主机名和上述步骤中创建的 tmp目录

修改/usr/local/hadoop/etc/hadoop/hdffs-site.xml

dfs.replication 1 副本个数，配置默认是3,应小于datanode机器数量 dfs. 0.0.0.0:50070 将绑定IP改为0.0.0.0，而不是本地回环IP，这样，就能够实现外网访问本机的50070端口了

如下：

修改/usr/local/hadoop/etc/hadoop/mapre-site.xml，

mapreduce.framework.name yarn

如下：

修改/usr/local/hadoop/etc/hadoop/yarn-site.xml

yarn.nodemanager.aux-services mapreduce_shuffle

如下：

4、启动HDFS

首先执行如下命令格式化hdfs

hdfs namenode -format

如下不报错，则表示成功

依次执行如下命令启动

hadoop-daemon.sh start namenodehadoop-daemon.sh start datanodehadoop-daemon.sh start secondarynamenode

如下

版权声明：本文内容由网络用户投稿，版权归原作者所有，本站不拥有其著作权，亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容，请联系我们jiasou666@gmail.com 处理，核实后本网站将在24小时内删除侵权内容。