CentOS 8 中安装部署伪分布式模式Hadoop 2.10「4」

CentOS 8 中安装部署伪分布式模式Hadoop 2.10「4」

经验文章nimo972025-01-20 10:21:3617A+A-

CentOS 8 中安装部署伪分布式模式Hadoop 2.10系列文章:

CentOS 8 中安装部署伪分布式模式Hadoop 2.10「1」

CentOS 8 中安装部署伪分布式模式Hadoop 2.10「2」

CentOS 8 中安装部署伪分布式模式Hadoop 2.10「3」

本文继续进行Hadoop 2.10的安装部署过程。


一、格式化HDFS

对HDFS集群进行格式化,HDFS集群是用来存储数据的。 

hdfs namenode -format


看到如下信息,表示格式化成功了。

21/10/28 23:39:23 INFO common.Storage: Storage directory /usr/local/hadoop-2.10.1/tmp/dfs/name has been successfully formatted.

如果格式化失败,则分析一下异常信息,进行解决。


二、启动HDFS和YARN

现在,我们可以启动HDFS和YARN服务了。

(1)启动HDFS

[root@centos-150 ~]# start-dfs.sh
Starting namenodes on [centos-150]
centos-150: starting namenode, logging to /usr/local/hadoop-2.10.1/logs/hadoop-root-namenode-centos-150.out
localhost: starting datanode, logging to /usr/local/hadoop-2.10.1/logs/hadoop-root-datanode-centos-150.out
Starting secondary namenodes [centos-150]
centos-150: starting secondarynamenode, logging to /usr/local/hadoop-2.10.1/logs/hadoop-root-secondarynamenode-centos-150.out

(2)启动YARN

[root@centos-150 ~]# start-yarn.sh
starting yarn daemons
starting resourcemanager, logging to /usr/local/hadoop-2.10.1/logs/yarn-root-resourcemanager-centos-150.out
localhost: starting nodemanager, logging to /usr/local/hadoop-2.10.1/logs/yarn-root-nodemanager-centos-150.out

(3)jps命令查看是否启动成功

[root@centos-150 ~]# jps -l
3888 sun.tools.jps.Jps
2993 org.apache.hadoop.hdfs.server.namenode.NameNode
3313 org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode
3475 org.apache.hadoop.yarn.server.resourcemanager.ResourceManager
3588 org.apache.hadoop.yarn.server.nodemanager.NodeManager
3135 org.apache.hadoop.hdfs.server.datanode.DataNode


访问WEB页面,HDFS和YARN集群都有相对应的WEB监控页面。

HDFS:http://192.168.56.150:50070



YARN:http://192.168.56.150:8088


也可以通过stop-all.sh 命令停止上述服务之后,通过start-all.sh命令启动HDFS和YARN服务,如图所示:


OK。这样搭建成功了。

点击这里复制本文地址 以上内容由nimo97整理呈现,请务必在转载分享时注明本文地址!如对内容有疑问,请联系我们,谢谢!
qrcode

尼墨宝库 © All Rights Reserved.  蜀ICP备2024111239号-7