CentOS 8 中安装部署伪分布式模式Hadoop 2.10「4」
CentOS 8 中安装部署伪分布式模式Hadoop 2.10系列文章:
CentOS 8 中安装部署伪分布式模式Hadoop 2.10「1」
CentOS 8 中安装部署伪分布式模式Hadoop 2.10「2」
CentOS 8 中安装部署伪分布式模式Hadoop 2.10「3」
本文继续进行Hadoop 2.10的安装部署过程。
一、格式化HDFS
对HDFS集群进行格式化,HDFS集群是用来存储数据的。
hdfs namenode -format
看到如下信息,表示格式化成功了。
21/10/28 23:39:23 INFO common.Storage: Storage directory /usr/local/hadoop-2.10.1/tmp/dfs/name has been successfully formatted.
如果格式化失败,则分析一下异常信息,进行解决。
二、启动HDFS和YARN
现在,我们可以启动HDFS和YARN服务了。
(1)启动HDFS
[root@centos-150 ~]# start-dfs.sh
Starting namenodes on [centos-150]
centos-150: starting namenode, logging to /usr/local/hadoop-2.10.1/logs/hadoop-root-namenode-centos-150.out
localhost: starting datanode, logging to /usr/local/hadoop-2.10.1/logs/hadoop-root-datanode-centos-150.out
Starting secondary namenodes [centos-150]
centos-150: starting secondarynamenode, logging to /usr/local/hadoop-2.10.1/logs/hadoop-root-secondarynamenode-centos-150.out
(2)启动YARN
[root@centos-150 ~]# start-yarn.sh
starting yarn daemons
starting resourcemanager, logging to /usr/local/hadoop-2.10.1/logs/yarn-root-resourcemanager-centos-150.out
localhost: starting nodemanager, logging to /usr/local/hadoop-2.10.1/logs/yarn-root-nodemanager-centos-150.out
(3)jps命令查看是否启动成功
[root@centos-150 ~]# jps -l
3888 sun.tools.jps.Jps
2993 org.apache.hadoop.hdfs.server.namenode.NameNode
3313 org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode
3475 org.apache.hadoop.yarn.server.resourcemanager.ResourceManager
3588 org.apache.hadoop.yarn.server.nodemanager.NodeManager
3135 org.apache.hadoop.hdfs.server.datanode.DataNode
访问WEB页面,HDFS和YARN集群都有相对应的WEB监控页面。
HDFS:http://192.168.56.150:50070
YARN:http://192.168.56.150:8088
也可以通过stop-all.sh 命令停止上述服务之后,通过start-all.sh命令启动HDFS和YARN服务,如图所示:
OK。这样搭建成功了。