分布式文件系统 HDFS

Tecode 发布于2022-06-28 18:59 / 1876人阅读

摘要：的启动启动来到目录下执行可以看到和启动的日志信息通过命令查看当前运行的进程可以看到以及说明启动成功通过可视化界面查看的运行情况通过浏览器查看界面查看整体情况界面查看的情况

HDFS的启动
启动HDFS

来到$HADOOP_HOME/sbin目录下
执行start-dfs.sh

[hadoop@hadoop00 sbin]$ ./start-dfs.sh

可以看到 namenode和 datanode启动的日志信息

Starting namenodes on [hadoop-master]
hadoop-master: starting namenode, logging to /root/bigdata/hadoop-2.9.1/logs/hadoop-root-namenode-hadoop-master.out
hadoop-master: starting datanode, logging to /root/bigdata/hadoop-2.9.1/logs/hadoop-root-datanode-hadoop-master.out
Starting secondary namenodes [0.0.0.0]
0.0.0.0: starting secondarynamenode, logging to /root/bigdata/hadoop-2.9.1/logs/hadoop-root-secondarynamenode-hadoop-master.out

通过jps命令查看当前运行的进程

[root@hadoop-master sbin]# jps
14789 NameNode
15670 SecondaryNameNode
15210 DataNode
15805 Jps

可以看到 NameNode DataNode 以及 SecondaryNameNode 说明启动成功
通过可视化界面查看HDFS的运行情况

通过浏览器查看 192.168.19.137:50070

Overview界面查看整体情况

Datanodes界面查看datanode的情况

云服务器 GPU云服务器文件分布式系统hdfs 分布式文件存储 hdfs 分布式存储 hdfs 系统级分布式文件系统

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/125933.html

cdhhdfs

CDH是一种功能强大的Hadoop发行版本，HDFS是CDH中的一个重要组件，负责提供大规模数据存储和访问的功能。　　hdfs，全称hadoop distributed file system，意思是分布式文件系统。hadoop分布式文件系统是指被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。　　HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。...

白马啸西风 2022-12-21 12:06 评论0 收藏0
Spark Streaming学习笔记之HDFS

摘要：用来管理文件系统的命名空间，其将所有的文件和文件夹的元数据保存在一个文件系统树中。文件系统镜像元数据镜像文件。其周期性的向元数据节点回报其存储的数据块信息。 Hadoop分布式文件系统(hadoopdistributed filesystem，HDFS)。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。HDFS可以...

qqlcbb 2019-08-15 10:42 评论0 收藏0