大数据之Hadoop（一）

文章目录

前言
一、HDFS介绍
二、架构介绍
三、HDFS切片机制
四、HDFS的副本机制
五、HDFS的Shell命令
总结

前言

#博学谷IT学习技术支持#
Hadoop是一些软件的统称，其底层是Java；Hadoop主要包含HDFS分布式文件存储框架、MapReduce分布式计算框架和Yarn分布式资源调度框架。本篇文章主要介绍Hadoop中的HDFS框架。

一、HDFS介绍

HDFS的全称是Hadoop Distributed File System，Hadoop分布式文件系统。该系统是一个由多台计算机组成的集群，主要看重整体集群的工作效率，不注重单台计算机的性能，所以无论多低配置的计算机都可以加入该集群中。
HDFS系统具有文件切片的机制，可以将一个较大的文件进行切片，切分成多个较小的文件存储在该集群中不同的计算机上，取数据时再将所有的小文件进行合并，返回给客户端。

二、架构介绍

在这里插入图片描述

从上图可以看出，HDFS系统中的角色有Name

相关阅读:
LeetCode_二叉搜索树_中等_449.序列化和反序列化二叉搜索树
Kotlin 如何确定协程是否启动
JSP include能包含html页面吗？
运行时系统
美狐美颜SDK滤镜、哈哈镜功能算法分析
操作系统 | 实验七 SPOOLING技术
LeetCode——29. 两数相除
selenium 知网爬虫之根据【关键词】获取文献信息
网络安全深入学习第一课——热门框架漏洞（RCE-命令执行）
Java 调用 Cpp 代码简单示例

原文地址：https://blog.csdn.net/weixin_43339889/article/details/126923464