hdfs运行机制
2024-10-02 04:31:47
hdfs：分布式文件系统
hdfs有着文件系统共同的特征：
1、有目录结构，顶层目录是： /
2、系统中存放的就是文件
3、系统可以提供对文件的：创建、删除、修改、查看、移动等功能
hdfs跟普通的单机文件系统有区别：
1、单机文件系统中存放的文件，是在一台机器的操作系统中
2、hdfs的文件系统会横跨N多的机器
3、单机文件系统中存放的文件，是在一台机器的磁盘上
4、hdfs文件系统中存放的文件，是落在n多机器的本地单机文件系统中（hdfs是一个基于linux本地文件系统之上的文件系统）
hdfs的工作机制：
客户把一个文件存入hdfs，其实hdfs会把这个文件切块后，分散存储在N台linux机器系统中（负责存储文件块的角色：data node）<准确来说：切块的行为是由客户端决定的>
一旦文件被切块存储，那么，hdfs中就必须有一个机制，来记录用户的每一个文件的切块信息，及每一块的具体存储机器（负责记录块信息的角色是：name node）
为了保证数据的安全性，hdfs可以将每一个文件块在集群中存放多个副本（到底存几个副本，是由当时存入该文件的客户端指定的）
综述：一个hdfs系统，由一台运行了namenode的服务器，和N台运行了datanode的服务器组成！
最新文章
- laravel DB事物
- Spring3 MVC请求参数获取的几种方法
- Failed to load unit 'HGCM' (VERR_INVALID_PARAMETER)
- window 7 改变窗口颜色
- 使用BackgroundWorker组件进行异步操作编程
- TypeScript 5 Angular 2
- 树莓派上搭建arduino开发环境
- js中常用的日期总结
- Leetcode题解（24）
- NodeJS、NPM安装配置与测试步骤(windows版本)
- Java创建线程的三种方式
- 十大豪门推送sdk，哪个更适合你
- 是时候选择一款富文本编辑器了（wangEditor）
- 新手上路、安装JDK教程
- ssh: connect to host xx.xx.xxx.xxx port 22: Connection refused
- Matrix67｜自由职业者，数学爱好者
- mono touch登录设计
- arduino入门套件学习过程-安装配置
- SQL SERVER错误代码
- c++对象模型是什么，对象的内存布局和结构问题