Kafka 高效文件存储设计特点?
2024-09-04 06:58:48
Kafka把topic中一个parition大文件分成多个小文件段,通过多个小文件段,就容易定期清除或删除已经消费完文件,减少磁盘占用。
通过索引信息可以快速定位message和确定response的最大大小。
通过index元数据全部映射到memory,可以避免segment file的IO磁盘操作。
通过索引文件稀疏存储,可以大幅降低index文件元数据占用空间大小
最新文章
- 对C#泛型实例化对像
- mac下安装和配置mysql5.7.9
- Unix 编程
- java编译错误:varargs 方法的非 varargs 调用
- java 多线程同步
- 【HDOJ】【1754】I Hate It
- jacob 操作word
- 浅谈C#抽象类和C#接口
- Python原理 -- 深浅拷贝
- java201521123118《java程序设计》第3周总结
- 201521123035《Java程序设计》第十一周作业
- $HNOI\ 2010$ 解题报告
- Linux删除奇怪名字文件
- Oracle Instance and Database
- python函数的return
- openx -书表添加字段
- 极简版 卸载 home 扩充 根分区--centos7 xfs 文件格式
- 将Excel中的数据批量导入数据库表
- jetty debug修改 java static 静态变量值不会生效
- 机房servlet类实验