kafka的消息组件
2024-10-07 20:16:02
kafka的组件的介绍
produer：消息的生产者，往topic当中生产消息
consumer：消息的消费者，从topic当中消费消息
broker：kafka的服务器
zookeeper：kafka依赖于zk保存一些topic以及partition的信息
topic：一类消息的高度抽象集合，一个topic下面由多个paritition组成
partition：消息的分区，每个paritition保存了一部分topic的数据，一个partition包含多个segement。一个segement又包含两部分，.log文件和.index文件
segement：包含两个文件.log 文件 .index文件
.log：记录了我们的数据，文件是顺序读写的
.index文件：记录了.log文件的索引
offset：消息的偏移量，我们消费数据的时候，都要记录消息的offset，下次继续消费的时候，根据上次的offset偏移量就可以确定我们下一条数据从哪里开始消费
最新文章
- iOS开发 二维码生成
- 淌水 UE4的shootergame 案例 准备
- BNR Android Demo学习笔记（一）——CrimeIntent
- ELK——Logstash 2.2 date 插件【翻译+实践】
- SDUT 2411：Pixel density
- OpenStack和Redis
- 分享几个社交类网站常用并且也是最好用的jquery类库
- Ansible1：简介与基本安装【转】
- Framework7 索引列表插件的问题
- wamp本地安装phpwind问题：‘Rewrit…
- 数据库之Oracle——初级
- Linux批量处理文件脚本
- PAT1027:Colors In Mars
- ng 1.2 ng-bind-html 用法
- Failed to resolve: com.android.support:appcompat-v7:28 问题解决
- P1182 数列分段`Section II` P1316 丢瓶盖 二分答案
- Charles通用破解激活办法
- 内核中 subsys_initcall 以及初始化标号
- 将数据挂载到 docker 容器中的3种方式：volume、bind mount、tmpfs
- 如何在Windows下安装Tomcat服务器