【kafka】自定义分区规则

(一)生产者生成数据的数据,按自定义key做hashcode进行分区

成都创新互联网站建设公司是一家服务多年做网站建设策划设计制作的公司,为广大用户提供了成都网站制作、成都网站设计,成都网站设计,广告投放,成都做网站选成都创新互联,贴合企业需求,高性价比,满足客户不同层次的需求一站式服务欢迎致电。

1.Kafka中可以将Topic从物理上划分成一个或多个分区(Partition)

  每个分区在物理上对应一个文件夹,以"topicName_partitionIndex"方式命名

  文件夹下存储这个分区的所有消息(.log)和索引(.index)文件

# 例如Topic:test0320,使用了3个分区,2个副本
186           187           188
----------    ----------    ----------
test0320-0    test0320-0    test0320-1
test0320-2    test0320-1    test0320-2

2.生产者在生产数据的时候,可以为每条消息自定义Key规则,这样消息被发送到broker时,会根据分区规则选择被存储到哪一个分区中

3.分区规则就是实现了kafka.producer.Partitioner接口的类


标题名称:【kafka】自定义分区规则
文章URL:http://hxwzsj.com/article/jhgcdg.html

其他资讯

Copyright © 2025 青羊区翔捷宏鑫字牌设计制作工作室(个体工商户) All Rights Reserved 蜀ICP备2025123194号-14
友情链接: 成都网站建设流程 移动手机网站制作 成都模版网站建设 网站建设公司 四川成都网站设计 网站制作公司 网站制作 重庆网站建设 重庆外贸网站建设 重庆电商网站建设 广安网站设计 重庆手机网站建设 成都h5网站建设 成都响应式网站建设 成都企业网站制作 品牌网站建设 教育网站设计方案 网站设计 app网站建设 梓潼网站设计 营销网站建设 成都网站建设