kafka topickafka partition 数量多少个最佳

来源：蜘蛛抓取(WebSpider) 时间：2016-06-03 09:37 标签： kafka partition个数
<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN"
您的访问请求被拒绝 403 Forbidden - ITeye技术社区
您的访问请求被拒绝
亲爱的会员，您的IP地址所在网段被ITeye拒绝服务，这可能是以下两种情况导致：
一、您所在的网段内有网络爬虫大量抓取ITeye网页，为保证其他人流畅的访问ITeye，该网段被ITeye拒绝
二、您通过某个代理服务器访问ITeye网站，该代理服务器被网络爬虫利用，大量抓取ITeye网页
请您点击按钮解除封锁&2212人阅读
apache kafka（60）
apache kafka中国社区QQ群:
在创建一个topic时，kafka尽量将partition均分在所有的brokers上，并且将replicas也j均分在不同的broker上。
每个partitiion的所有replicas叫做&assigned replicas&，&assigned replicas&中的第一个replicas叫&preferred replica&，刚创建的topic一般&preferred replica&是leader。leader replica负责所有的读写。
但随着时间推移，broker可能会停机，会导致leader迁移，导致机群的负载不均衡。我们期望对topic的leader进行重新负载均衡，让partition选择&preferred replica&做为leader。
对所有Topics进行操作
./bin/kafka-preferred-replica-election.sh --zookeeper hadoop16:2181,hadoop17:2181,hadoop18:2181/kafka08
对某个Topic进行操作
[sankuai@data-kafka01 kafka]$ cat topicPartitionList.json
&&partitions&:
&&&&{&topic&:&test.example&,
&partition&: &0&}
./bin/kafka-preferred-replica-election.sh --zookeeper hadoop16:2181,hadoop17:2181,hadoop18:2181/kafka08 --path-to-json-file topicPartitionList.json
引用公司鞠大升文档
参考知识库
* 以上用户言论只代表其个人观点，不代表CSDN网站的观点或立场
访问：326281次
积分：4719
积分：4719
排名：第3836名
原创：146篇
转载：25篇
评论：144条
(2)(1)(1)(2)(4)(10)(11)(3)(11)(3)(3)(2)(10)(6)(18)(25)(6)(1)(2)(1)(1)(18)(13)(1)(4)(1)(2)(2)(1)(1)(1)(3)(2)

我要回帖

更多关于 kafka partition个数 的文章

 

随机推荐