本文主要包含kafka consumer 优化,kafka优化,kafka性能优化,activemq kafka,kafka等服务器相关知识,网友希望可以进行参考
kafka 效率优化，kafka优化
数据分区存储
在topic内设置了多个分区，使kafka的消费者进程池能得到有序性保证和负载均衡，使得topic对应的消费组里的消费者们各自可以独享一个分区。如此的话，每个消费者是其消费的分区的唯一reader，在单个reader下当然保证了有序这件事。而且多个分区也使得负载可以比较平衡。
具体流程：
1. Producer根据指定的partition方法，将消息发布到指定topic的partition里面
2. kafka集群接收到Producer发过来的消息后，将其持久化到硬盘
3.Consumer从kafka集群pull数据，并控制获取消息的offset