调优原则
建议根据盘数设置parition的值,一般partition数量为所有数据节点盘数总量的1~2倍。
数据节点和Kafka测试客户端尽量分开,避免客户端生产数据对数据节点的影响。
Kafka处理网络和IO的线程数可以尽量增大。
主机可以起多个线程启动Kafka的测试命令,且消费并发一般为生产的2~3倍左右,可根据实际场景调整;如在生产场景启动10个kafka-perf的线程(命令),消费场景启动30个线程(消费命令)消费数据。
父主题:
调优概述