简单记录下
利用的kafka版本是2.11.0.10.1.0,现象是后台命令可以消费数据,但是程序消费不了数据,经过检查后发现是参数:
props.put("max.partition.fetch.bytes", "" + 104857600);
的问题,这个参数有个类似的: props.put("fetch.message.max.bytes", "" + 104857600);
老的版本里面是代表每次获取的最大消息长度,如果比较小的话,长消息就抓取不到。
教训
不懂的配置,不要随便复制,就算是相同的应用在不同的版本里面含义可能会有所不同。