如果我们没有提到kafka producer上的压缩类型,如果我们在broker端提到它...性能是如何受到影响的,主题端压缩在哪些批量大小上起作用?
发布于 2018-08-09 16:34:18
只有在生产者端指定压缩才能工作,否则数据将以未压缩的格式存储在磁盘上。压缩增加了客户端上某些压缩和解压缩成本的I/O吞吐量。此外,它节省了磁盘空间,因为数据将以压缩格式存储在kafka代理中。您可以将批处理大小保持在kafka代理允许的最大消息大小限制,即1MB
https://stackoverflow.com/questions/51759823
复制相似问题