生产环境Kafka日志的分段保存
kafka中一个主题,一般会设置多个分区,比如创建了一个topic_first,在创建的时候指定这个主题有3个分区。其实在3台服务器上,会创建3个目录,bigdata12创建目录topic_first-0。
在目录下面是数据文件,Kafka的数据就是message,数据存储在.log文件中,在Kafka中,我们把.log文件叫做日志文件。一个分区下面默认有n多个日志文件(分段存储),一个日志文件的默认大小是1GB。
服务器bigdata13:创建目录topic_first-1;
服务器bigdata14:创建目录topic_first-2。