kafka+flume+kafka中问题.pdf

时间:2022-08-01 08:27:21
【文件属性】:

文件名称:kafka+flume+kafka中问题.pdf

文件大小:296KB

文件格式:PDF

更新时间:2022-08-01 08:27:21

flume kafka

flume从kafka读取数据,然后再sink到kafka中, 这种场景下会出现问题。 (1)现象表示为: flume从kafka读取数据,sink的sinkTopic中没有数据,也无法从sinkTopic中读取数据; (2)原因分析: 如果在一个Flume Agent中同时使用Kafka Source和Kafka Sink来处理events,便会遇到Kafka Topic覆盖问题,具体 表现为,Kafka Source可以正常从指定的Topic中读取数据,但在Kafka Sink中配置的目标Topic不起作用,数据仍然 会被写入到Source中指定的Topic中。


网友评论