kafka+flume+kafka中问题.pdf

时间:2022-08-01 08:27:21
【文件属性】:
文件名称:kafka+flume+kafka中问题.pdf
文件大小:296KB
文件格式:PDF
更新时间:2022-08-01 08:27:21
flume kafka flume从kafka读取数据,然后再sink到kafka中, 这种场景下会出现问题。 (1)现象表示为: flume从kafka读取数据,sink的sinkTopic中没有数据,也无法从sinkTopic中读取数据; (2)原因分析: 如果在一个Flume Agent中同时使用Kafka Source和Kafka Sink来处理events,便会遇到Kafka Topic覆盖问题,具体 表现为,Kafka Source可以正常从指定的Topic中读取数据,但在Kafka Sink中配置的目标Topic不起作用,数据仍然 会被写入到Source中指定的Topic中。

网友评论