登录 注册
当前位置:主页 > 资源下载 > 50 > kafka+flume+kafka中问题.pdf下载

kafka+flume+kafka中问题.pdf下载

  • 更新:2024-08-22 09:29:02
  • 大小:296KB
  • 推荐:★★★★★
  • 来源:网友上传分享
  • 类别:kafka - 大数据
  • 格式:PDF

资源介绍

flume从kafka读取数据,然后再sink到kafka中, 这种场景下会出现问题。 (1)现象表示为: flume从kafka读取数据,sink的sinkTopic中没有数据,也无法从sinkTopic中读取数据; (2)原因分析: 如果在一个Flume Agent中同时使用Kafka Source和Kafka Sink来处理events,便会遇到Kafka Topic覆盖问题,具体 表现为,Kafka Source可以正常从指定的Topic中读取数据,但在Kafka Sink中配置的目标Topic不起作用,数据仍然 会被写入到Source中指定的Topic中。