kafka --from-beginning 获取的数据与之前消费的数据不一致

天盟互助技术问答

flume 使用 tail 采集一个文件的数据到kafka topic

当开启了kafka consumer的时候。文件追加五条。 consumer消费五条。一切正常
然后当使用--from-beginning 查看这个topic 的所有数据的时候。发现真实消费的数据少了一些。刚才消费的五条数据，并不能全部查到。

其它信息：
（1）配置： flume配置的是memory channel
（2）查看kafka log目录下的分区下的 xxxx.log文件
发现当被采集文件追加 5条左右（为了让数据写入同一个partion，这里追加的五条数据一模一样）， xxx.log才刷新一条。--from-beginning 开启的控制台消费者才能看到这一条。
但是如果同时开启了另一个consumer 。追加的所有条目。都是可以消费到的。

也就是consumer可以消费到，但是 --from-beginning 却没有获取到
请问有同学知道这是为什么吗？

显示全部楼层

免责声明：本内容仅代表回答会员见解不代表天盟观点，请谨慎对待。

使用道具举报

上一主题下一主题

热门问答

西***

普通会员

今日需求悬赏

每稿200元

联通手机号码下单
每稿3000元

新大黄蜂提取器
每稿3800元

一个电商小程序
每稿6000元

西游藏宝阁秒下单秒付款软件辅助制作
每稿88000元

爱奇艺游戏直播刷人气协议。
每稿17000元

PC端信某自动转发工具定制
每稿7300元

直播软件第二次开发
每稿3000元

金盾网络版无密码提取工具
每稿4200元

纸牌游戏
每稿3000元

CCta-视频代下载

今日问答求助

发布任务需求已有1031166位用户正在使用天盟网服务

发布分类： *

任务预算： *

元

需求内容： *

手机号码： *

任务商家报价为元

预算价 :元
成交价 :元
完工期 :天
质保期 :天

* 最终任务项目以服务商报价、双方协商为准！

已有账号？

找人解决需求

kafka --from-beginning 获取的数据与之前消费的数据不一致

热门问答

西***

今日需求悬赏

今日问答求助

发布任务需求已有1031166位用户正在使用天盟网服务

新手帮助

平台规则

关于天盟

一键快捷导航

微信公众号

手机客户端