@FrankHui 你好,想跟你请教个问题:
我们打算用flume采集日志,然后把日志发送给kafka。最近再学习这块的知识,也看了你的kafka的相关博客感觉很不错。所以想请教一下有没有flume和kafka结合的相关博客?
非常感谢。
楼上正解。
flume是采集,kafka是缓存消息队列
你好,我想问下?你们最后如何解决的flume采集数据的问题的?
flume 不是很了解,我搜了一下好像也是一个日志系统,Kafka本来就可以作为日志系统来做,所以我建议两者选一个就好了。不知道你们同时用两个的场景是什么?
这个不是我设计的架构,他们决定用flume去采集日志,比如syslog。然后把采集过来的日志发送给kafka。我也是刚学flume和kafka。 请问kafka可以实时采集syslog吗?
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
暂无简介
文章 0 评论 0
接受
发布评论
评论(6)
楼上正解。
flume是采集,kafka是缓存消息队列
你好,我想问下?你们最后如何解决的flume采集数据的问题的?
flume 不是很了解,我搜了一下好像也是一个日志系统,Kafka本来就可以作为日志系统来做,所以我建议两者选一个就好了。不知道你们同时用两个的场景是什么?
flume 不是很了解,我搜了一下好像也是一个日志系统,Kafka本来就可以作为日志系统来做,所以我建议两者选一个就好了。不知道你们同时用两个的场景是什么?
这个不是我设计的架构,他们决定用flume去采集日志,比如syslog。然后把采集过来的日志发送给kafka。我也是刚学flume和kafka。 请问kafka可以实时采集syslog吗?