hadoop处理数据的问题
我们管理1K多个服务器,需要从这些服务器中每天定时拿取想要的数据,保存在TXT文本文件里,格式一般为 1,1,1,中,1n2,2,2,中,2n1,1,1,中,1n即每行由n隔开,每个字段用,隔开。我们初步采用hadoop的这个开源的东西,但不知道如何将TXT中的内容导入到hbase?是用Hive吗?
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论
评论(1)
建议使用scribe,这是facebook使用的日志系统,可以直接向hdfs写日志数据,scribe是基于thrift的,这样可以支持常用的语言,不用自己去弄了