logstash

logstash

文章 123 浏览 250

logstash-5.1.1版本input是否可以写两个或以上的kafka?

想问下大家有没有在logstash 5.1.1或更高的版本中做过input 多个kafka收集?我现在有这样的需求,但是看完官网和网络的其他方法中没有找到写两个kafk…

痕至 2022-09-04 19:30:02 12 0

怎样通过 logstash 采集 docker daemon 的日志

docker daemon 的日志是输出到标准输出和标准出错的.为管理方便, 决定用 systemd 做 dockerd 的启停, 这样日志就被 systemd 的 journal 模块收集去了…

猥琐帝 2022-09-04 18:08:20 11 0

flume 监听nginx日志丢失问题

flume监听nginx日志是否是增量监听? 场景: nginx日志不断产生,flume agent一直监听,但由于网络原因,网断了。channel为memary类型此时nginx日志…

她说她爱他 2022-09-04 14:33:08 23 0

如何用log4j或者sfl4j接管tomcat的catalina.out日志

java程序日志通过https://github.com/logstash/l... 已经直接发送到logstash成功了目前想让tomcat的日志也通过log4j或者slf4j发送给logstash参考了htt…

旧夏天 2022-09-04 12:43:33 30 0

关于logstash插件logstash-filter-elasticsearch的问题

其实我本意是想要实现如下需求: logstash的插入数据到elasticsearch的时候,先从elasticsearch里去查数据,查的时候,字段都是固定,字段值从grok拆…

悸初 2022-09-04 00:23:30 12 0

elasticsearch写入去重的问题

我有一些数据,可能有很多重复的,比如username,ip,UA等等,这些数据是实时产生的,也就是说可能是产生的时间是不一样的。 目前是用logstash来实时写…

§对你不离不弃 2022-09-04 00:22:18 32 0

logstash如何使用反响引用

我先用标准的正则写一个文本内容:用户信息:123_abc正则表达式:^用户信息:(d+)_(abc)$需求1:通过正则的反向引用, $1(只要第一个分组的内容)需求…

肩上的翅膀 2022-09-03 19:02:23 14 0

页面访问状态非200的请求个数1分钟超过10个就发邮件中的问题

现在的状态是ruby中的event.cancel没有生效,只要有数据就会发邮件 哪里配置有问题呢??? …

亽野灬性zι浪 2022-09-03 15:08:59 19 0

elasticsearch which: no java in (/sbin:/bin:/usr/sbin:/usr/bin)

机器:centos7.2 javahome:export JAVA_HOME=/root/jdk1.8.0_60export PATH=$JAVA_HOME/bin:$PATHexport CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_…

绅刃 2022-09-03 14:10:43 15 0

启动两个elasticsearch节点后,通过logstash写入数据,es集群状态显示红色?

我在一台机器部署了两个es节点,两个es节点的部署配置分别如下: node1 cluster.name: escluster node.name: "node1" node2 cluster.name: escluster…

魄砕の薆 2022-09-03 14:02:48 17 0

logstash时间过滤

ue.log,这个ue.log是用的monolog的LogstashFormatter类输出的,所以格式如下了 {"@timestamp":"2016-08-08T00:00:14.003614+08:00","@source":"i-lz…

绮烟 2022-09-03 13:08:25 15 0

logstash怎样添加数组类型的字段

怎样利用logstash的filter添加数组类型的字段,并添加数据到数组中?…

起风了 2022-09-03 09:38:40 10 0

Logstash中output怎样使用JSON的字段值?

JSON文件中有多条记录,每条记录包含一个IP字段。 想在利用logstash输出数据到elasticsearch时,使用JSON中的IP字段值作为elasticsearch的id,应该怎…

我的影子我的梦 2022-09-03 09:29:21 10 0

logstash占用cpu过高

之前用logstash读取文件然后入库,占用cpu平均在20%左右,最近加了一个监控目录,cpu平均就飙到80%多了 下面是logstash的配置文件,之前file都是监控…

何止钟意 2022-09-03 08:55:40 22 0

logstash不写数据到elasticsearch

现象是,起来logstahs和elasticsearch后,elasticsearch无数据 其中logstash的debug日志如下: Pushing flush onto pipeline {:level=&gt:debug, :fi…

一城柳絮吹成雪 2022-09-03 00:53:21 14 0
更多

推荐作者

1CH1MKgiKxn9p

文章 0 评论 0

ゞ记忆︶ㄣ

文章 0 评论 0

JackDx

文章 0 评论 0

信远

文章 0 评论 0

yaoduoduo1995

文章 0 评论 0

霞映澄塘

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文