es+mysql，想问一下怎么实现数据同步的。是在代码里面同时插入es和mysql还是用logstash来同步？还是binlog

用了logstash，但是同步的速度太慢…

日志升级到log4j2输出到Logstash就报错

项目里日志升级到log4j2 后输出日志到日志系统就不行了，求大神指点一下 log4j2.xml配置： 错误异常： 2016-12-16 11:34:40,503 AsyncAppender-Async…

elk日志如何实现规则报警

问下elk如何在前段web（kibana）中设置规则 来进行邮件的报警，有插件可以实现吗？ ps：我说的不是用脚本来哦，比如说在kibana界面配置规则来针对刷…

通过logstash将MySQL中的数据同步到ElasticSearch的时候如何处理关联关系？

通过logstash将MySQL中的数据同步到ElasticSearch的时候如何处理关联关系？ 比如我有一个user对象结构是这样的： 这个数据是通过三张表来查询的：用户…

ELK中logstash收集项目日志时，如何只收集ERROR级别日志

logstash同步mysql的数据到elasticsearch时重复

在用logstash将mysql数据同步到es的时候出现了数据重复的问题不知道该怎么去重了，其中attachments/tag/types这三个属性都是数组 大家帮忙看一下： 其…

logstash启动报错： stat.st_dev unsupported

环境如下： OS：Red Hat Enterprise Linux Server release 5.8 (Tikanga) 内存：8G java version "1.8.0_92" logstash 2.3.2 elasticsearch-2.3.2，…

Logstash 如果输入中文输出后成乱码

Logstash 如果输入中文，配置文件如下，输出的怎么是乱码呢？ input {   tcp {    codec => plain{       charset => "GB2312"     }     port =>800…

logstash gork 失败的数据 不发送给elasticsearch 该怎么些配置

input {         file {                 path => "/log/api.log"         } } filter {         grok {                 match => {"message"=> "%{T…

LogStash在HP下运行

我在HP下运行logstash提示 NotImplementedError: stat.st_dev unsupported or native support failed to load        dev_major at org/jruby/RubyFil…

logstash怎么收集logback产生的日志

目前正在集成elk，通过logstash收集logback产生的日志，elk已搭建好部署在同一台机器（我个人pc） 下面是logstash的配置作为服务通过tcp的方式收集日…

logstash-out-mongodb 设置generateId老是报异常，求指导

大神们好，遇到非常痛苦的问题。现在用logstash-out-mongodb插件，设置generateId=>true，为是报异常。请求帮忙解决下。谢谢。 配置文件： input {  …

kafka在日志监控平台使用

@卢禹 你好，想跟你请教个问题：我现在有个需求，用logstash抓取日志到kafka以后，同时做实时日志监控，和日志静态分析，实时日志监控用ELK实现，日…

logstash 输入中文无法解析

配置文件如下 input{         stdin{} } filter {     grok {         match => { "message" => "%{DATA:tranId}|%{WORD:compsnyId}|%{WORD:merNo}|%…

logstash如何使用redis cluster

由于担心redis单机挂掉导致logstash，参考了：http://www.tuicool.com/articles/EVzEZzn 搭建了redis的cluster集群， 端口分别为 4000、4001、4002，…