Bootstrap

ELK详解(九)——Logstash多日志收集实战

今天继续给大家介绍Linux运维相关知识,本文主要内容是Logstash多日志收集实战。

一、Logstash配置

在上文ELK详解(八)——Logstash收集系统日志实战中,我们进行了Logstash日志收集实战,在本文中,我们尝试在一个Logstash的配置文件中实现多个日志信息的收集。在本此实战中,基本配置与前文基本相同,但是区别在于配置文件处,我们要用input中定义的type参数,将不同日志文件中的输入定位到不同的索引进行输出。
我们创建配置文件bi-logstash.conf,内容如下所示:

input{
        file{
                path=>"/var/log/messages"
                type=>"system-log"
                start_position=>"beginning"
                stat_interval=>"5"
        }
        file{
                path=>"/var/log/secure"
                type=>"secure-log"
                start_position=>"beginning"
                stat_interval=>"5"
        }
}
output{
        if [type] == "system-log" {
                elasticsearch{
                        hosts=>["192.168.136.101:9200"]
                        index=>"bi-system-log-%{+YYYY.MM.dd}"
                }
        }
        if [type] == "secure-log" {
                elasticsearch{
                        hosts=>["192.168.136.101:9200"]
                        index=>"bi-secure-log-%{+YYYY.MM.dd}"
                }
}

在上述配置文件中,我们在输入处,使用两个file模块分别对/var/log/messages文件和/var/log/secure文件进行了输入;在输出处,根据这两个文件的Type不同,分别定位了不同的索引。
在这里,为了方便查看结果,我们对这两个日志分别输入test,以减少日志查询和传输的时间。
完成上述配置后,我们对这两个日志授予644的权限,以便使我们的Logstash用户可以读取它们。之后,执行命令:

logstash -f /etc/elasticsearch/conf.d/bi-logstash.conf

结果如下所示:
在这里插入图片描述

二、Elasticsearch结果查看

接下来,我们在Elasticsearch上查看结果,如下所示:
在这里插入图片描述
可以看到,在Elasticsearch上出现了我们的两个索引结果。

三、Kibana结果查看

最后,我们在Kibana上查看结果,如下所示:
在这里插入图片描述
在这里插入图片描述
可以看到,在Kibana上,也可以看到我们的两个索引。
原创不易,转载请说明出处:https://blog.csdn.net/weixin_40228200

;