logstash下载安装

我下载的版本是：windows的8.1.2，其他版本自己采坑哦。。

下载地址：https://www.elastic.co/cn/downloads/logstash

修改配置文件：logstash.conf，没有自己建一个

input {
	file {
		# 这个路径还必须用/这个斜杆，不然找不到文件的
		path => ["D:/xiao7_workspace/xiao7/learning-example/springboot-example/logs/springboot-example.2022-03-24.log"]  
		start_position => "beginning"
		type => "iis_log_1"
	}
}
output {
 # elasticsearch { hosts => ["localhost:9200"] }
  stdout { codec => rubydebug }
}

在这里插入图片描述

需要注意的是，我这个版本的启动时要么配置全路径，要么只能放在logstash-8.1.2目录下

启动logstash，启动了最好看下日志，可能会各种错~~，如果是jdk的问题，可以去找setup.bat这个文件配置下加载的jdk

D:\env\logstash-8.1.2\bin>logstash -f logstash.conf

结果就采集到的信息了
在这里插入图片描述

SpringBoot整合logstash、es采集日志

先加个配置文件：logstash-collect.conf

input {
   tcp { 

	##host:port就是上面appender中的destination，这里其实把logstash作为服务，开启9601端口接收logback发出的消息 
	host => "127.0.0.1" 
	port => 4567
	
	#模式选择为server 
	mode => "server"
	
	
	tags => ["tags"] 
	
	##格式json 
    codec => json_lines
   } 
}

output {
       elasticsearch {
        #ES地址
		hosts =>"127.0.0.1:9200"
		#指定索引名字，不适用默认的，用来区分各个项目
        index =>"%{[appName]}"
       }

       #stdout { codec => rubydebug}
}

配置一下项目依赖、日志配置

  <dependency>
     <groupId>net.logstash.logback</groupId>
      <artifactId>logstash-logback-encoder</artifactId>
  </dependency>

<?xml version="1.0" encoding="UTF-8"?>
<configuration debug="false">
    <!--定义日志文件的存储地址 勿在 LogBack 的配置中使用相对路径-->
    <property name="PROJECT_NAME" value="springboot-example"/>
    <property name="LOG_HOME" value="D:/xiao7_workspace/xiao7/learning-example/springboot-example/logs"/>
    <logger name="com.alibaba.dubbo" level="INFO"/>

    <appender name="dailyFile" class="ch.qos.logback.core.rolling.RollingFileAppender">
        <rollingPolicy class="ch.qos.logback.core.rolling.TimeBasedRollingPolicy">
            <FileNamePattern>${LOG_HOME}/${PROJECT_NAME}.%d{yyyy-MM-dd}.log</FileNamePattern>
            <MaxHistory>15</MaxHistory>
            <cleanHistoryOnStart>true</cleanHistoryOnStart>
        </rollingPolicy>
        <encoder>
            <pattern>%d %-5p %t [%C{1}:%L] - %m%n</pattern>
            <charset>UTF-8</charset>
        </encoder>
    </appender>

    <appender name="errorFile" class="ch.qos.logback.core.rolling.RollingFileAppender">
        <rollingPolicy class="ch.qos.logback.core.rolling.TimeBasedRollingPolicy">
            <FileNamePattern>${LOG_HOME}/${PROJECT_NAME}.error.%d{yyyy-MM-dd}.log</FileNamePattern>
            <MaxHistory>15</MaxHistory>
            <cleanHistoryOnStart>true</cleanHistoryOnStart>
        </rollingPolicy>
        <filter class="ch.qos.logback.classic.filter.LevelFilter">
            <level>ERROR</level>
            <onMatch>ACCEPT</onMatch>
            <onMismatch>DENY</onMismatch>
        </filter>
        <encoder>
            <pattern>%d %-5p %t [%C{1}:%L] - %m%n</pattern>
            <charset>UTF-8</charset>
        </encoder>
    </appender>

    <appender name="STDOUT" class="ch.qos.logback.core.ConsoleAppender">
        <encoder class="ch.qos.logback.classic.encoder.PatternLayoutEncoder">
            <pattern>%d{yyyy-MM-dd HH:mm:ss.SSS} [%thread] %-5level %logger{50} - %msg%n</pattern>
        </encoder>
    </appender>

    <appender name="logstash" class="net.logstash.logback.appender.LogstashTcpSocketAppender">
        <destination>127.0.0.1:4567</destination>
        <encoder charset="UTF-8" class="net.logstash.logback.encoder.LogstashEncoder">
             <!--    指定一个字段，当做es的索引名    -->
            <customFields>{"appName": "spring-boot-example"}</customFields>
        </encoder>
    </appender>


    <!-- 日志输出级别 -->
    <root level="INFO">
        <appender-ref ref="STDOUT"/>
        <appender-ref ref="dailyFile"/>
        <appender-ref ref="errorFile"/>
        <appender-ref ref="logstash"/>
    </root>
</configuration>