IT评测·应用市场-qidao123.com

标题: docker搭建elk [打印本页]
作者: 河曲智叟    时间: 15 小时前
标题: docker搭建elk
1.拉取镜像

  1. docker pull elasticsearch:7.16.3
  2. docker pull logstash:7.16.3
  3. docker pull kibana:7.16.3
复制代码
2.ES配置

elasticsearch.yml
  1. http.host: 0.0.0.0
  2. xpack.security.enabled: false
  3. xpack.license.self_generated.type: basic
  4. xpack.security.transport.ssl.enabled: false
  5. network.host: 0.0.0.0
复制代码
3.logstash配置

logstash.yml
  1. http.host: 0.0.0.0
  2. xpack.monitoring.elasticsearch.hosts: [ "http://es7163:9200" ]
复制代码
logstash.conf：
  1. input {
  2.   tcp {
  3.           mode => "server"
  4.           host => "0.0.0.0"
  5.           port => 5044
  6.           codec => json_lines
  7.       }
  8. }
  9. filter{
  11. }
  12. output {
  13.   elasticsearch {
  14.       hosts => "es7163:9200"
  15.       index => "tingshu-%{+YYYY.MM.dd}"
  16.   }
  17. }
复制代码
4.kibana配置

kibana.yml：
  1. server.host: "0.0.0.0"
  2. elasticsearch.hosts: ["http://es7163:9200"]
  3. i18n.locale: "zh-CN"
复制代码
5.创建自界说网络

  1. docker network create elk
复制代码
6.docker-compose.yml文件

  1. version: '3'
  3. services:
  4.   elasticsearch:
  5.     image: elasticsearch:7.16.3
  6.     container_name: es7163
  7.     networks:
  8.       - elk
  9.     environment:
  10.       - ES_JAVA_OPTS=-Xms1024m -Xmx1024m
  11.       - discovery.type=single-node
  12.     ports:
  13.       - "9200:9200"
  14.       - "9300:9300"
  15.     volumes:
  16.       - /usr/local/es/data:/usr/share/elasticsearch/data
  17.       - /usr/local/es/plugins:/usr/share/elasticsearch/plugins
  18.       - /usr/local/es/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml
  19.     restart: always
  21.   logstash:
  22.     image: logstash:7.16.3
  23.     container_name: logstash7163
  24.     networks:
  25.       - elk
  26.     deploy:
  27.       resources:
  28.         limits:
  29.           cpus: '2'
  30.           memory: 4g
  31.     ports:
  32.       - "5044:5044"  # Logstash 默认端口
  33.       - "9600:9600"
  34.     volumes:
  35.       - /usr/local/logstash/config/logstash.yml:/usr/share/logstash/config/logstash.yml  # 配置文件
  36.       - /usr/local/logstash/config/logstash.conf:/usr/share/logstash/pipeline/logstash.conf  # 配置文件
  37.     restart: always
  38.     depends_on:
  39.       - elasticsearch
  41.   kibana:
  42.     image: kibana:7.16.3
  43.     container_name: kibana7163
  44.     networks:
  45.       - elk
  46.     ports:
  47.       - "5601:5601"
  48.     volumes:
  49.       - /usr/local/kibana/config/kibana.yml:/usr/share/kibana/config/kibana.yml
  50.     restart: always
  51.     depends_on:
  52.       - elasticsearch
  54. networks:
  55.   elk:
  56.     driver: bridge
复制代码
7.springboot对接Logstash

1.创建一个springboot项目引入主要依赖

  1. <dependency>
  2.      <groupId>net.logstash.logback</groupId>
  3.      <artifactId>logstash-logback-encoder</artifactId>
  4.      <version>6.6</version>
  5. </dependency>
复制代码
2.application.yml配置

  1. server:
  2.   port: 8080
  3. logging:
  4.   config: classpath:logback-spring.xml
  5. spring:
  6.   application:
  7.     name: linging-test
复制代码
3.resources目录中新增logback-spring.xml

  1. <?xml version="1.0" encoding="UTF-8"?>
  2. <configuration>
  3.     <include resource="org/springframework/boot/logging/logback/base.xml" />
  4.     <springProperty scope="context" name="springAppName" source="spring.application.name"/>
  5.     <springProperty scope="context" name="serverPort" source="server.port"/>
  6.     <appender name="LOGSTASH" class="net.logstash.logback.appender.LogstashTcpSocketAppender">
  7.         <!--logstash的服务地址和端口，可以实际情况设置-->
  8.         <destination>192.168.159.100:5044</destination>
  9.         <!-- 日志输出编码 -->
  10.         <encoder charset="UTF-8" class="net.logstash.logback.encoder.LogstashEncoder">
  11.             <providers>
  12.                 <timestamp>
  13.                     <timeZone>UTC</timeZone>
  14.                 </timestamp>
  15.                 <pattern>
  16.                     <pattern>
  17.                         {
  18.                         <!--应用名称 -->
  19.                         "app": "${springAppName}_${serverPort}",
  20.                         <!--打印时间 -->
  21.                         "timestamp": "%d{yyyy-MM-dd HH:mm:ss.SSS}",
  22.                         <!--线程名称 -->
  23.                         "thread": "%thread",
  24.                         <!--日志级别 -->
  25.                         "level": "%level",
  26.                         <!--日志名称 -->
  27.                         "logger_name": "%logger",
  28.                         <!--日志信息 -->
  29.                         "message": "%msg",
  30.                         <!--日志堆栈 -->
  31.                         "stack_trace": "%exception"
  32.                         }
  33.                     </pattern>
  34.                 </pattern>
  35.             </providers>
  36.         </encoder>
  37.     </appender>
  38.     <!--定义日志文件的存储地址,使用绝对路径-->
  39.     <property name="LOG_HOME" value="/home/logs"/>
  40.     <!-- 按照每天生成日志文件 -->
  41.     <appender name="FILE" class="ch.qos.logback.core.rolling.RollingFileAppender">
  42.         <rollingPolicy class="ch.qos.logback.core.rolling.TimeBasedRollingPolicy">
  43.             <!--日志文件输出的文件名-->
  44.             <fileNamePattern>${LOG_HOME}/${springAppName}-${serverPort}-%d{yyyy-MM-dd}.log</fileNamePattern>
  45.         </rollingPolicy>
  46.         <encoder>
  47.             <pattern>%d{yyyy-MM-dd HH:mm:ss.SSS} [%thread] %-5level %logger{36} - %msg%n</pattern>
  48.         </encoder>
  49.     </appender>
  50.     <root level="INFO">
  51.         <appender-ref ref="LOGSTASH" />
  52.         <appender-ref ref="FILE" />
  53.         <appender-ref ref="CONSOLE" />
  54.     </root>
  55. </configuration>
复制代码
4.启动项目，搞点日记


5.进入kibana控制台



6.添加索引模式


7.检索日记，打开Discover



免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。



欢迎光临 IT评测·应用市场-qidao123.com (https://dis.qidao123.com/) Powered by Discuz! X3.4