链接追踪系列-07.logstash安装json_lines插件

进入docker中的logstash 容器内：

1. jelex@bogon ~ % docker exec -it 7ee8960c99a31e607f346b2802419b8b819cc860863bc283cb7483bc03ba1420 /bin/sh
2. $ pwd
3. /usr/share/logstash
4. $ ls
5. bin        CONTRIBUTORS  Gemfile            jdk  logstash-core                   modules   tools   x-pack
6. config        data              Gemfile.lock  lib  logstash-core-plugin-api  pipeline  vendor
7. $ cd bin
8. $ ls
9. benchmark.bat             ingest-convert.bat  logstash-keystore        logstash-plugin.bat  pqrepair.bat
10. benchmark.sh             ingest-convert.sh         logstash-keystore.bat        pqcheck                     ruby
11. cpdump                     logstash                 logstash.lib.sh        pqcheck.bat             setup.bat
12. dependencies-report  logstash.bat         logstash-plugin        pqrepair             system-install

复制代码

安装插件：

1. $ logstash-plugin install logstash-codec-json_lines

复制代码

logstash优化：官方的建议是提高每次批处理的数目，调治传输间歇时间。当batch.size增大，es处理的事件数就会变少，写入也就越快了
vim /etc/logstash/pipeline.yml
pipeline线程数，官方建议是便是CPU内核数

pipeline.workers: 24
现实output时的线程数

pipeline.output.workers: 24
每次发送的事件数

pipeline.batch.size: 10000
发送延时（ms）

pipeline.batch.delay: 10

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。