ToB企服应用市场:ToB评测及商务社交产业平台

标题: 链接追踪系列-07.logstash安装json_lines插件 [打印本页]
作者: 大连密封材料    时间: 2024-7-18 11:44
标题: 链接追踪系列-07.logstash安装json_lines插件
进入docker中的logstash 容器内：
  1. jelex@bogon ~ % docker exec -it 7ee8960c99a31e607f346b2802419b8b819cc860863bc283cb7483bc03ba1420 /bin/sh
  2. $ pwd
  3. /usr/share/logstash
  4. $ ls
  5. bin        CONTRIBUTORS  Gemfile            jdk  logstash-core                   modules   tools   x-pack
  6. config        data              Gemfile.lock  lib  logstash-core-plugin-api  pipeline  vendor
  7. $ cd bin
  8. $ ls
  9. benchmark.bat             ingest-convert.bat  logstash-keystore        logstash-plugin.bat  pqrepair.bat
  10. benchmark.sh             ingest-convert.sh         logstash-keystore.bat        pqcheck                     ruby
  11. cpdump                     logstash                 logstash.lib.sh        pqcheck.bat             setup.bat
  12. dependencies-report  logstash.bat         logstash-plugin        pqrepair             system-install
复制代码
安装插件：
  1. $ logstash-plugin install logstash-codec-json_lines
复制代码

logstash优化：官方的建议是提高每次批处理的数目，调治传输间歇时间。当batch.size增大，es处理的事件数就会变少，写入也就越快了
vim /etc/logstash/pipeline.yml
pipeline线程数，官方建议是便是CPU内核数

pipeline.workers: 24
现实output时的线程数

pipeline.output.workers: 24
每次发送的事件数

pipeline.batch.size: 10000
发送延时（ms）

pipeline.batch.delay: 10

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。



欢迎光临 ToB企服应用市场:ToB评测及商务社交产业平台 (https://dis.qidao123.com/) Powered by Discuz! X3.4