如何对1K+应用产生的Elasticsearch索引进行运维治理
背景 最近在全面接手估计有1k+的生产日志的运维工作，每天面临着大量的投诉，大部分的诉求都是日志突然没了，为了对生产故障进行排查要紧急查看日志...
filebeat
filebeat配置Windows&Linux机器saltstack批量下发模板及遇到的坑
Linux机器: for ip in `cat ../ip.txt`;do salt $ip cp.get_file salt://filebeat_deploy/example-server.yml /data/filebeat/config/example-server.yml salt $ip cp.get_file salt://filebeat_deploy/restart.sh /data/filebeat/restart.sh salt "$ip" cmd.run "cd /data/filebeat/ && sh restart.sh" done 这里有两个地方需要注意，否者会有严重问题： 1、要先到这里把第一种模式的res...
filebeat三种debug模式的restart脚本
用于saltstack自动化部署模式：所有输出全部定向到/dev/null，可以实现在自动化下发配置的时候salt命令全程不卡住 #!/bin/bash ps aux |grep "filebeat" |grep...
解决filebeat报413 Request Entity Too Large错误
背景 完整的报错内容如下： filebeat failed to publish events 413 request entity too large 遇到此种报错将会导致es中没有数据 解决方法 找到filebeat的主配置filebeat.yml，...
如何限制filebeat使用的CPU核心数
背景 在实际的生产中的大量实践后我们会发现即使Elasticsearch官方宣称filebeat为轻量级采集agent，但是如果一个性能较好的...
filebeat采集日志时如何附加额外字段
背景 我们都知道filebeat在采集的时候可以在主配置里面进行设置后就会采集上主机上的hostname作为一个字段，可是实际生产环境经常会遇...