部署filebeat收集nginx日志

搭建filebeat自动发现日志

在上一篇博客我们部署了logstash去读取日志，但是logstash需要消耗的资源较大。在每台客户端安装logstash不现实。

Filebeat是一个轻量级的日志采集器，我们可以使用filebeat去自动发现日志

（1）、下载解压filebeat

下载filebeat-6.5.4-linux-x86_64.tar.gz，解压

（2）、配置filebeat监控nginx日志

Filebeat的配置文件是filebeat.yml

增加以下配置

（3）、启动filebeat

新建一个启动脚本 startfilebeat.sh

新增以下内容：

nohup /opt/app/ELK/filebeat-6.5.4-linux-x86_64/filebeat -e -c filebeat.yml >> /opt/app/ELK/filebeat-6.5.4-linux-x86_64/logs/startServer.log 2>/opt/app/ELK/filebeat-6.5.4-linux-x86_64/logs/startServerError.log &

echo "filebeat success!!!"

./startfilebeat 启动filebeat

（4）、配置logstash

启动logstash

./logstash -f /opt/app/ELK/logstash-6.5.4/config/logstash-nginx.conf &

（5）到kibana上配置索引

添加完后就可以点击Discover进行查看

部署filebeat收集nginx日志相关推荐

K8S 使用 SideCar 模式部署 Filebeat 收集容器日志
推荐阅读 Helm3(K8S 资源对象管理工具)视频教程:https://edu.csdn.net/course/detail/32506 Helm3(K8S 资源对象管理工具)博客专栏:https: ...
ELK日志系统之使用Rsyslog快速方便的收集Nginx日志
常规的日志收集方案中Client端都需要额外安装一个Agent来收集日志,例如logstash.filebeat等,额外的程序也就意味着环境的复杂,资源的占用,有没有一种方式是不需要额外安装程序就能实 ...
CentOS下ELK收集Nginx日志
1. ELK收集Nginx普通格式的日志 1.1 测试服务器架构 1.2 ab工具使用 yum install httpd-tools -y# -n 总共发送多少条请求,注意,最后"/&qu ...
centos6.5下安装配置ELK及收集nginx日志
Elasticsearch 是个开源分布式搜索引擎,它的特点有:分布式,零配置,自动发现,索引自动分片,索引副本机制,restful风格接口,多数据源,自动搜索负载等. Logstash 是一个完全开 ...
Loki 收集Nginx日志以 grafana 可视化展示
背景通常用ELK来收集Nginx日志的,对于服务器较少的用elk则显得太重了,可以用loki+Promtail+grafana 代替. Loki类似elasticsearch,用于存储:Promta ...
centos7 单机安装ELK7收集nginx日志无坑版，肯定出图
系统:centos7 ELK版本:7.8.0 java环境:11 1. 配置JDK #配置JDK11 mkdir /root/source/cd /root/sourcewget https://re ...
ELK 收集 Nginx 日志
01 安装 Nginx 和 ab 工具 1.1 安装 nginx sudo apt-get install nginx -y # 安装Nginx sudo apt-get install apache ...
安装logstash5.4.1，并使用grok表达式收集nginx日志
关于收集日志的方式,最简单性能最好的应该是修改nginx的日志存储格式为json,然后直接采集就可以了. 但是实际上会有一个问题,就是如果你之前有很多旧的日志需要全部导入elk上查看,这时就有两个问题 ...
logstash收集nginx日志
1.配置nginx日志编辑nginx.conf文件 vim /etc/nginx/nginx.conf 在http节点下配置如下 log_format json '{"@timestamp ...

部署filebeat收集nginx日志

部署filebeat收集nginx日志相关推荐

最新文章

热门文章