ELK优化之Filebeat部署

目录

1.安装配置Nginx

[2.安装 Filebeat](#2.安装 Filebeat)

[3.设置 filebeat 的主配置文件](#3.设置 filebeat 的主配置文件)

4.修改Logstash配置

5.启动配置

6.kibana验证

主机名 ip地址 主要软件
es01 192.168.9.114 ElasticSearch
es02 192.168.9.115 ElasticSearch
es03 192.168.9.116 ElasticSearch、Kibana
nginx01 192.168.9.113 nginx、Logstash
NA 192.168.9.111 nginx、Filebeat
复制代码
初始化操作,所有服务器操作
systemctl disable --now firewalld
setenforce 0
vim /etc/selinux/config
SELINUX=disabled

1.安装配置Nginx

复制代码
cd /etc/yum.repos.d/
上传nginx.repo文件
yum install -y nginx
systemctl enable --now nginx
cd /usr/share/nginx/html
  #准备测试页面
echo '<h1>this is web page</h1>' > test.html
echo '<h1>this is web2 page</h1>' > test1.html

2.安装 Filebeat

复制代码
上传软件包 filebeat-6.7.2-linux-x86_64.tar.gz 到/opt目录
tar xf filebeat-6.7.2-linux-x86_64.tar.gz
mv filebeat-6.7.2-linux-x86_64 /usr/local/filebeat

3.设置 filebeat 的主配置文件

复制代码
cd /usr/local/filebeat
cp filebeat.yml filebeat.yml.bak
vim filebeat.yml
filebeat.inputs:
- type: log         #指定 log 类型,从日志文件中读取消息
  enabled: true     #24行
  paths:
    - /var/log/nginx/access.log       #28行指定监控的日志文件
    - /var/log/nginx/error.log
  tags: ["filebeat"]		#设置索引标签
  fields:           #46行可以使用 fields 配置选项设置一些参数字段添加到 output 中
    service_name: nginx
    log_from: 192.168.9.111

--------------output-------------------
(全部注释掉)

----------------Logstash output---------------------
output.logstash:    #162行
  hosts: ["192.168.9.113:5044"]      #164行指定 logstash 的 IP 和端口

4.修改Logstash配置

复制代码
cd /etc/logstash/conf.d
vim filebeat.conf
input {
    beats {
        port => "5044"
    }
}

#filter {}

output {
     elasticsearch {
                  hosts => ["192.168.9.114:9200", "192.168.9.115:9200", "192.168.9.116:9200"]
                  index => "nginx-%{+yyyy.MM.dd}"
     }

}


logstash -t -f filebeat.conf  #检查文件


5.启动配置

192.168.9.111

#启动 filebeat
./filebeat -e -c filebeat.yml
#-e:输出到标准输出,禁用syslog/文件输出
#-c:指定配置文件

192.168.9.113

#启动 logstash

logstash -f filebeat.conf

6.kibana验证



相关推荐
斯普信专业组6 天前
ELK 统一日志分析系统部署与实践指南(下)
运维·elk
听说唐僧不吃肉6 天前
解析ELK(filebeat+logstash+elasticsearch+kibana)日志系统原理以及k8s集群日志采集过程
elk·elasticsearch·kubernetes
斯普信专业组7 天前
ELK 统一日志分析系统部署与实践指南(上)
elk
kunwen12314 天前
ELKB日志分析平台 部署
elk·es·日志分析·beats
东皋长歌15 天前
SpringBoot集成ELK
spring boot·后端·elk
勿芮介22 天前
[微服务]ELK Stack安装与配置全指南
elk·微服务·架构
core5121 个月前
基于elk实现分布式日志
分布式·elk·日志·logstash
晴子呀1 个月前
使用Springboot实现简单的ELK日志搜索系统
spring boot·后端·elk
悟能不能悟1 个月前
如何搭建ELK
elk
only_Klein1 个月前
K8S部署ELK(二):部署Kafka消息队列
elk·kafka·kubernetes