filebeat接入nginx和mysql获取日志

下载nginx

复制代码
(1) 直接下载
yum install nginx -y

(2)查看状态启动
systemctl start nginx
systemctl status nginx

(3)配置文件检查
nginx -t

(4)端口检查
netstat -tulpn | grep :80

(5)如果端口有其他服务,需要修改nginx默认端口80,改成没被占用的端口
vim /etc/nginx/nginx.conf

server {
        listen       8800;
        listen       [::]:8800;

(6)修改完成后启动nginx
systemctl start nginx

(7)检查启动成功
curl 127.0.0.1

下载MySQL

mkdir -p /opt/mysql/data

mkdir -p /opt/mysql/config

vim /opt/mysql/config/my.cnf

复制代码
[mysqld]
user=mysql
default-storage-engine=INNODB
character-set-server=utf8
secure_file_priv=/var/lib/mysql
server-id=1
[client]
default-character-set=utf8
[mysql]
default-character-set=utf8

编辑docker-compose.yml文件

复制代码
version: '2'

services:
  mysql:
    image: mysql:8.0
    container_name: mysq
    restart: always
    environment:
      MYSQL_ROOT_PASSWORD: Tgqs@123
    volumes:
      - /opt/mysql/data:/var/lib/mysql
      - /opt/mysql/config/my.cnf:/etc/mysql/my.cnf
    ports:
      - "3306:3306"

volumes:
  master_data:

启动docker

docker-compose up -d docker exec -it mysql

mysq mysql -uroot -proot password

修改filebeat配置文件

复制代码
filebeat.inputs:
- type: log
  paths:
    - /var/log/nginx/access.log
  tags: ["ngnix"]
  fields:
    name: "ngnix-access"
  fields_under_root: true

- type: log
  paths:
    - /var/lib/docker/containers/e9be064c5cc99527906248cad7c7cb60ef7f3f66de86f704d0fa8f88cfcd72ef/e9be064c5cc99527906248cad7c7cb60ef7f3f66de86f704d0fa8f88cfcd72ef-json.log
  tags: ["mysql"]
  fields:
    name: "mysql"
  fields_under_root: true

output.elasticsearch:
  hosts: ["http://172.16.208.12:9200","http://172.16.208.13:9200"]
  indices:
    - index: "Tgqs-nginx-%{+yyyy.MM.dd}"
      when.contains:
        tags: "ngnix"  
    - index: "Tgqs-mysql-%{+yyyy.MM.dd}"
      when.contains:
        tags: "mysql"

setup.template.enabled: false
setup.template.name: "Tgqs"
setup.template.pattern: "Tgqs-*"
setup.ilm.enabled: false

启动filebeat

systemctl start filebeat

界面展示


相关推荐
IT成长日记2 小时前
【Docker基础】Docker数据持久化与卷(Volume)介绍
运维·docker·容器·数据持久化·volume·
物联网老王4 小时前
Ubuntu Linux Cursor 安装与使用一
linux·运维·ubuntu
艾伦_耶格宇5 小时前
【ACP】阿里云云计算高级运维工程师--ACP
运维·阿里云·云计算
程序员岳焱6 小时前
Java 与 MySQL 性能优化:Java 实现百万数据分批次插入的最佳实践
后端·mysql·性能优化
一位摩羯座DBA6 小时前
Redhat&Centos挂载镜像
linux·运维·centos
charlee446 小时前
nginx部署发布Vite项目
nginx·性能优化·https·部署·vite
cui_win7 小时前
【网络】Linux 内核优化实战 - net.core.flow_limit_table_len
linux·运维·网络
梦在深巷、7 小时前
MySQL/MariaDB数据库主从复制之基于二进制日志的方式
linux·数据库·mysql·mariadb
风清再凯7 小时前
自动化工具ansible,以及playbook剧本
运维·自动化·ansible
深圳安锐科技有限公司7 小时前
深圳安锐科技发布国内首款4G 索力仪!让斜拉桥索力自动化监测更精准高效
运维·安全·自动化·自动化监测·人工监测·桥梁监测·索力监测