基于Loki + Promtail + Grafana 搭建 Nginx 日志监控

文章目录

    • 引言
    • [第一部分:Loki 简介与安装](#第一部分:Loki 简介与安装)
      • [1.1 Loki 简介](#1.1 Loki 简介)
      • [1.2 Loki 安装](#1.2 Loki 安装)
        • [1.2.1 下载 Loki](#1.2.1 下载 Loki)
        • [1.2.2 安装 Loki](#1.2.2 安装 Loki)
      • [1.3 启动 Loki](#1.3 启动 Loki)
    • [第二部分:Promtail 简介与安装](#第二部分:Promtail 简介与安装)
      • [2.1 Promtail 简介](#2.1 Promtail 简介)
      • [2.2 Promtail 安装](#2.2 Promtail 安装)
        • [2.2.1 下载 Promtail](#2.2.1 下载 Promtail)
        • [2.2.2 安装 Promtail](#2.2.2 安装 Promtail)
      • [2.3 启动 Promtail](#2.3 启动 Promtail)
    • [第三部分:Grafana 配置与可视化](#第三部分:Grafana 配置与可视化)
      • [3.1 Grafana 安装](#3.1 Grafana 安装)
      • [3.2 添加 Loki 数据源](#3.2 添加 Loki 数据源)
      • [3.3 创建 Loki 数据源的 Dashboard](#3.3 创建 Loki 数据源的 Dashboard)
    • [第四部分:Nginx 配置](#第四部分:Nginx 配置)
      • [4.1 Nginx 配置](#4.1 Nginx 配置)
      • [4.2 重启 Nginx](#4.2 重启 Nginx)
    • 结论

🎉欢迎来到Java学习路线专栏~探索Java中的静态变量与实例变量



引言

随着Web应用规模的不断扩大,日志监控变得越来越重要。对于Nginx这样的Web服务器,实时监控和分析其日志信息可以帮助我们迅速发现问题、进行性能调优。本文将介绍如何使用Loki、Promtail和Grafana搭建一个高效的Nginx日志监控系统。

第一部分:Loki 简介与安装

1.1 Loki 简介

Loki 是一个由Grafana实验室开发的日志聚合工具,专注于存储和查询大规模的日志数据。它与Prometheus一起使用,可以提供完整的监控解决方案。

1.2 Loki 安装

1.2.1 下载 Loki
bash 复制代码
# 创建 Loki 配置文件夹
sudo mkdir -p /etc/loki
# 下载 Loki 配置文件
sudo wget https://raw.githubusercontent.com/grafana/loki/main/cmd/loki/loki-local-config.yaml -O /etc/loki/loki-local-config.yaml
1.2.2 安装 Loki
bash 复制代码
# 下载 Loki 安装脚本
curl -O https://raw.githubusercontent.com/grafana/loki/main/scripts/loki-docker.sh
# 添加执行权限
chmod +x loki-docker.sh
# 执行 Loki 安装脚本
./loki-docker.sh

1.3 启动 Loki

bash 复制代码
# 启动 Loki
docker run -d --name loki -p 3100:3100 -v /etc/loki:/etc/loki -v /tmp/loki:/tmp/loki grafana/loki

第二部分:Promtail 简介与安装

2.1 Promtail 简介

Promtail 是 Grafana Labs 开发的一个用于将各种日志数据发送到 Loki 的代理工具。它是 Loki 日志收集架构中的一部分,用于从不同的数据源中搜集日志并发送到 Loki 中进行存储。

2.2 Promtail 安装

2.2.1 下载 Promtail
bash 复制代码
# 创建 Promtail 配置文件夹
sudo mkdir -p /etc/promtail
# 下载 Promtail 配置文件
sudo wget https://raw.githubusercontent.com/grafana/loki/main/cmd/promtail/promtail-local-config.yaml -O /etc/promtail/promtail-local-config.yaml
2.2.2 安装 Promtail
bash 复制代码
# 下载 Promtail 安装脚本
curl -O https://raw.githubusercontent.com/grafana/loki/main/scripts/promtail-docker.sh
# 添加执行权限
chmod +x promtail-docker.sh
# 执行 Promtail 安装脚本
./promtail-docker.sh

2.3 启动 Promtail

bash 复制代码
# 启动 Promtail
docker run -d --name promtail -v /var/log:/var/log -v /etc/promtail:/etc/promtail --link loki:loki grafana/promtail

第三部分:Grafana 配置与可视化

3.1 Grafana 安装

bash 复制代码
# 安装 Grafana
docker run -d --name grafana -p 3000:3000 grafana/grafana

在浏览器中访问 http://localhost:3000,使用默认的用户名和密码(admin/admin)登录 Grafana。

3.2 添加 Loki 数据源

  1. 在左侧导航栏中选择 "Settings" -> "Data Sources"。
  2. 点击 "Add your first data source"。
  3. 选择 "Loki"。
  4. 配置 Loki 数据源的 URL(http://loki:3100)。
  5. 点击 "Save & Test",确保数据源配置正确。

3.3 创建 Loki 数据源的 Dashboard

  1. 在左侧导航栏中选择 "+" -> "Dashboard"。
  2. 点击 "Add new panel"。
  3. 在 "Query" 中输入 Loki 查询语句,例如 '{job="nginx"}'
  4. 完成其他可视化配置,点击 "Apply"。

第四部分:Nginx 配置

为了让 Nginx 将日志发送到 Loki,我们需要对 Nginx 进行一些配置。

4.1 Nginx 配置

在 Nginx 的配置文件中添加以下日志格式和日志路径配置:

nginx 复制代码
http {
    log_format loki 'time="$time_iso8601" level=info msg="$request"';

    access_log /var/log/nginx/access.log loki;
    error_log /var/log/nginx/error.log;
}

4.2 重启 Nginx

bash 复制代码
# 重启 Nginx
sudo service nginx restart

现在,Nginx 的访问日志将被发送到 Loki 中。

结论

通过 Loki、Promtail 和 Grafana 的组合,我们成功搭建了一个Nginx日志监控系统。这个系统能够实时收集、存储和可视化Nginx的访问日志,为我们提供了一个强大的工具来监控和分析Web服务器的性能。

这套监控系统不仅能够提供实时的性能指标,还能够帮助我们及时发现潜在的问题,优化Web应用的性能。希望通过本文的介绍,你能够顺利搭建自己的Nginx日志监控系统,并更好地运维你的Web服务器。


🧸结尾 ❤️ 感谢您的支持和鼓励! 😊🙏

📜您可能感兴趣的内容:

相关推荐
Pythonliu74 小时前
茴香豆 + Qwen-7B-Chat-Int8
linux·运维·服务器
你疯了抱抱我4 小时前
【RockyLinux 9.4】安装 NVIDIA 驱动,改变分辨率,避坑版本。(CentOS 系列也能用)
linux·运维·centos
小O_好好学5 小时前
CentOS 7文件系统
linux·运维·centos
哲伦贼稳妥6 小时前
一天认识一个硬件之机房地板
运维·网络·经验分享·其他
苹果醋36 小时前
快速玩转 Mixtral 8x7B MOE大模型!阿里云机器学习 PAI 推出最佳实践
spring boot·nginx·毕业设计·layui·课程设计
john_hjy6 小时前
11. 异步编程
运维·服务器·javascript
x晕x6 小时前
Linux dlsym符号查找疑惑分析
linux·运维·服务器
活跃的煤矿打工人6 小时前
【星海saul随笔】Ubuntu基础知识
linux·运维·ubuntu
tangdou3690986557 小时前
两种方案手把手教你多种服务器使用tinyproxy搭建http代理
运维·后端·自动化运维
北京智和信通7 小时前
云平台和虚拟化智慧运维监控,全面提升故障感知与处置能力
运维·虚拟化·云平台·虚拟机监控