日志监控之 Grafana+Promtail+Loki

主要解决问题:项目负载均衡后,日志文件分散在多个位置,需要登录主机查看日志文件,在不确定那一个节点记录日志的情况下,很不方便,因此,使用Grafana+Promtail+Loki的访问收集到同一个服务上。(内容已验证,仅供参考,有更好的方式,请留言)

部署前说明:

  1. server 服务端使用loki存储和过滤数据,grafana界面展示。
  2. client 客户端,推送特定类型文件内容到服务端。

标题Server端服务安装,容器 docker-compose.yaml 文件:

yaml 复制代码
version: "3.9"

networks:
  loki:

services:
  loki:
    image: grafana/loki:2.9.2
    ports:
      - "3100:3100"
    command:
      - "-config.file=/etc/loki/local-config.yaml"
    networks:
      - loki

  grafana:
    image: grafana/grafana:latest
    ports:
      - "3000:3000"
    networks:
      - loki
    environment:
      - GF_PATHS_PROVISIONING=/etc/grafana/provisioning
      - GF_AUTH_ANONYMOUS_ENABLED=false  # 禁用匿名访问
      - GF_AUTH_BASIC_ENABLED=true  # 启用基本认证
      - GF_SECURITY_ADMIN_USER=admin  # 设置登录用户名
      - GF_SECURITY_ADMIN_PASSWORD=admin  # 设置登录账号密码
    volumes:
      - "./grafana-provisioning:/etc/grafana/provisioning"  # 数据源配置文件

volumes:
  grafana-provisioning:

验证安全

bash 复制代码
curl -v http://[ip]:3100/loki/api/v1/push

telnet [ip] 3100
或者
nc -vz [ip] 3100

promtail 部署

下载地址:https://github.com/grafana/loki/releases/download/v2.9.2/promtail-linux-amd64.zip

解压 promtail-linux-amd64.zip 同级目录编辑配置文件 promtail.yaml

yaml 复制代码
server:
  http_listen_port: 9080
  grpc_listen_port: 0

positions:
  filename: /tmp/positions.yaml

clients:
  - url: https://[ip]:3100/loki/api/v1/push

scrape_configs:
  - job_name: jike-master    # job名称,自定义
    static_configs:
      - targets:             # 如测试环境多个应用多个路径,从此行开始复制修改对应的标签
          - localhost
        labels:
          job: prod          # 监控类型
          project: jike-master     # 项目名称自定义
          host: jike-master        # 建议修改为本机ip,方便过滤
          __path__: /home/project/logs/*.log  # 本机日志文件目录,*.log

运行命令

bash 复制代码
nohup ./promtail-linux-amd64 --config.file=promtail.yaml &

登录,配置服务

登录地址: http://[url]:3000

配置数据源

相关推荐
川石课堂软件测试1 天前
性能测试|docker容器下搭建JMeter+Grafana+Influxdb监控可视化平台
运维·javascript·深度学习·jmeter·docker·容器·grafana
Walden-20202 天前
构建基于 DCGM-Exporter, Node exporter,PROMETHEUS 和 GRAFANA 构建算力监控系统
docker·容器·grafana·prometheus
牛角上的男孩3 天前
部署Prometheus、Grafana、Zipkin、Kiali监控度量Istio
grafana·prometheus·istio
小安运维日记7 天前
Linux云计算 |【第五阶段】CLOUD-DAY10
linux·运维·云计算·k8s·grafana·prometheus
川石课堂软件测试7 天前
性能测试|linux服务器搭建JMeter+Grafana+Influxdb监控可视化平台
linux·服务器·python·jmeter·机器学习·grafana·1024程序员节
無爲謂8 天前
入门 | Kafka数据使用vector消费到Loki中使用grafana展示
分布式·kafka·vector·grafana·loki·日志存储·es限制解决办法
typ20048 天前
promtail+Loki+Grafana
grafana
Mr. G K12 天前
【grafana+Prometheus(普罗米修斯)实现监控功能】
grafana·prometheus
再ZzZ12 天前
Docker快速安装Grafana
服务器·docker·grafana·1024程序员节
编程泓哥12 天前
grafana 8.0 添加钉钉告警
钉钉·grafana