Beats:在单个服务器上配置多个 Beats 实例

本文档作为如何在同一服务器上配置和运行 Filebeat/Metricbeat/Auditbeat 的多个实例的指南。 当你需要为同一台计算机上的不同应用程序或环境分离数据收集和处理时,此设置特别有用。

在今天的展示中,我们将以 Filebeat 为例来进行展示。此方法也适用于其他的 Beats。

复制 Filebeat 配置目录

要创建 Filebeat 的新实例,我们首先需要复制现有的 Filebeat 配置目录。 这可以使用以下命令来完成:

bash 复制代码
cp -R /etc/filebeat /etc/filebeat_02

此命令创建一个名为 /etc/filebeat_02 的目录,其中包含所有 Filebeat 配置文件的副本。 需要注意的是,Filebeat 的每个实例都应该有自己的配置目录,以避免冲突并确保实例之间的适当隔离。

修改 Filebeat 配置

接下来,在文本编辑器中打开 /etc/filebeat_02/filebeat.yml 文件。 在此文件中,你需要修改 output.elasticsearch 字段以指定要将日志发送到的 Elasticsearch 集群的地址。 此步骤至关重要,因为它将数据流从 Filebeat 引导到适当的 Elasticsearch 实例。

创建新的服务单位

要将新的 Filebeat 实例作为系统服务进行管理,我们需要创建一个新的服务单元。 这可以通过以下命令来完成:

bash 复制代码
1.  cd /usr/lib/systemd/system
2.  cp filebeat.service filebeat_02.service

然后,在文本编辑器中打开 filebeat_02.service 文件并修改以下字段:

ini 复制代码
1.  [Unit]
2.  Description=Filebeat sends log files to Elasticsearch.
3.  Documentation=https://www.elastic.co/beats/filebeat
4.  Wants=network-online.target
5.  After=network-online.target

7.  [Service]
8.  Environment="BEAT_LOG_OPTS="
9.  Environment="BEAT_CONFIG_OPTS=-c /etc/filebeat_02/filebeat.yml"
10.  ExecStart=/usr/share/filebeat/bin/filebeat --environment systemd $BEAT_LOG_OPTS $BEAT_CONFIG_OPTS
11.  Restart=always
12.  [Install]
13.  WantedBy=multi-user.target

此配置可确保新的 Filebeat 实例被系统视为单独的服务,并且可以独立管理。

为数据和日志创建目录

每个 Filebeat 实例都需要自己的数据和日志目录。 可以使用以下命令创建它们:

bash 复制代码
1.  mkdir -p /var/lib/filebeat_02
2.  mkdir -p /var/log/filebeat_02

这些目录将存储新 Filebeat 实例的操作数据和日志,使它们与其他实例分开。

启动第二个 Filebeat 实例

最后,你可以使用以下命令启动第二个 Filebeat 实例:

markdown 复制代码
1.  systemctl daemon-reload
2.  systemctl enable filebeat_02
3.  systemctl start filebeat_02

这些命令确保新的 Filebeat 服务加载到系统中,启用开机自启动,并最终启动。

通过执行这些步骤,你可以在单个服务器上运行 Filebeat 的多个实例,每个实例都有自己的配置、数据和日志目录。 此设置为你的数据收集和处理任务提供了高度的灵活性和控制。

相关推荐
Elasticsearch1 天前
Elasticsearch:安装自行管理的 Elastic Stack 集群
elasticsearch
程序员差不多先生1 天前
Anthropic 用 5 个月重写了 Git:当 AI Agent 把版本控制系统逼到墙角
人工智能·git·elasticsearch·deepseek v4 pro·kimi k3·glm 5.3·qwen3.7 max
Elastic 中国社区官方博客1 天前
Jina AI:Elasticsearch 集成
大数据·运维·人工智能·elasticsearch·搜索引擎·全文检索·jina
草莓熊Lotso1 天前
【C++ 基于微服务的即时通讯系统】Elasticsearch 从安装到 C++ 客户端二次封装全落地
linux·网络·数据库·c++·elasticsearch·微服务
.冰块.1 天前
ELK 日志分析系统实验:部署 Elasticsearch 双节点集群实现 Apache 日志采集与 Kibana 可视化
elk·elasticsearch·apache·日志
顧棟2 天前
Elasticsearch Scroll :分页进度到底记在哪?
大数据·elasticsearch·搜索引擎
一枕槐安4872 天前
线上检索延迟 2 秒,我把向量库从 ES 换成了 Chroma
大数据·elasticsearch·搜索引擎
Rock Chin6972 天前
把 Claude Code 和 Codex 接进微信、飞书、钉钉:LangBot Runner 插件实战
elasticsearch·钉钉·飞书
Elasticsearch2 天前
Jina AI:Elasticsearch 集成
elasticsearch
吃饱了得干活2 天前
用 PageHelper 同步数据到 ES:能跑,但这几个坑得先知道
后端·elasticsearch