Ops Agent 第三方应用配置实践 _Ops

作者：MeshCloud脉时云公有云架构师许多杰
引言Ops Agent 在 google Cloud Compute Engine 中将日志记录和指标组合到单个代理中，提供了用于收集日志和指标的基于 YAML 的配置，并具有高吞吐量日志记录功能，并且可以配置 Ops Agent 以从受支持的第三方应用收集日志和指标。

整体架构

文章插图

技术简介将 Ops Agent下载到 Compute Engine中，采用Ops Agent 自定义配置的方式，修改配置文件以覆盖默认的内置配置文件。在Ops Agent配置文件中通过手动设置receivers、processors和service，以达到我们收集指定第三方应用log和metric的目的。

Ops agent 自定义配置介绍

配置模型

Ops Agent 使用内置默认配置；您无法直接修改此内置配置。但是，您可以创建包含替换内容的文件，代理重启时这些替换内容会与内置配置合并。

配置的构成要素如下：

receivers：此元素描述代理要收集的信息。

processors：此元素描述代理可以如何修改收集的信息。

service：此元素将接收器和处理器连接在一起，以创建数据流，称为“流水线” 。service 元素包含一个 pipelines 元素，后者可包含多个流水线。

内置配置由这些元素组成，我们可以使用相同的元素来替换该内置配置。
每个接收器和每个处理器都可以用于多个流水线。

内置配置

Ops Agent 的内置配置定义了日志和指标的默认收集。下面显示了适用于 linux 和 windows 的内置配置：默认情况下，Ops Agent 会收集基于文件的 syslog 日志和主机指标。

logging:receivers:syslog:type: filesinclude_paths:- /var/log/messages- /var/log/syslogservice:pipelines:default_pipeline:receivers: [syslog]metrics:receivers:hostmetrics:type: hostmetricscollection_interval: 60sprocessors:metrics_filter:type: exclude_metricsmetrics_pattern: []service:pipelines:default_pipeline:receivers: [hostmetrics]processors: [metrics_filter]

用户指定的配置

如需替换内置配置，您需要向用户配置文件添加新配置元素。将您的 Ops Agent 配置放在以下文件中：

对于 Linux：/etc/google-cloud-ops-agent/config.yaml 。

对于 Windows：C:Program FilesGoogleCloud OperationsOps Agentconfigconfig.yaml 。

用户指定的配置将在代理重启时与内置配置合并。

如需替换内置接收器、处理器或流水线，请使用相同的标识符在 config.yaml 文件中重新定义它。
例如，指标的内置配置包含一个指定 60 秒收集时间间隔的 hostmetrics 接收器。如需将主机指标的收集时间间隔更改为 30 秒，请在 config.yaml 文件中添加名为 hostmetrics 的指标接收器，并将 collection_interval 值设置为 30 秒，如以下示例所示：
metrics:receivers:hostmetrics:type: hostmetricscollection_interval: 30s