收集 VMware Tanzu 日志
本文档介绍了如何使用 Bindplane 代理将 VMware Tanzu 日志注入 Google Security Operations。
VMware Tanzu 是一个 Kubernetes 平台,可为 Kubernetes API 服务器事件、资源访问、身份验证决策和配置更改生成 JSON 和 syslog 格式的审核日志。解析器会从 JSON 格式的审核日志中提取字段,并将其映射到统一数据模型 (UDM)。
准备工作
请确保满足以下前提条件:
- Google SecOps 实例
- Windows Server 2016 或更高版本,或者安装了
systemd的 Linux 主机 - Bindplane 代理与 Tanzu Operations Manager 之间的网络连接
- 如果在代理后面运行,请确保按照 Bindplane 代理要求打开防火墙端口
- 对 VMware Tanzu 的特权访问
获取 Bindplane 代理的 Google SecOps 凭证
如需向 Google SecOps 验证 Bindplane 代理,请选择以下方法之一:
- 新部署:使用 Chronicle API(选项 1)。
- 旧版部署:继续使用数据注入身份验证文件(方法 2),直到 Ingestion API 于 2027 年 7 月 20 日停用。
方法 1:为 Chronicle API 创建服务账号(推荐)
- 登录 Google Cloud 控制台,然后选择与您的 Google SecOps 实例关联的 Google Cloud 项目。
- 依次前往 IAM 和管理 > 服务账号。
- 点击创建服务账号。
- 提供以下配置详细信息:
- 服务账号名称:输入账号的名称(例如
bindplane-ingest)。 - 服务账号说明:输入说明(例如
Bindplane agent log ingestion)。
- 服务账号名称:输入账号的名称(例如
- 点击创建并继续。
- 在向此服务账号授予对项目的访问权限部分,点击选择角色,然后选择 Chronicle Editor。
- 点击继续,然后点击完成。
- 点击您创建的服务账号,然后前往密钥标签页。
- 依次点击添加密钥 > 创建新密钥。
- 选择 JSON,然后点击创建。密钥文件会下载到您的计算机上。
- 将密钥文件另存为 Bindplane 收集器目录(Linux 上的
/opt/observiq-otel-collector/ingestion-auth.json或 Windows 上的C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json)中的ingestion-auth.json,或更新config.yaml中的creds_file_path以匹配您保存它的路径。 - 前往 IAM 和管理 > 设置,然后复制项目编号。您在配置导出器时需要用到该名称。
方法 2:下载数据注入身份验证文件(旧版)
- 登录 Google SecOps 控制台。
- 依次前往设置 > 数据管理 > 收集代理。如果您使用的是仅限 SIEM 的平台,请依次前往设置 > 收集代理。
- 下载数据注入身份验证文件。
- 将该文件安全地保存在将要安装 Bindplane 代理的系统上。
获取 Google SecOps 客户 ID
- 登录 Google SecOps 控制台。
- 依次前往设置 > 管理 > 个人资料。如果您使用的是仅限 SIEM 的平台,请依次前往设置 > 个人资料。
复制并保存组织详细信息部分中的客户 ID。
安装 Bindplane 代理
根据以下说明,在 Windows 或 Linux 操作系统上安装 Bindplane 代理。
Windows 安装
- 以管理员身份打开命令提示符或 PowerShell。
运行以下命令:
msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet等待安装完成。
运行以下命令,验证安装是否成功:
sc query observiq-otel-collector该服务应显示为正在运行。
Linux 安装
- 打开具有 root 或 sudo 权限的终端。
运行以下命令:
sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh等待安装完成。
运行以下命令,验证安装是否成功:
sudo systemctl status observiq-otel-collector该服务应显示为 active (running)。
其他安装资源
如需了解其他安装选项和问题排查,请参阅 Bindplane 代理安装指南。
配置 Bindplane 代理以注入 syslog 并发送到 Google SecOps
找到配置文件
Linux:
sudo nano /opt/observiq-otel-collector/config.yamlWindows:
notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
修改配置文件
将
config.yaml的全部内容替换为以下配置:receivers: udplog: listen_address: "0.0.0.0:514" exporters: chronicle/vmware_tanzu: protocol: https # Region of your instance, for example us, europe, asia-southeast1 location: <LOCATION> # Project number of the Google Cloud project linked to the instance project: '<PROJECT_NUMBER>' compression: gzip creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json' customer_id: '<customer_id>' endpoint: chronicle.googleapis.com log_type: VMWARE_TANZU raw_log_field: body service: pipelines: logs/vmware_tanzu_to_chronicle: receivers: - udplog exporters: - chronicle/vmware_tanzu
配置参数
替换以下占位符:
接收器配置:
listen_address:要监听的 IP 地址和端口:0.0.0.0,以监听所有接口(推荐)- 端口
514是标准 syslog 端口(在 Linux 上需要 root 权限;对于非 root 用户,请使用1514)
导出器配置:
creds_file_path:服务账号 JSON 密钥文件的完整路径(选项 1):- Linux:
/opt/observiq-otel-collector/ingestion-auth.json - Windows:
C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
- Linux:
customer_id:从 Google SecOps 控制台复制的客户 IDlocation:将<LOCATION>替换为 Google SecOps 实例所在的区域(例如us、europe或asia-southeast1)。导出工具会在此值前面加上chronicle.googleapis.com。如需查看完整列表,请参阅区域级端点。project:将<PROJECT_NUMBER>替换为 IAM 和管理 > 设置中的项目编号。endpoint:保持设置为chronicle.googleapis.com。
旧版提取 API 导出工具
如果您使用选项 2 中的数据注入身份验证文件,请将
exporters代码块替换为以下内容。将creds_file_path设置为数据注入身份验证文件的路径,如果您的实例位于美国境外,请将malachiteingestion-pa.googleapis.com替换为您的区域端点(例如europe-malachiteingestion-pa.googleapis.com)。exporters: chronicle/vmware_tanzu: compression: gzip creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json' customer_id: '<customer_id>' endpoint: malachiteingestion-pa.googleapis.com log_type: VMWARE_TANZU raw_log_field: body
保存配置文件
- 修改后,保存文件:
- Linux:依次按
Ctrl+O、Enter和Ctrl+X - Windows:依次点击文件 > 保存
- Linux:依次按
重启 Bindplane 代理以应用更改
如需在 Linux 中重启 Bindplane 代理,请运行以下命令:
sudo systemctl restart observiq-otel-collector验证服务是否正在运行:
sudo systemctl status observiq-otel-collector检查日志中的错误:
sudo journalctl -u observiq-otel-collector -f
如需在 Windows 中重启 Bindplane 代理,请选择以下选项之一:
以管理员身份运行命令提示符或 PowerShell:
net stop observiq-otel-collector && net start observiq-otel-collector“服务”控制台:
- 按
Win+R,输入services.msc,然后按 Enter 键。 - 找到 observIQ OpenTelemetry 收集器。
- 右键点击并选择重启。
验证服务是否正在运行:
sc query observiq-otel-collector检查日志中的错误:
type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
- 按
为 VMware Tanzu 配置 syslog
- 登录 Tanzu Operations Manager 网页界面。
- 选择您的用户名,然后点击设置。
- 选择 Syslog。
- 点击是,将系统日志发送到远程服务器。
- 提供以下配置详细信息:
- 地址:输入 Bindplane 代理 IP 地址。
- 端口:输入 Bindplane 代理端口号。
- 传输协议:选择 UDP 或 TCP,具体取决于您的 Bindplane 代理配置。
- 点击保存。
UDM 映射表
| 日志字段 | UDM 映射 | 逻辑 |
|---|---|---|
annotations.authorization.k8s.io/decision |
security_result.action |
如果注解 authorization.k8s.io/decision 存在,其值会转换为大写。如果大写值为“ALLOW”,则 UDM 字段设置为 ALLOW。否则,该值会设为 BLOCK。 |
annotations.authorization.k8s.io/reason |
security_result.description |
如果注解 authorization.k8s.io/reason 存在,则使用其值(移除英文双引号)。 |
apiVersion |
metadata.product_version |
直接映射。 |
auditID |
metadata.product_log_id |
直接映射。 |
kind |
metadata.product_event_type |
直接映射。 |
objectRef.name |
target.resource.name |
直接映射。 |
objectRef.namespace |
target.resource.attribute.labels.key,target.resource.attribute.labels.value |
key 设置为“命名空间”,value 取自 objectRef.namespace。 |
objectRef.resource |
target.resource.resource_subtype |
直接映射。 |
objectRef.resourceVersion |
target.resource.attribute.labels.key,target.resource.attribute.labels.value |
key 设置为“resourceVersion”,value 取自 objectRef.resourceVersion。 |
objectRef.uid |
target.resource.product_object_id |
直接映射。 |
requestReceivedTimestamp/timestamp |
metadata.event_timestamp |
解析器会先尝试解析 requestReceivedTimestamp。如果不存在,则使用从 syslog 前缀中提取的 timestamp 字段。 |
requestURI |
target.url |
直接映射。 |
responseStatus.code |
network.http.response_code |
转换为整数后直接映射。 |
sourceIPs |
principal.ip |
sourceIPs 数组中的所有 IP 地址都会添加到 principal.ip 数组中。 |
stage |
metadata.description |
直接映射。 |
stageTimestamp |
metadata.collected_timestamp |
直接映射。 |
user.groups |
principal.user.group_identifiers |
user.groups 数组中的所有组都会添加到 principal.user.group_identifiers 数组中。 |
user.uid |
principal.user.userid |
直接映射。 |
user.username |
principal.user.user_display_name |
直接映射。 |
verb |
network.http.method |
转换为大写后直接映射。由 verb 字段决定。如果 verb 为“CREATE”,则事件类型为 USER_RESOURCE_CREATION。如果 verb 为“PATCH”或“UPDATE”,则事件类型为 USER_RESOURCE_UPDATE_CONTENT。如果 verb 为“DELETE”,则事件类型为 USER_RESOURCE_DELETION。否则,如果 verb 不为空,则事件类型为 USER_RESOURCE_ACCESS。如果这些条件都不满足,则事件类型会设置为 GENERIC_EVENT。硬编码为“VMWARE_TANZU”。硬编码为“VMWARE”。硬编码为“VMWARE_TANZU”。硬编码为“CLUSTER”。 |