收集 Akamai WAF 日志

解析器版本:32.0

支持范围:

本文档介绍了如何使用 Akamai CEF 连接器和 Bindplane 将 Akamai WAF 日志注入 Google Security Operations。Akamai WAF 是一种基于云的 Web 应用防火墙,可保护 Web 应用和 API 免受 SQL 注入、跨站脚本攻击 (XSS) 和 DDoS 攻击等威胁。Akamai CEF 连接器会近乎实时地从 Akamai SIEM API 拉取安全性事件,并将其从 JSON 转换为通用事件格式 (CEF),然后通过 syslog 转发到 Bindplane。

准备工作

请确保满足以下前提条件:

  • Google SecOps 实例。
  • Windows 2016 或更高版本,或者具有 systemd 的 Linux 主机,用于安装 Bindplane 代理。
  • 一台 Linux 服务器(推荐使用 CentOS、RHEL 或 Ubuntu),至少配备 2 个 CPU 核心、6 GB RAM 和 2 GB 磁盘可用空间,用于运行 Akamai CEF Connector。
  • CEF 连接器主机上安装了 Java 8 (JRE 1.8) 或更高版本。
  • 如果在代理后面运行,请确保根据 Bindplane 代理要求打开防火墙端口,并且代理将 *.cloudsecurity.akamaiapis.net 和 *.luna.akamaiapis.net 列入许可清单。
  • 对 Akamai 控制中心的特权访问权限。
  • 启用了 App & API Protector、Kona Site Defender、Web 应用 Protector、Bot Manager 或 Account Protector 的 Akamai 安全配置。

获取 Bindplane 代理的 Google SecOps 凭证

如需向 Google SecOps 验证 Bindplane 代理,请选择以下方法之一:

  • 新部署:使用 Chronicle API(选项 1)。
  • 旧版部署:继续使用数据注入身份验证文件(方法 2),直到 Ingestion API 于 2027 年 7 月 20 日停用。
  1. 登录 Google Cloud 控制台,然后选择与您的 Google SecOps 实例关联的 Google Cloud 项目。
  2. 依次前往 IAM 和管理 > 服务账号。
  3. 点击创建服务账号。
  4. 提供以下配置详细信息:
    • 服务账号名称:输入账号的名称(例如 bindplane-ingest)。
    • 服务账号说明:输入说明(例如 Bindplane agent log ingestion)。
  5. 点击创建并继续。
  6. 在向此服务账号授予对项目的访问权限部分,点击选择角色,然后选择 Chronicle Editor。
  7. 点击继续,然后点击完成。
  8. 点击您创建的服务账号,然后前往密钥标签页。
  9. 依次点击添加密钥 > 创建新密钥。
  10. 选择 JSON,然后点击创建。密钥文件会下载到您的计算机上。
  11. 将密钥文件另存为 Bindplane 收集器目录(Linux 上的 /opt/observiq-otel-collector/ingestion-auth.json 或 Windows 上的 C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json)中的 ingestion-auth.json,或更新 config.yaml 中的 creds_file_path 以匹配您保存它的路径。
  12. 前往 IAM 和管理 > 设置,然后复制项目编号。您在配置导出器时需要用到该名称。

方法 2:下载数据注入身份验证文件(旧版)

  1. 登录 Google SecOps 控制台。
  2. 依次前往设置 > 数据管理 > 收集代理。如果您使用的是仅限 SIEM 的平台,请依次前往设置 > 收集代理。
  3. 下载数据注入身份验证文件。
  4. 将该文件安全地保存在将要安装 Bindplane 代理的系统上。

获取 Google SecOps 客户 ID

  1. 登录 Google SecOps 控制台。
  2. 依次前往设置 > 管理 > 个人资料。如果您使用的是仅限 SIEM 的平台,请依次前往设置 > 个人资料。
  3. 复制并保存组织详细信息部分中的客户 ID。

在 Akamai 控制中心内启用 SIEM 集成

  1. 登录 Akamai 控制中心。
  2. 依次前往 WEB & DATA CENTER SECURITY(Web 和数据中心安全)> Security Configuration(安全配置)。
  3. 打开安全配置以及要收集 SIEM 数据的相应版本。
  4. 点击高级设置,然后展开用于 SIEM 集成的数据收集。
  5. 点击开启以启用 SIEM。
  6. 选择要导出其数据的安全政策:
    • 所有安全政策:针对违反安全配置中任何安全政策的事件发送 SIEM 数据。
    • 特定安全政策:发送一项或多项特定安全政策的数据。从下拉列表中选择适当的政策。
  7. 复制网络安全配置 ID 字段中的值。保存此 ID 以备后用。
  8. 点击激活,将安全配置更改推送到生产网络。在网络下,点击正式版,然后点击激活。

在 Akamai 控制中心设置用户以管理 SIEM

  1. 在 Akamai 控制中心内,依次前往账号管理 > 身份和访问权限。
  2. 在用户和 API 客户端标签页中,找到要为其分配角色的用户,或点击创建用户。
  3. 如需将 SIEM 角色分配给现有用户,请执行以下操作:
    1. 打开用户的账号,然后点击修改角色标签页。
    2. 找到相应群组,点击角色下拉菜单,然后选择管理 SIEM 角色。
    3. 点击提交。
  4. 如需向新用户分配 SIEM 角色,请执行以下操作:

    1. 点击创建用户。
    2. 输入用户的基本信息,然后向下滚动到分配角色部分。
    3. 找到相应群组,点击角色下拉菜单,然后选择管理 SIEM 角色。
    4. 点击保存。

在 Akamai 控制中心内预配 SIEM API 凭据

  1. 访问 Akamai 文档中的创建身份验证凭证页面。
  2. 按照以下步骤为负责管理 SIEM 的用户预配 SIEM API。
  3. 复制并妥善保存以下凭证:

    • Access Token
    • 客户端令牌
    • 客户端密钥 (Client Secret)
    • 基础网址(主机)

安装 Akamai CEF 连接器

  1. 在 Linux 服务器上,从 Akamai SIEM Integration Connector Packages GitHub 代码库下载最新的 CEF Connector 分发软件包。
  2. 如有需要,请将软件包传输到您的服务器。
  3. 验证所下载文件的 SHA256 哈希,以确保其完整性。
  4. 解压缩分发软件包:

    unzip CEFConnector-<version>.zip
    
  5. 前往解压后的目录:

    cd CEFConnector-<version>
    
  6. 创建指向启动脚本的符号链接,以安装服务:

    sudo ln -s /path/to/CEFConnector-<version>/bin/AkamaiCEFConnector.sh /etc/init.d/AkamaiCEFConnector
    

配置 Akamai CEF 连接器

  1. 前往 CEF 连接器安装目录中的 config 目录:

    cd /path/to/CEFConnector-<version>/config
    
  2. 使用文本编辑器打开 CEFConnector.properties 文件:

    sudo nano CEFConnector.properties
    
  3. 配置以下必需参数:

    # Pull rate from Akamai source (in seconds, positive integer)
    connector.pull.interval=60
    
    # Security Configuration IDs (semicolon-separated for multiple)
    akamai.data.configs=<YOUR_SECURITY_CONFIG_ID>
    
    # API Credentials
    akamai.data.accesstoken=<YOUR_ACCESS_TOKEN>
    akamai.data.clienttoken=<YOUR_CLIENT_TOKEN>
    akamai.data.clientsecret=<YOUR_CLIENT_SECRET>
    akamai.data.baseurl=<YOUR_BASE_URL>
    
    # Offset-based mode (recommended for continuous collection)
    akamai.data.timebased=false
    
    # Maximum number of events per API call
    akamai.data.limit=200000
    
    # Proxy Configuration (leave blank if no proxy)
    # connector.proxy.host=
    # connector.proxy.port=
    
  4. 将以下占位符替换为您的实际值:

    • <YOUR_SECURITY_CONFIG_ID>:您在“启用 SIEM”部分中复制的 Web 安全配置 ID。对于多个配置,请使用英文分号分隔 ID(例如 12345;67890)。
    • <YOUR_ACCESS_TOKEN>:Akamai API 凭证中的访问令牌。
    • <YOUR_CLIENT_TOKEN>:Akamai API 凭证中的客户端令牌。
    • <YOUR_CLIENT_SECRET>:Akamai API 凭证中的客户端密钥。
    • <YOUR_BASE_URL>:Akamai API 凭证中的基础网址(主机)(例如 akab-xxxxxxxxxxxxxxxx-xxxxxxxxxxxxxxxx.luna.akamaiapis.net)。
  5. 保存并关闭文件。

配置 CEF 连接器日志记录,以将 Syslog 转发到 Bindplane

  1. 前往 CEF Connector 安装目录中的 config 目录。
  2. 使用文本编辑器打开 log4j2.xml 文件:

    sudo nano /path/to/CEFConnector-<version>/config/log4j2.xml
    
  3. 在文件顶部附近的“属性”部分中,设置远程 syslog 服务器参数,使其指向 Bindplane 代理:

    <!-- Syslog Appender Configuration -->
    <Syslog name="SyslogAppender" 
            host="<BINDPLANE_IP_ADDRESS>" 
            port="<BINDPLANE_PORT>" 
            protocol="<PROTOCOL>" 
            facility="LOCAL0"
            format="RFC 5424">
        <PatternLayout pattern="%m%n"/>
    </Syslog>
    
  4. 替换以下占位符:

    • <BINDPLANE_IP_ADDRESS>:安装了 Bindplane 代理的服务器的 IP 地址(例如 192.168.1.100)。
    • <BINDPLANE_PORT>:Bindplane 代理监听的端口号(例如,UDP 为 514,TCP 为 601)。
    • 将 CEFProtocol 设置为 UDP 或 TCP,以匹配您的 Bindplane 接收器配置。
  5. 保存并关闭文件。

启动 Akamai CEF 连接器

  1. 启动 CEF 连接器服务:

    sudo /etc/init.d/AkamaiCEFConnector start
    
  2. 验证服务是否正在运行:

    sudo /etc/init.d/AkamaiCEFConnector status
    
  3. 监控日志,确保连接器正在从 Akamai 拉取事件并转发这些事件:

    tail -f /path/to/CEFConnector-<version>/bin/logs/cefconnector.log
    

安装 Bindplane 代理

根据以下说明,在 Windows 或 Linux 操作系统上安装 Bindplane 代理。

Windows 安装

  1. 以管理员身份打开命令提示符或 PowerShell。
  2. 运行以下命令:

    msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet
    

Linux 安装

  1. 打开具有 root 或 sudo 权限的终端。
  2. 运行以下命令:

    sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh
    

其他安装资源

如需了解其他安装选项,请参阅此安装指南。

配置 Bindplane 代理以注入 Syslog 并发送到 Google SecOps

  1. 访问配置文件:

    • 找到 config.yaml 文件。通常,它位于 Linux 上的 /opt/observiq-otel-collector/ 目录中,或 Windows 上的安装目录中。
    • 使用文本编辑器(例如 nano、vi 或记事本)打开该文件。
  2. 按如下方式修改 config.yaml 文件:

    receivers:
      udplog:
        # Replace the port and IP address as required
        listen_address: "0.0.0.0:514"
    
    exporters:
      chronicle/chronicle_w_labels:
        protocol: https
        # Region of your instance, for example us, europe, asia-southeast1
        location: <LOCATION>
        # Project number of the Google Cloud project linked to the instance
        project: '<PROJECT_NUMBER>'
        compression: gzip
        # Adjust the path to the credentials file you downloaded in the Get ingestion authentication file section
        creds_file_path: '/path/to/ingestion-authentication-file.json'
        # Replace with your actual customer ID from the Get customer ID section
        customer_id: <PLACEHOLDER_CUSTOMER_ID>
        endpoint: chronicle.googleapis.com
        # Add optional ingestion labels for better organization
        log_type: 'AKAMAI_WAF'
        raw_log_field: body
        ingestion_labels:
    
    service:
      pipelines:
        logs/source0__chronicle_w_labels-0:
          receivers:
            - udplog
          exporters:
            - chronicle/chronicle_w_labels
    
  • 根据基础架构的要求替换端口和 IP 地址。
  • 将 <LOCATION> 替换为 Google SecOps 实例所在的区域(例如 us、europe 或 asia-southeast1)。导出工具会在此值前面加上 chronicle.googleapis.com。
  • 将 <PROJECT_NUMBER> 替换为 IAM 和管理 > 设置中的项目编号。
  • 将 <PLACEHOLDER_CUSTOMER_ID> 替换为实际客户 ID。
  • 将 /path/to/ingestion-authentication-file.json 更新为“获取 Bindplane 代理的 Google SecOps 凭据”部分中保存服务账号密钥文件(选项 1)的文件路径。

旧版提取 API 导出工具

  • 如果您使用选项 2 中的数据注入身份验证文件,请将 exporters 代码块替换为以下内容。将 creds_file_path 设置为数据注入身份验证文件的路径,如果您的实例位于美国境外,请将 malachiteingestion-pa.googleapis.com 替换为您的区域端点(例如 europe-malachiteingestion-pa.googleapis.com)。

    exporters:
      chronicle/chronicle_w_labels:
        compression: gzip
        # Adjust the path to the credentials file you downloaded in the Get ingestion authentication file section
        creds_file_path: '/path/to/ingestion-authentication-file.json'
        # Replace with your actual customer ID from the Get customer ID section
        customer_id: <PLACEHOLDER_CUSTOMER_ID>
        endpoint: malachiteingestion-pa.googleapis.com
        # Add optional ingestion labels for better organization
        log_type: 'AKAMAI_WAF'
        raw_log_field: body
        ingestion_labels:
    

重启 Bindplane 代理以应用更改

如需在 Linux 中重启 Bindplane 代理,请执行以下操作:

  1. 运行以下命令:

    sudo systemctl restart observiq-otel-collector
    
  2. 验证服务是否正在运行:

    sudo systemctl status observiq-otel-collector
    
  3. 检查日志中的错误:

    sudo journalctl -u observiq-otel-collector -f
    

如需在 Windows 中重启 Bindplane 代理,请执行以下操作:

  1. 请从下列选项中选择一项:

    • 以管理员身份运行命令提示符或 PowerShell:
    net stop observiq-otel-collector && net start observiq-otel-collector
    
    • 服务控制台:
      1. 按 Win+R,输入 services.msc,然后按 Enter 键。
      2. 找到 observIQ OpenTelemetry 收集器。
      3. 右键点击并选择重启。
  2. 验证服务是否正在运行:

    sc query observiq-otel-collector
    
  3. 检查日志中的错误:

    type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
    

UDM 映射表

日志字段 UDM 映射 逻辑
src (attackData.clientIP) principal.ip 发出请求的客户端的源 IP 地址
c6a2 (ipv6src) principal.ip 来源 IPv6 地址(如果 attackData.clientIP 采用 IPv6 格式)
dhost (httpMessage.host) target.hostname HTTP HOST 标头中的主机名
dpt (httpMessage.port) target.port 传入请求使用的端口号
requestMethod (httpMessage.method) network.http.method 传入请求的 HTTP 方法(GET、POST 等)
request (requestURL) target.url 根据 httpMessage 字段计算出的完整网址
cs1 (attackData.rules) security_result.rule_id 为此请求触发的规则的规则 ID
cs2 (attackData.ruleMessages) security_result.rule_name 已触发规则的消息
act (appliedAction) security_result.action 执行的操作(提醒、拒绝、中止等)
severity security_result.severity 计算出的严重程度(检测为 5,缓解为 10)
cs5 (attackData.clientReputation) security_result.threat_name 客户端信誉的客户端 IP 得分
cs6 (attackData.apiId) security_result.detection_fields API 保护的 API ID
start (httpMessage.start) metadata.event_timestamp 边缘服务器发起连接的时间(纪元格式)
devicePayloadId (httpMessage.requestId) metadata.product_log_id 消息的全局唯一 ID
flexString1 (attackData.configId) security_result.detection_fields 应用于此请求的安全配置的 ID
flexString2 (attackData.policyId) security_result.detection_fields 应用于此请求的防火墙政策的 ID
AkamaiSiemJA4 (identity.ja4) network.tls.client.ja3 JA4 客户端 TLS 指纹

更新日志

查看此解析器的更新日志

需要更多帮助?获得社区成员和 Google SecOps 专业人士的解答。