logstash + grok 正则语法

Logstash 是一个开源的数据收集引擎，它可以帮助你从各种来源（如文件、数据库、网络流量等）收集数据，并将其转换为统一的格式，然后将其发送到目标位置（如 Elasticsearch、Redis、Kafka 等）。而 Grok 则是 Logstash 中一种常用的正则表达式引擎，它可以帮助你快速解析各种结构化的日志数据。

下面是一些常见的 Grok 正则语法：

- `%{PATTERN:fieldname}`：将匹配的文本赋值给指定的字段名称。
- `%{NUMBER:fieldname}`：将匹配的数字赋值给指定的字段名称。
- `%{WORD:fieldname}`：将匹配的单词赋值给指定的字段名称。
- `%{IP:fieldname}`：将匹配的 IP 地址赋值给指定的字段名称。
- `%{URI:fieldname}`：将匹配的 URI 赋值给指定的字段名称。
- `%{GREEDYDATA:fieldname}`：将匹配的任意文本赋值给指定的字段名称，直到遇到下一个模式为止。

这些语法可以用于创建 Grok 表达式，例如：

%{COMBINEDAPACHELOG}    # 匹配 Apache 日志格式
%{IP:client} %{WORD:method} %{URIPATHPARAM:request} %{NUMBER:bytes} %{NUMBER:duration}    # 提取自定义字段
%{GREEDYDATA:message}    # 捕获整个消息

除此之外，还有一些 Grok 模式库可以供参考，例如 Logstash 自带的模式库（如 `COMMONAPACHELOG`、`SYSLOG5424PRI` 等），以及社区维护的模式库（如 Grok Patterns、Grok Debugger 等）。