window11中logstash连接mysql并同步数据至es

在Windows 11环境中，Logstash是一个强大的日志管理工具，它可以将各种来源的数据（包括MySQL数据库）收集起来，并将其发送到Elasticsearch（ES）这样的分布式搜索和分析引擎。以下是配置Logstash连接MySQL并同步数据到ES的基本步骤：

1. 安装依赖：
- 安装Logstash：你可以从Logstash官网下载适用于Windows的安装包，如.zip文件。
- 安装JDBC插件：Logstash需要Java JDBC插件来处理SQL查询，通常称为`logstash-input-jdbc`。
- 安装Elasticsearch客户端：如果你还没有ES，可以从官网下载安装。

2. 配置Logstash输入插件：
在Logstash的配置文件（通常是`.conf`或`logstash.yml`），添加如下配置段来指定MySQL输入源：

   input {
     jdbc {
       driver => "com.mysql.jdbc.Driver"  # 根据你的实际驱动替换
       url => "jdbc:mysql://localhost:3306/your_database"
       username => "your_username"
       password => "your_password"
       statement => "SELECT * FROM your_table"  # SQL查询语句
       schedule => "*/5 * * * *"  # 每5分钟运行一次，可根据需求调整
     }
   }

3. 配置输出插件：
确保有Elasticsearch输出插件，配置类似：

   output {
     elasticsearch {
       hosts => ["http://localhost:9200"]  # ES的地址及端口
       index => "%{[@metadata][beat]}-%{+YYYY.MM.dd}"  # 日志索引名格式
       user => "elastic"  # 如果ES需要认证
       password => "changeme"  # ES密码
     }
   }

4. 启动Logstash：
使用命令行启动Logstash，例如：

   logstash -f path_to_your_config_file.conf

记得替换上述示例中的URL、数据库名称、表名、用户名、密码等为实际环境中的值。配置完成后，Logstash就会定期从MySQL读取数据并将之同步到Elasticsearch中。