上传flink jar包到hdfs

在Apache Flink中，将JAR包上传到Hadoop分布式文件系统 (HDFS) 是为了使得Flink任务能够访问到这些库。以下是基本步骤：

1. **登录HDFS**：
首先，你需要通过SSH连接到运行Hadoop集群的机器，并切换到HDFS用户（通常是`hdfs`），或者如果你有权限，可以直接在命令行中使用`hadoop fs -mkdir`和`hadoop fs -put`。

2. **创建目录**：
如果JAR需要存放在特定的路径下，比如`/user/flink/jars`，可以创建这个目录：

   hadoop fs -mkdir /user/flink/jars

3. **上传JAR**：
使用`hadoop fs -put`命令将本地的JAR文件上传到HDFS，例如：

   hadoop fs -put your-jar-file.jar /user/flink/jars/

将`your-jar-file.jar`替换为实际的JAR文件名。

4. **配置Flink**：
在Flink作业的配置(`job.yaml` 或 `env.sh`)中，指定JobManager或TaskManager可以从HDFS读取资源。添加类似这样的配置：

   # jobmanager or taskmanager的classpath
   checkpoint.path: hdfs://<your-cluster-ip>:<port>/user/flink/jars/<jar-name>.jar

5. **启动作业**：
现在你可以启动Flink作业，它会自动从HDFS加载指定的JAR。