flink 脚本启动汲取
时间: 2023-08-12 16:56:39 浏览: 65
您可以使用以下命令启动 Flink 脚本并进行数据汲取:
```
./bin/flink run -c com.example.YourJobClass /path/to/your/job.jar
```
在上述命令中,`com.example.YourJobClass` 是您的作业类的完全限定名,`/path/to/your/job.jar` 是您的作业 JAR 文件的路径。
请确保在运行之前已经将 Flink 安装并配置好。您还可以根据需要提供其他参数,如执行模式、并行度等。具体的启动方式和参数取决于您的作业和配置。
相关问题
flink run 启动参数
Flink是一款流处理框架,基于Java开发,采用分布式数据流和批处理模型,可以处理大量实时数据和海量数据。在使用Flink运行任务的时候,需要使用flink run命令来启动Flink集群并提交作业。flink run命令可以接受多个参数来控制Flink运行时的各项参数。以下是flink run启动参数的说明:
1. -c, --class:指定要执行的类名。该参数用于跑特定的类的main方法,用于执行离线任务的特定类。
2. -p, --parallelism:指定任务的并行度。该参数用于指定每个算子的并行度,即每个算子的实例数。
3. -m, --jobmanager:指定JobManager的地址。该参数用于指定运行JobManager的主机名和端口号。
4. -t, --target:指定任务的执行目标,可选local或remote。local意味着任务将在本地执行,而remote意味着任务将在远程集群或者会话中执行。
5. -yn, --yarnname:指定在YARN上运行jars的应用程序名称。当我们在YARN中运行flink时,需要使用该参数指定应用程序的名称。
6. -s, --sysout:重定向标准输出流。这个参数可以将标准输出流重定向到本地文件系统中的一个文件。
7. -d, --detached:以后台模式启动任务,启动任务后会脱离当前终端会话。这个参数可以让Flink在后台运行,任务完成后可以退出终端操作,而不会停止Flink运行。
总之,flink run启动参数可以控制Flink任务的执行方式、性能和各项参数调优,更好地满足任务需求和用户要求。
flink linux 配置 启动
在Linux上配置和启动Flink可以按照以下步骤进行:
1. 下载Flink:从Flink的官方网站下载最新版本的二进制文件包,并解压到指定的目录中。
2. 配置环境变量:打开Linux的终端,并将Flink的bin目录添加到PATH环境变量中。可以在~/.bashrc文件中添加类似以下的语句:
```
export FLINK_HOME=/path/to/flink
export PATH=$PATH:$FLINK_HOME/bin
```
3. 启动Flink:在终端中输入以下命令即可启动Flink:
```
$ start-cluster.sh
```
这个命令会启动Flink的Master进程和Worker进程,并将它们部署在本地机器上。可以通过访问http://localhost:8081/来访问Flink的Web控制台,以监控和管理Flink集群。
4. 停止Flink:在终端中输入以下命令即可停止Flink:
```
$ stop-cluster.sh
```
这个命令会停止Flink的Master进程和Worker进程,并释放所有资源。
相关推荐
![py](https://img-home.csdnimg.cn/images/20210720083646.png)
![pdf](https://img-home.csdnimg.cn/images/20210720083512.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)