flink on k8s native

我理解您的问题是关于如何在k8s原生环境中使用Flink。在k8s原生环境中，您可以使用Flink Kubernetes Operator来管理Flink集群。该操作符将帮助您自动创建和升级Flink群集，还提供了自动扩展和故障转移等功能。同时，您也可以使用Flink的Kubernetes部署工具自己手动部署和管理Flink集群。您可以在Flink的官方文档中找到相关资料。

相关问题

flink on k8s

＊＊＊s 上的部署方式有两种：Standalone 方式和 Native 方式。

1. Standalone 方式

Standalone 方式是 Flink 在 K8s 上最简单的部署方式，不需要对 Flink 做任何改动，同时 Flink 对 K8s 集群是无感知的，通过外部手段即可让 Flink 运行起来。具体操作可以参考 Standalone Session On K8s。

2. Native 方式

Native 方式是相对于 Flink 而言的，它可以借助 Flink 的命令就可以达到自治的一个状态，不需要引入外部工具就可以通过 Flink 完成任务在 K8s 上的运行。具体操作如下：

- 资源申请方式：Flink 的 Client 内置了一个 K8s Client，可以借助 K8s Client 去创建 JobManager，当 Job 提交之后，如果对资源有需求，JobManager 会向 Flink 自己的 ResourceManager 去申请资源。这个时候 Flink 的 ResourceManager 会直接跟 K8s 的 API Server 通信，将这些请求资源直接下发给 K8s Cluster，告诉它需要多少个 TaskManger，每个 TaskManager 多大。当任务运行完之后，它也会告诉 K8s Cluster 释放没有使用的资源。
- 具体操作：可以使用 Flink 提供的 kubernetes-session.sh 脚本来启动一个 Flink Session Cluster。例如：

./bin/kubernetes-session.sh \
    -Dkubernetes.cluster-id=my-first-flink-cluster \
    -Dkubernetes.container.image=flink:1.11.2 \
    -Dkubernetes.jobmanager.cpu=1 \
    -Dkubernetes.taskmanager.cpu=1 \
    -Dkubernetes.rest-service.exposed.type=NodePort \
    start

以上命令会启动一个名为 my-first-flink-cluster 的 Flink Session Cluster，使用的镜像为 flink:1.11.2，JobManager 和 TaskManager 的 CPU 都为 1，同时将 Flink 的 REST API 暴露在 NodePort 上。

flink on k8s 源码

Flink on Kubernetes（Flink在Kubernetes上的运行）是基于Apache Flink的一个功能扩展，用于在Kubernetes集群上运行Flink作业。它基于Flink的分布式任务调度和容错性，同时利用Kubernetes的容器编排和资源管理能力，提供了更高的弹性和可扩展性。

Flink on Kubernetes的源码位于Flink官方代码仓库中的"flink-kubernetes"目录下。在该目录中，可以找到与Kubernetes相关的几个关键组件和功能的源码实现。

首先，Flink on Kubernetes提供了一个Kubernetes集群管理器，负责与Kubernetes API进行交互，创建和管理Flink集群运行时的Kubernetes资源。这一部分的源码位于"KubernetesClusterClient"和"kubernetes"包中，其中定义了一些与Kubernetes API进行交互的类和方法。

其次，Flink on Kubernetes还实现了一个弹性扩缩容功能，可以根据作业的负载情况自动增加或减少任务管理器的数量。这个功能的源码实现在"KubernetesResourceManager"和"KubernetesPodResource"等类中，它们负责监控任务管理器的运行情况，并在需要时创建或删除相应的Kubernetes Pod资源。

此外，Flink on Kubernetes还提供了一些用于容器环境和资源管理的配置选项，这些选项允许用户根据具体需求调整Flink作业的资源分配和容器化设置。源码中的"kubernetes.config"和"KubernetesUtils"等类定义了这些配置选项，并提供了相关的解析和处理功能。

总的来说，Flink on Kubernetes的源码实现了Flink作业在Kubernetes上的任务调度、资源管理和容错机制，通过与Kubernetes API进行交互和操作，实现了更灵活、可扩展的作业部署和运行方式。对于想要理解Flink on Kubernetes的工作原理和深入探究其实现细节的用户来说，可以通过阅读源码来获得更全面的了解。