纯钧(Chunjun, 原名 FlinkX)是一个国产的、流批一体的、分布式数据同步工具,支持多种数据源和数据目的地,具有高性能、低延迟、高可靠性等特点。本文记录一下如何在 Kubernetes 集群上部署一个包含纯钧的 Flink 集群(Standalone session 模式),以及如何使用。
前言
本篇文章使用的软件版本如下:
软件 | 版本 |
---|---|
纯钧 | release 1.12 |
Flink | 1.12.7 |
Kubernetes | 1.32 |
2025年1月20日大约 8 分钟
纯钧(Chunjun, 原名 FlinkX)是一个国产的、流批一体的、分布式数据同步工具,支持多种数据源和数据目的地,具有高性能、低延迟、高可靠性等特点。本文记录一下如何在 Kubernetes 集群上部署一个包含纯钧的 Flink 集群(Standalone session 模式),以及如何使用。
本篇文章使用的软件版本如下:
软件 | 版本 |
---|---|
纯钧 | release 1.12 |
Flink | 1.12.7 |
Kubernetes | 1.32 |
最近在学数据同步时接触了 Flink,这里记录一下如何部署一个 Flink Standalone 基础集群。
Flink 是一个流式计算框架,支持事件驱动、精确一次、状态管理等特性,适用于实时数据处理、数据分析等场景。Flink 常用有三种部署模式:Standalone, YARN, Kubernetes。
Standalone 模式是 Flink 的默认部署模式,适用于小规模集群和开发环境,而生产环境中,由于 Standalone 模式缺乏高可用[1]、便于扩缩容的特点,较少使用。