本文描述通过 Rainbond 云原生应用管理平台 一键部署高可用的 DolphinScheduler 集群,这种方式适合给不太了解 Kubernetes、容器化等复杂技术的用户使用,降低了在 Kubernetes 中部署 DolphinScheduler 的门槛。
dolphinscheduler
即可找到 DolphinScheduler 应用。安装
进入安装页面,填写对应的信息,点击确定即可开始安装,自动跳转至应用视图。选择项 | 说明 |
---|---|
团队名称 | 用户自建的工作空间,以命名空间隔离 |
集群名称 | 选择 DolphinScheduler 被部署到哪一个 K8s 集群 |
选择应用 | 选择 DolphinScheduler 被部署到哪一个应用,应用中包含有若干有关联的组件 |
应用版本 | 选择 DolphinScheduler 的版本,目前可选版本为 3.0.0-beta2 |
admin
/ dolphinscheduler123
DolphinScheduler API、Master、Worker 都支持伸缩多个实例,多个实例可以保证整个集群的高可用性。
以 Worker 为例,进入组件内 -> 伸缩,设置实例数量。
验证 Worker 节点,进入 DolphinScheduler UI -> 监控中心 -> Worker 查看节点信息。
API 和 Worker 服务共用 /opt/dolphinscheduler/conf/common.properties
,修改配置时只需修改 API 服务的配置文件。
Worker 服务默认安装了 Python3,使用时可以添加环境变量 PYTHON_HOME=/usr/bin/python3
以 Datax 为例:
通用数据初始化插件
并安装。通用数据初始化插件
,并修改配置Datax
并解压到 /opt/soft
目录下。