DolphinScheduler 3.1.0 海豚集群部署配置指南
2024.01.22 06:15浏览量:3简介:本文将介绍如何为DolphinScheduler 3.1.0版本配置海豚集群,涵盖了硬件和软件环境的要求,以及部署过程中的关键步骤。
千帆应用开发平台“智能体Pro”全新上线 限时免费体验
面向慢思考场景,支持低代码配置的方式创建“智能体Pro”应用
立即体验
DolphinScheduler 是一款基于 Hadoop YARN 构建的数据处理任务调度工具,具有强大的可视化界面,可以帮助用户方便地管理复杂的分布式任务。在部署 DolphinScheduler 3.1.0 海豚集群之前,我们需要确保满足一定的硬件和软件环境要求。
硬件环境要求:
- CPU:建议使用 4 核以上的处理器。
- 内存:推荐配置为 8GB 或以上。
- 硬盘:系统盘和数据盘应分开,总容量建议至少为 50GB。
- 网络:确保网络连接稳定,DolphinScheduler 的正常运行需要网络端口配置。
软件环境要求: - 系统:DolphinScheduler 支持多种操作系统,如 Linux、Windows 等。
- 依赖软件:需要安装 MySQL、JDK、Zookeeper 和 Hadoop CDH5.12.0 等依赖软件。
部署过程:
- 下载并解压 DolphinScheduler
通过 wget 命令下载编译好的 DolphinScheduler 二进制包,然后解压到指定的目录。例如:wget https://www.apache.org/dyn/closer.cgi/incubator/dolphinscheduler/3.1.0/apache-dolphinscheduler-incubating-3.1.0-bin.tar.gz
tar -zxvf apache-dolphinscheduler-incubating-3.1.0-bin.tar.gz -C /opt
- 配置环境变量
编辑 /etc/profile 或 /etc/profile.d/dolphinscheduler.sh 文件,加入如下配置:
然后执行命令使环境变量生效:export DOLPHINSCHEDULER_HOME=/opt/apache-dolphinscheduler-incubating-3.1.0
export PATH=$DOLPHINSCHEDULER_HOME/bin:$PATH
source /etc/profile
- 初始化数据库
运行以下命令初始化数据库:mysql -u root -p < /opt/apache-dolphinscheduler-incubating-3.1.0/conf/schema/db_init.sql
- 启动服务
执行以下命令启动 DolphinScheduler 服务:dolphinscheduler server start
- 访问 Web 界面
在浏览器中输入 http://:4448,即可访问 DolphinScheduler 的 Web 界面。默认的用户名和密码分别是 admin 和 admin。
以上是 DolphinScheduler 3.1.0 海豚集群的部署配置指南,希望对您有所帮助。如有任何疑问或需要进一步的帮助,请随时联系我们。

发表评论
登录后可评论,请前往 登录 或 注册