DolphinScheduler 3.1.0 海豚集群部署配置指南

作者:carzy2024.01.22 06:15浏览量:3

简介:本文将介绍如何为DolphinScheduler 3.1.0版本配置海豚集群,涵盖了硬件和软件环境的要求,以及部署过程中的关键步骤。

千帆应用开发平台“智能体Pro”全新上线 限时免费体验

面向慢思考场景,支持低代码配置的方式创建“智能体Pro”应用

立即体验

DolphinScheduler 是一款基于 Hadoop YARN 构建的数据处理任务调度工具,具有强大的可视化界面,可以帮助用户方便地管理复杂的分布式任务。在部署 DolphinScheduler 3.1.0 海豚集群之前,我们需要确保满足一定的硬件和软件环境要求。
硬件环境要求:

  • CPU:建议使用 4 核以上的处理器。
  • 内存:推荐配置为 8GB 或以上。
  • 硬盘:系统盘和数据盘应分开,总容量建议至少为 50GB。
  • 网络:确保网络连接稳定,DolphinScheduler 的正常运行需要网络端口配置。
    软件环境要求:
  • 系统:DolphinScheduler 支持多种操作系统,如 Linux、Windows 等。
  • 依赖软件:需要安装 MySQL、JDK、Zookeeper 和 Hadoop CDH5.12.0 等依赖软件。
    部署过程:
  1. 下载并解压 DolphinScheduler
    通过 wget 命令下载编译好的 DolphinScheduler 二进制包,然后解压到指定的目录。例如:
    1. wget https://www.apache.org/dyn/closer.cgi/incubator/dolphinscheduler/3.1.0/apache-dolphinscheduler-incubating-3.1.0-bin.tar.gz
    2. tar -zxvf apache-dolphinscheduler-incubating-3.1.0-bin.tar.gz -C /opt
  2. 配置环境变量
    编辑 /etc/profile 或 /etc/profile.d/dolphinscheduler.sh 文件,加入如下配置:
    1. export DOLPHINSCHEDULER_HOME=/opt/apache-dolphinscheduler-incubating-3.1.0
    2. export PATH=$DOLPHINSCHEDULER_HOME/bin:$PATH
    然后执行命令使环境变量生效:
    1. source /etc/profile
  3. 初始化数据库
    运行以下命令初始化数据库:
    1. mysql -u root -p < /opt/apache-dolphinscheduler-incubating-3.1.0/conf/schema/db_init.sql
  4. 启动服务
    执行以下命令启动 DolphinScheduler 服务:
    1. dolphinscheduler server start
  5. 访问 Web 界面
    在浏览器中输入 http://:4448,即可访问 DolphinScheduler 的 Web 界面。默认的用户名和密码分别是 admin 和 admin。
    以上是 DolphinScheduler 3.1.0 海豚集群的部署配置指南,希望对您有所帮助。如有任何疑问或需要进一步的帮助,请随时联系我们。
article bottom image

相关文章推荐

发表评论