普元数据开发平台 普元数据开发平台
产品介绍
安装部署
快速入门
操作指南
应用集成
FAQ
  • 安装必读
  • 概念解释
  • 1. 部署前创建免密用户
  • 1.1.配置用户免密及权限
  • 1.2. 配置机器SSH免密登陆
  • 2.环境要求
  • _3-必须安装的命令
  • 4. 安装部署

# 安装必读

请务必在安装部署前认真阅读此章节,避免后续出现因操作遗漏而引发的问题。

# 概念解释

调度租户是 DolphinScheduler 的概念租户,用于执行任务,可以更好的控制系统资源。该租户是 worker 执行任务的实际执行者,对应的是 Linux 系统的用户。下面以创建 dws 用户为例进行操作说明。

注意:不可与 AFC 公共资源管理中的“数据租户”混淆。数据租户用于将不同用户之间的资源和数据进行隔离。

# 1. 部署前创建免密用户

# 1.1.配置用户免密及权限

​ 创建部署用户,并且一定要配置 sudo 免密。接下来以创建dws 用户为例:

# 创建用户需使用 root 登录
useradd dws

# 添加密码
echo "dws" | passwd --stdin dws

# 配置 sudo 免密
sed -i '$adws  ALL=(ALL)  NOPASSWD: NOPASSWD: ALL' /etc/sudoers
sed -i 's/Defaults    requirett/#Defaults    requirett/g' /etc/sudoers

因为任务执行服务是以 sudo -u {linux-user} 切换不同 linux 用户的方式来实现多租户运行作业,所以部署用户需要有 sudo 权限。

# 1.2. 配置机器SSH免密登陆

​ 由于安装的时候需要向不同机器发送资源,所以要求各台机器间能实现SSH免密登陆。配置免密登陆的步骤如下:

su dws

ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
chmod 600 ~/.ssh/authorized_keys

注意: 配置完成后,可以通过运行命令 ssh localhost 判断是否成功,如果不需要输入密码就能ssh登陆则证明成功。

# 2.环境要求

DWS、DophinScheduler、Primeton DI、Seatunnel、Zookeeper(可选)及数据库所在服务器时间统一,时区设置一致。

# 3.必须安装的命令

说明:如果没有安装进程管理工具,会造成流式作业运行后无法停止的现象。

  • 进程管理工具

    • macOS安装pstree

    • Fedora/Red Hat/CentOS/Ubuntu/Debian安装psmisc

      yum install psmisc
      

# 4. 安装部署

  • 微服务版安装指南
  • Zookeeper安装指南(可选)
  • SeaTunnel安装指南
  • Primeton DI安装指南
  • DolphinScheduler安装指南
  • Nacos安装指南
  • Nginx安装指南
  • Redis安装指南
  • Neo4j安装指南

← 部署方案 Zookeeper安装指南(可选) →