普元数据开发平台 普元数据开发平台
产品介绍
安装部署
快速入门
操作指南
FAQ
  • 数据源管理
  • 新建数据源
  • 修改数据源
  • 删除数据源
  • 环境信息
  • SQL客户端
  • 查看连接信息
  • 搜索
  • 补充说明

# 数据源管理

在配置数据集成同步任务前,您需要配置好需要同步的源端和目的端数据库相关信息,以便在配置同步任务时,您可以通过选择数据源名称来确定同步任务读取和写入的数据库。

当前版本支持的数据源,包括:关系数据库、大数据、NoSQL、消息队列。

类型 版本
MySQL 5.7.25、8.0.28
SQL Server 2012、2016
Oracle 12c、19c
IBM DB2 9.7
PostgreSQL 9.6.2、10.23
南大通用 GBase8s 8.3.81.51
达梦 DM8
人大金仓 KingbaseES V8R6
openGauss 2.1.0
Oscar 7.0.8
Hive 2.1.1-cdh6.3.2
HBase 2.1.0-cdh6.3.2
Clickhouse 22.1.3.7
HDFS Hadoop 3.0.0-cdh6.3.2
StarRocks 3.0.3
Inceptor 3.1.4
Elasticsearch 8.1.2
MongoDB 4.2.5
Neo4j 4.3.6
Kafka 2.13-2.8.2

本章节涉及的功能主要有:

  • 数据源管理
    • 新建数据源
    • 修改数据源
    • 删除数据源
    • 环境信息
    • SQL客户端
    • 查看连接信息
    • 搜索
    • 补充说明

点击上方菜单栏“公共资源”,进入公共资源管理界面,点击菜单栏的"数据源管理",进入数据源管理界面。

新建数据源列表

# 新建数据源

点击【新建数据源】按钮,弹出"创建数据源"的弹窗,按照界面要求录入数据源参数。

新增数据源

点击【保存并配置环境】按钮,按照界面要求继续录入数据源参数。

如果想要确定数据源的可用性,可以点击【开始测试】按钮进行连通性测试。

新增数据源

新增数据源

参数说明:

参数 说明
数据源编码 当前创建的数据源编码,由用户自定义且不可为空。命名可包含字母、数字、下划线、中划线。
数据源名称 当前创建的数据源名称,由用户自定义且不可为空。命名可包含汉字、字母、数字、下划线、中划线。
数据源层次 当前创建的数据源所属数据层,从下拉选项选择且不可为空。一个数据源只能隶属一个数据层。
所属系统 当前创建的数据源所属系统,从下拉选项选择(数据字典)。
所属部门 当前创建的数据源所属部门,从机构选项进行选择。
用途 当前创建的数据源的用途。
备注 当前创建的数据源的备注信息,用于记录用户自定义内容。

# 修改数据源

点击数据源列表上的"数据源名称",弹出"数据源详情"弹窗。

修改数据源

点击弹窗左上角的【编辑内容】,可修改的参数项变为"可编辑"状态,用户可以根据需求进行参数的修改。

点击【确定】按钮,完成参数的修改、保存。

点击【取消】按钮,取消本次修改操作。

修改数据源

# 删除数据源

点击数据源列表后边的【删除】按钮,弹出"删除确认"弹框。

点击弹框的【确认】按钮,完成删除操作。

点击弹框的【取消】按钮,取消本次删除操作。

删除数据源

# 环境信息

点击数据源列表后边的【环境信息】按钮,弹出"+增加环境"菜单,可以创建、维护各个环境(开发环境、生产环境……)的数据源连接配置信息。

数据源环境信息

点击【增加环境】,可以创建新的数据源环境连接配置参数。

数据源环境信息

点击【编辑】,可以修改当前数据源环境连接配置参数。

数据源环境信息

点击【删除】,可以删除当前数据源环境连接配置。

# SQL客户端

SQL客户端是一种在线浏览数据源信息的工具。支持数据库/Schema、表、视图、触发器、存储过程、列、索引、约束、分区、表数据、SQL语句执行/停止等;SQL编辑器语法高亮、提示、自动补全(数据库/Schema、表、视图、字段)。

当前版本支持 10 种关系型数据库(MySQL、SQL Server、Oracle、PostgreSQL、DB2、达梦、openGauss、GBase、Oscar、人大金仓)、4种大数据库(Hive、Inceptor、StarRocks、ClickHouse)。

点击数据源列表后边的【SQL客户端】按钮,会打开新的浏览器Tab页,可以浏览当前数据源的信息。

SQLClient

# 查看连接信息

点击数据源列表后边的【连接信息】按钮,弹出"连接信息"弹窗,可以查看各个环境的数据源连接信息。

查看数据源连接信息

查看数据源连接信息

# 搜索

点击存算引擎列表右上方的【高级搜索】按钮,输入搜索条件"数据源编码"或者"数据源名称",点击【搜索】按钮,可以按照条件完成数据源的模糊查询,点击【重置】按钮,可以清空搜索条件。

搜索数据源

# 补充说明

Generic JDBC存算引擎能快速接入更多关系型数据库,是通用的关系型数据库jdbc连接方式。

以下以Generic JDBC类型创建HANA_SAP数据源为例说明使用步骤。

  1. 创建存算引擎参考HANA_SAP存算引擎

  2. 创建数据源

    image-20240515100918835

    image-20240515100928826

⚠️ 提示:在IDE中如果要使用该GenericJDBC创建的数据源,仍然需要将驱动放置在对应应用的lib目录下(dws_server、dolphinscheduler、primeton DI、seatunnel)。

← 存算引擎管理 调度引擎管理 →