普元数据开发平台 普元数据开发平台
产品介绍
安装部署
快速入门
操作指南
SDK开发指南
FAQ
  • FAQs
  • Part I - 安装部署相关
  • Part II - 组件使用问题
  • Part III - 数据同步作业使用问题
  • Part IV - 环境配置问题
  • Part V - 内存溢出及模型优化
  • Part VI - 作业调度作业执行
  • Part VII - 程序执行问题

# FAQs

# Part I - 安装部署相关

  • 调度引擎相关问题
  • 使用zookeeper的cli命令查看节点下是否有ext的注册信息
  • 创建一个开发项目和一个生产项目时,怎么部署DolphinScheduler和Zookeeper
  • zookeeper启动问题排查
  • DolphinScheduler安装后检查启动状态个别服务未启动
  • dolphin达梦数据库7LA升级到7LA2
  • zookeeper关闭默认管理端口8080
  • 打了PLATFORM_8.3.2_AFCENTER_UI_20241115_P1及之后的前端补丁点击项目开发报会话无效或未登录

# Part II - 组件使用问题

  • 批量作业-CDH515版本及kerberos认证支持
  • 批量作业-SQL Server关系型数据库输入组件报错
  • 批量作业-SSH组件,支持openSSH密钥对
  • 批量作业-文本文件输出写Hive文本数据使用问题
  • 批量作业-文件类输入组件预览有数据,运行时获取不到数据
  • 批量作业-运行带kerberos认证的Hive相关任务报错
  • 用模板去同步数据到hive报错端点配置错误
  • 登录afc后点击数据开发,作业调度,运维中心报错:登录信息已过期
  • 通用模板-时间戳关系型数据库mysql到StarRocks增量同步数据不一致
  • 批量作业-使用脱敏组件的REVERSIBLE ENCRYPTION SM4与REVERSIBLE DECRYPT SM4脱敏算法找不到类
  • 公共资源oracle数据源,点击sql客户端模式报错,项目开发中使用表输入组件,选择oracle数据源表不显示
  • 数据加工-关系型数据库输入与关系型数据库输出,一条sql查询,输入到一张表里,输出到数据库后,数据库里数据显示中文乱码,输入组件中预览数据正常
  • 数据加工-ORC输出组件获取字段,报错org.xml.sax.SAXParseException Premature end of file
  • 数据加工,关系型数据库输入与关系型数据库输出作业,试运行或任务点击提交报空指针问题

# Part III - 数据同步作业使用问题

  • 数据同步作业-大数据量同步超时
  • 数据同步作业-hive Sink节点报错为空
  • 数据同步-数据同步作业关系型数据库同步
  • 数据同步-MongoDB输入组件选择数据源问题
  • 数据同步-关系型数据库抽取kingbase支持jsonb与json字段
  • dolphin在Ubuntu系统上执行seatunnel作业时,会出在ide试运行界面停止任务,导致worker-server停止

# Part IV - 环境配置问题

  • 批量作业、通用模板-开启了指标查询,但是查看数据量没数据
  • 公共资源-达梦数据库数据源中的数据库名称填写方式
  • 公共资源-数据源访问sql客户端Websocket异常问题
  • mysql数据源,ide运行界面执行日志中文乱码,表输入与表输出配置的作业无法执行
  • 打开数据开发界面,报异常“系统数据异常’No permission to view this app

# Part V - 内存溢出及模型优化

  • 数据集成-作业内存调整及模型优化

  • 数据同步-数据同步作业内存调整及模型优化

# Part VI - 作业调度作业执行

  • 作业调度-作业手动执行出现串行等待等问题
  • 作业调度-任务实例,点击查看任务实例日志,报TaskInstanceLogPath为空,可能任务实例尚未被分发的异常

# Part VII - 程序执行问题

  • 数据源是dm数据库时执行sql程序报错java.sql.SQLException: Create adhoc connection error

← SDK开发指南