大数据研发治理套件
DataLeap New IDE 数据集成支持离线同步、流式同步等多种同步模式,本文将向您介绍各同步模式支持的数据源类型,各同步模式下支持的读写数据源可自由组合通道使用。
数据集成使用的数据源,需要先在项目控制台 > 数据源管理中配置,并测试独享数据集成资源组的网络连通性,注册成功后的数据源便可在 New IDE 项目的任务中使用。
目前 New IDE 支持的数据源能力如下:
说明
✅:支持可视化模式(同时也支持脚本模式)
数据源类型 | 数据源 | 离线同步 | 实时同步 | ||
|---|---|---|---|---|---|
单表读 | 增量读(where过滤) | 单表写 | 单表增量写 | ||
大数据存储 | Hive(on HDFS) | ✅ | 不支持 | ✅ | ✅ |
大数据存储 | Hive(on TOS) | ✅ | 不支持 | ✅ | ✅ |
关系型数据库 | SQLServer | ✅ | ✅ | ✅ | ✅ |
关系型数据库 | PostgreSQL | ✅ | ✅ | ✅ | ✅ |