数据接入介绍
功能概述
数据接入支持多种数据源、多种场景下的实时数据同步入库,通过一次性全量+实时增量同步多个库表到平台,具有以下特性:
- 实时性:支持数据秒级同步。
- 可靠性:通过异常恢复,自动重试等多种机制确保数据的一致性和准确性。
- 多样性:
- 数据源多样性:支持多种数据源。
- 场景多样性:支持全增量一体同步,支持分库分表、大宽表。
- 可维护性:支持作业监控和日志查看,方便定位问题。
- 易用性:界面易操作,用户只需配置必要信息。
功能说明
接入场景说明
场景 | 说明 |
---|---|
一对一 | 一比一复刻源表结构及数据至清洗数仓,实现数据结构和内容同步。 |
分表合并 | 自动将多张分片源表合并为一张清洗数仓标准表,适用于如 ShardingSphere 等分片场景 |
大宽表 | 通过关联键将多张源表合并为一张清洗数仓大宽表,便于统一查询和高效分析。 |
支持的数据源
分类 | 数据源 | 接入说明 |
---|---|---|
关系型数据库 | MYSQL | 👉MYSQL接入说明 |
关系型数据库 | TiDB Cloud | 👉TiDBCloud接入说明 |