跳转到内容

数据接入介绍

功能概述

数据接入支持多种数据源、多种场景下的实时数据同步入库,通过一次性全量+实时增量同步多个库表到平台,具有以下特性:

  • 实时性:支持数据秒级同步。
  • 可靠性:通过异常恢复,自动重试等多种机制确保数据的一致性和准确性。
  • 多样性:
    1. 数据源多样性:支持多种数据源。
    2. 场景多样性:支持全增量一体同步,支持分库分表、大宽表。
  • 可维护性:支持作业监控和日志查看,方便定位问题。
  • 易用性:界面易操作,用户只需配置必要信息。

功能说明

接入场景说明

场景说明
一对一一比一复刻源表结构及数据至清洗数仓,实现数据结构和内容同步。
分表合并自动将多张分片源表合并为一张清洗数仓标准表,适用于如 ShardingSphere 等分片场景
大宽表通过关联键将多张源表合并为一张清洗数仓大宽表,便于统一查询和高效分析。

支持的数据源

分类数据源接入说明
关系型数据库MYSQL👉MYSQL接入说明
关系型数据库TiDB Cloud👉TiDBCloud接入说明

数据类型映射

👉数据类型映射

常见问题

👉常见问题

爻擎 AI 大数据