数据集成支持的数据源
实时集成 适用于将来源端数据源中整库或全部表的数据变化实时集成至目标端数据源中，实现 来源端数据源与目标端数据源 实时地保持数据同步。离线集成支持的数据源 数据源 读取 写入 大数据存储型数据源 MaxCompute 支持 支持 Hive 支持 ...
使用云数据库Redis版实现即时通信场景中的多端同步
通过对用户在各客户端上的数据进行对比和同步，就可以实现多端数据同步，详细的实现方式如下。提炼数据结构。从IM系统中的各类事件中提炼出统一的消息数据结构，这些事件包括新消息、已读消息、增删会话信息等。消息数据结构示例如下：...
配置学区地图轮播列表交互
背景信息 需要实现的交互：当单击用来展示学校排名的 轮播列表 组件内的某一行时，在 地图 组件上定位该学校位置，并通过 散点层 子组件返回该学校位置上的数据。实现方案：轮播列表 组件的数据中包含学校的位置数据。当单击 轮播列表 组件...
全量数据同步
通过选择已注册的数据源端数据和目标端，实现全量任务自动建表的方式创建离线同步周期任务，本文介绍如何创建MySQL to MaxCompute离线全量数据同步一次性调度的任务。前提条件 已新建工作组，具体操作，请参见 新建工作组。已在工作组中...
一键实时同步至Hologres
同步时默认将源端数据表写入目的端同名schema或同名表中，同时，您可以通过添加映射规则定义最终写入目的端的schema或表名称，实现将多张表数据写入到同一个目标表中，或统一将源端某固定前缀的表名在写入目标表时更新为其他前缀。...
Quick BI v4.0版本说明
提升移动端交互体验，类目分类可见范围灵活配置，实现千人千面的移动端看数体验。数据建模配置全面提升 数据集交互体验全面提升，拖拽式所见即所得模式让您的数据建模体验如丝般顺滑；丰富数据源，新增Oceanbase、Kylin数据源，群空间支持...
一键实时同步至DataHub
同步时默认将源端数据表写入DataHub同名Topic中，同时，您可以通过添加映射规则定义最终写入目的端的Topic名称，实现将多张表数据写入到同一个Topic中，或统一将源端某固定前缀的表名在写入目标Topic时更新为其他前缀。支持通过正则表达式...
全增量实时同步至Hologres
如上图所示，使用 源端数据库名 将源端数据库名作为目标schema名称，并且将所有满足 order_db.*正则表达式的源库写入目标Hologres名为 order_db 的schema中。自定义目标表名映射规则 在 目标表名映射自定义 列，单击 编辑 按钮。可以使用...
一键实时同步至Elasticsearch
同步时默认将源端数据表写入Elasticsearch同名索引中，同时，您可以通过添加映射规则定义最终写入目的端的索引名称，实现将多张表数据写入到同一个索引中，或统一将源端某固定前缀的表名在写入目标索引时更新为其他前缀。支持通过正则表达...
一键实时同步至Kafka
步骤二：配置网络连通 源端选择已创建的源端数据源与目标端数据源，以及用于执行同步任务的资源组。并测试资源组与数据源的网络连通。详情请参见：配置同步网络链接。步骤三：设置同步来源与规则 在 基本配置 区域，配置同步解决方案的名称...
MySQL分库分表同步至Hologres（方案1.0）
同步时默认将源端数据表写入目的端同名schema或同名表中，同时，您可以通过添加映射规则定义最终写入目的端的schema或表名称，实现将多张表数据写入到同一个目标表中，或统一将源端某固定前缀的表名在写入目标表时更新为其他前缀。...
一键实时同步至MaxCompute
数据集成附加字段支持的变量字段如下：EXECUTE_TIME：执行时间 UPDATE_TIME：更新时间 DB_NAME_SRC：原始数据库名称 DB_NAME_SRC_TRANSED：转换后数据库名称 DATASOURCE_NAME_SRC：源端数据源名称 DATASOURCE_NAME_DEST：目的端数据源名称 ...
一键实时同步至MaxCompute
数据集成附加字段支持的变量字段如下：EXECUTE_TIME：执行时间 UPDATE_TIME：更新时间 DB_NAME_SRC：原始数据库名称 DB_NAME_SRC_TRANSED：转换后数据库名称 DATASOURCE_NAME_SRC：源端数据源名称 DATASOURCE_NAME_DEST：目的端数据源名称 ...
功能特性
SLS投递 下载数据 客户端（odpscmd）或Studio MaxCompute的客户端（odpscmd）、Studio等数据上传下载工具均通过Tunnel功能实现数据的上传与下载。客户端（odpscmd）或Studio DataWorks数据下载 MaxCompute支持通过DataWorks的数据集成功能...
增量数据同步
通过选择已注册的数据源端数据和目标端，实现增量任务自动建表的方式创建离线同步周期任务，本文介绍如何创建MySQL to MaxCompute离线增量数据同步周期调度的任务。前提条件 已新建工作组“信息中心（xxzx）”，具体操作，请参见 新建工作...
常见错误码及排查方法
说明 若您的实际不符合上述原因，请尝试以下方法：检查源端数据库状态是否正常。检查账号密码是否修改。检查白名单是否完整添加。请参见 迁移、同步或订阅本地数据库时需添加的IP白名单。检查源端数据库是否连接数过多。DTS-61015 无法连接...
HTTP节点
例如，设置10秒超时（客户端和服务端进行数据交互的时间），若每隔8秒传输一次数据（两个连续数据包之间的时间），传输10次，那么交互的整体时间为80秒，这样是不超时的。若每隔12秒传输一次数据（即任意两个连续数据包之间的时间超过了10...
HTTP节点概述
例如，设置10秒超时（客户端和服务端进行数据交互的时间），若每隔8秒传输一次数据（两个连续数据包之间的时间），传输10次，那么交互的整体时间为80秒，这样是不超时的。若每隔12秒传输一次数据（即任意两个连续数据包之间的时间超过了10...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
路况层
说明 还可将图层数据接口作为区块数据接口，在数据看板中配置更丰富的数据源类型或实现与普通图表组件的数据交互，详情请参见 一键生成区块接口。如果您在创建三维城市构建器项目时，使用了 空间数据项目 模式，并且项目内包含了数据图元...
粒子
动作 动作 说明 请求数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如粒子配置了API数据源为 http://api.test ，传到 请求数据接口 动作的数据为 { id:'1'}，则最终请求接口为 http://api.test?id=1 。...
概述
模块可以承载解决方案所需要的组件、页面、前后端逻辑流、数据模型以及需要接入的API服务。例如，您可以基于高德地图OpenAPI，配合相关自定义页面组件，将地图能力封装成一个适用于您业务需要的模块，并在后续的业务应用中引用该模块，以...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
如果源端存在包含时区信息的数据类型（例如 TIMESTAMP WITH TIME ZONE），请您确保目标端数据库支持并存在源端对应的时区，否则将导致数据迁移过程中产生数据不一致的问题。库表汇聚场景下：建议您使用导入对象或匹配规则的方式映射源端和...
S3M BIM
说明 还可将图层数据接口作为区块数据接口，在数据看板中配置更丰富的数据源类型或实现与普通图表组件的数据交互，详情请参见 一键生成区块接口。如果您在创建三维城市构建器项目时，使用了 空间数据项目 模式，并且项目内包含了数据图元...
S3M管网
说明 还可将图层数据接口作为区块数据接口，在数据看板中配置更丰富的数据源类型或实现与普通图表组件的数据交互，详情请参见 一键生成区块接口。如果您在创建三维城市构建器项目时，使用了 空间数据项目 模式，并且项目内包含了数据图元...
超图REST栅格瓦片
说明 还可将图层数据接口作为区块数据接口，在数据看板中配置更丰富的数据源类型或实现与普通图表组件的数据交互，详情请参见 一键生成区块接口。如果您在创建三维城市构建器项目时，使用了 空间数据项目 模式，并且项目内包含了数据图元...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
ArcGIS栅格瓦片
说明 还可将图层数据接口作为区块数据接口，在数据看板中配置更丰富的数据源类型或实现与普通图表组件的数据交互，详情请参见 一键生成区块接口。如果您在创建三维城市构建器项目时，使用了 空间数据项目 模式，并且项目内包含了数据图元...
蓝图编辑器常见案例教学
第二个节点的处理方法实现将当前数字翻牌器请求到的数据与另外一份保存的数据相加后，导入名称为total的数字翻牌器组件接口中。实操演示 请求数据接口时动态传递参数 在画布编辑器中添加 Tab列表 和 数字翻牌器 组件，并配置组件的数据源。...
3D Tiles 倾斜摄影
说明 还可将图层数据接口作为区块数据接口，在数据看板中配置更丰富的数据源类型或实现与普通图表组件的数据交互，详情请参见 一键生成区块接口。如果您在创建三维城市构建器项目时，使用了 空间数据项目 模式，并且项目内包含了数据图元...
S3M倾斜摄影
说明 还可将图层数据接口作为区块数据接口，在数据看板中配置更丰富的数据源类型或实现与普通图表组件的数据交互，详情请参见 一键生成区块接口。如果您在创建三维城市构建器项目时，使用了 空间数据项目 模式，并且项目内包含了数据图元...
数据库连接
本文介绍设置数据连接数和关闭实例连接的方法。连接数限制 Gremlin客户端和服务端通过线程池进行交互，默认的连接运行同时最多有32个并发。如果并发超过32个，您可以修改Gremlin与图数据库GDB建立连接时使用的配置文件（例如 remote-...
WMS栅格瓦片
说明 还可将图层数据接口作为区块数据接口，在数据看板中配置更丰富的数据源类型或实现与普通图表组件的数据交互，详情请参见 一键生成区块接口。如果您在创建三维城市构建器项目时，使用了 空间数据项目 模式，并且项目内包含了数据图元...
配置MaxCompute输出
大数据计算服务MaxCompute（原名ODPS）为您提供完善的数据导入方案，能够快速解决海量数据的计算问题。前提条件 配置MaxCompute输出节点前，您需要先配置好相应的输入或转换数据源，详情请参见 实时同步能力说明。背景信息 写入数据不支持...
概述
由于这些不同的业务数据之间需要交互，为了实现这两个数据库之间双向的数据访问，您可以创建 PolarDB PostgreSQL版（兼容Oracle）（A）到 PolarDB PostgreSQL版（兼容Oracle）（B）的DBLink和 PolarDB PostgreSQL版（兼容Oracle）（B）到 ...
通过向导模式配置离线同步任务
写入端 操作 说明 配置同步前后执行语句 部分数据源支持在同步前（数据写入目标端数据源前）与同步完成后（数据写入目标端后），在目标端执行相关数据库SQL。示例：MySQL Writer支持配置preSql与postSql，即在数据写入MySQL前或后，可以...
XYZ栅格瓦片
说明 还可将图层数据接口作为区块数据接口，在数据看板中配置更丰富的数据源类型或实现与普通图表组件的数据交互，详情请参见 一键生成区块接口。如果您在创建三维城市构建器项目时，使用了 空间数据项目 模式，并且项目内包含了数据图元...
WMTS栅格瓦片
说明 还可将图层数据接口作为区块数据接口，在数据看板中配置更丰富的数据源类型或实现与普通图表组件的数据交互，详情请参见 一键生成区块接口。如果您在创建三维城市构建器项目时，使用了 空间数据项目 模式，并且项目内包含了数据图元...
使用数据传输同步数据
分区规则 同步源端数据至 DataHub Topic 的规则，目前支持 Hash 和 Table。推荐您选择 Table，以确保下游在消费消息时，不会出现 DDL 与 DML 消费不统一的情况。Hash 表示数据传输使用一定的 Hash 算法，根据主键值或分片列值 Hash 选择 ...
- 产品推荐
- 这些文档可能帮助您