自动化营销概述
若您购买了 会员中台功能包、社交互动功能包，相应模块涉及的用户行为事件数据将自动同步到自动化营销。说明 具体上报方法，请参见 事件上报（新版）或 事件管理（老版）。营销动作：发短信、发邮件、发PUSH、发微信、推送Kafka、Webhook、...
工程架构
架构图 冷启动链路的整体框架如下图所示：冷启动链路流程 App请求推荐服务，获取推荐内容列表 推荐服务调用 冷启动召回模块，获取匹配上的候选物品 推荐服务调用 冷启动算法打分EAS服务，传递参数：待打分候选物品列表，用户/物品特征，...
数据服务权限列表
功能权限点 服务项目管理员 开发用户 业务应用用户 运维用户 查看服务项目列表 Y Y Y Y 创建服务项目 N N N N 编辑服务项目 Y N N N 删除服务项目 Y N N N 查看服务项目成员 Y N N N 添加服务项目成员 Y N N N 编辑服务项目成员 Y N N N ...
基本概念
数据推送后，客户端数据同步 SDK 需要通过 Biztype 将数据分发给对应的业务模块。绑定关系 指设备与用户标识的映射关系，对应绑定和解绑两个操作。变量 进行客户端实验时，变量需从实时发布（Mobile Delivery Service，简称 MDS）动态配置...
添加 SDK
移动同步方式 使用 mPaaS 插件添加 诊断 模块。更多信息，参考 mPaaS 插件>编辑模块。消息推送方式 使用 mPaaS 插件添加 诊断 和 消息推送 模块。更多信息，参考 mPaaS 插件>编辑模块。基于已有工程且使用 mPaaS 插件 前置条件 已参考 基于...
现代IM系统中的消息系统—模型
Timeline模型 Timeline模型以简单为设计目标，核心模块主要包括：模块 说明 Store Timeline存储库，类似数据库表的概念。Identifier 用于区分Timeline的唯一标识。Meta 用于描述Timeline的元数据，元数据描述采用free-schema结构，可自由...
基本概念
任务依赖（Task Deps）：当前任务可能需要有另外（1或者n）个任务产出的数据，设置依赖之后，其运行的实例需要等待上游对应实例成功，且满足计划时间才会执行。若失败，则下游不会执行。任务实例（Task Instance）：任务的一次运行的承载体...
UpdateThingModel
调用接口更新指定产品物模型中的单个功能，支持同步更新物模型的扩展描述。使用说明 如果指定产品已发布，需先调用接口 CancelReleaseProduct 取消该产品发布，才能调用本接口更新物模型功能。如需更新功能定义信息，您可通过 json-schema ...
DeleteThingModel
若传入的 PropertyIdentifier.N、ServiceIdentifier.N和 EventIdentifier.N在默认模块中都不存在，调用本接口会报错，提示功能定义不存在的错误码信息。传入 ProductKey和 FunctionBlockId，及指定的 PropertyIdentifier.N、...
创建AnalyticDB for MySQL3.0数据源
创建完成后，可在DataWorks的各功能模块使用该数据源连接AnalyticDB for MySQL3.0实例，进行相应的数据同步、数据开发、数据分析等操作。前提条件 已购买AnalyticDB for MySQL3.0实例并创建数据库，详情请参见 创建实例、创建数据库。说明 ...
创建AnalyticDB for PostgreSQL数据源
创建完成后，可在DataWorks的各功能模块使用该数据源连接AnalyticDB for PostgreSQL实例，进行相应的数据同步、数据开发、数据分析等操作。前提条件 已购买AnalyticDB for PostgreSQL实例并创建数据库，详情请参见 创建实例、数据库管理。...
集成与开发概览
DMS的数据集成与开发功能模块，针对数据全生命周期的集成、开发、服务三个阶段提供界面化的功能支持。功能简介 数据集成与开发功能模块支持多种计算、存储引擎，支持结构化、半结构化、非结构化数据的实时集成、离线集成、开发、服务，能够...
发布模块
应用发布后，同时会提交一个新的版本至模块版本，并同步应用版本描述至模块版本。应用与模块之间的关系详情请参见 应用与模块。操作步骤 登录 魔笔。在模块编辑页面，单击顶部功能区的 发布，弹出 版本发布 对话框。说明 模块不支持预览。...
简介
每新建一个应用，则针对该应用创建一个模块，该应用创建的内容都包含在该模块中，该模块名称与应用名称相同，当应用发布后，同时提交一个新的版本至模块版本，并同步应用版本描述至模块版本。在该应用中编辑时，用户所有修改，都保存在默认...
简介
模块与应用 应用是由模块与配置组成，系统每新建一个应用，则针对该应用创建一个应用主模块，该应用创建的内容都包含在该模块中，该模块名称与应用名称相同，当应用发布后，同时提交一个新的版本至模块版本，并同步应用版本描述至模块版本...
表结构配置管理
微信营销、社交互动等模块会向本空间的计算源回流用户数据，这些回流的数据表会自动加入表结构配置列表、调度任务列表，其创建者将显示为API同步。微信营销模块回流微信公众号粉丝的用户标签表，其数据表别名为对应的微信公众号，底层数据...
监控任务性能
功能 说明 增量同步链路拓扑 增量同步链路主要展示链路中各模块间的数据传输情况和网络延迟信息，模块包含：源库、DTS采集模块、DTS缓存模块、DTS写入模块、目标库。相关参数解释如下：BPS：链路中模块间每秒传输的数据量，单位为MB/s。RPS...
DataWorks on EMR Serverless StarRocks最佳实践
数据集成 DataWorks为您提供 数据集成 子模块，可实现多种数据源间多种同步场景下的数据同步。数据集成模块介绍请参见 数据集成概述。数据开发与运维中心 DataWorks为您提供 数据开发 与 运维中心 两个子模块，可实现在数据开发中开发并...
MySQL整库周期性增全量同步至Hive
创建同步任务 登录并进入 数据集成子模块页面，单击 同步任务 进入同步任务页面，在页面中单击 新增任务，开始配置同步任务。配置同步任务基本信息。任务名称：自定义。同步类型：来源数据源选择 MySQL，去向数据源选择 Hive；根据同步场景...
MySQL整库实时同步至OSS数据湖
如果您的数据库表数量不多，您可以直接在右侧预览模块手动勾选待同步的数据库表，然后添加到已选库表中，此时页面会根据您的勾选情况自动在左侧添加限定条件。如果您有多个数据源、数据库、数据表，您可以在左侧手动添加限定条件来进行过滤...
Oracle同步至Tablestore
创建同步任务 登录并进入 数据集成子模块页面，单击 同步任务 进入同步任务页面，在页面中单击 新增任务，开始配置同步任务。配置同步任务基本信息。任务名称：自定义。同步类型：来源数据源选择 Oracle，去向数据源选择 Tablestore；并...
创建与释放全球多活数据库集群
说明 如果一个集群中有1个中心节点，N个单元节点，则会创建N个DTS双向同步实例。请参见 DTS收费项目和计费规则。注意事项 类型 说明 中心节点的限制 待同步的表需具备主键或唯一约束，且字段具有唯一性，否则可能会导致目标数据库中出现...
查看同步链路状态和性能
DTS可以展示全量同步性能、显示并诊断 增量同步性能，使您可以了解数据同步作业的链路状态信息和多种性能指标，为您管理数据同步作业提供参考依据。操作步骤 登录 数据传输控制台。说明 若数据传输控制台自动跳转至数据管理DMS控制台，您...
修改同步对象
DTS支持在数据同步实例运行过程中新增或移除同步对象，无需重新配置同步实例，帮助您在降低对业务影响的情况下变更同步对象。前提条件 数据同步实例进入 增量写入 模块，且处于 运行中 或同步失败的状态。为保障DTS可以正常连接源和目标库...
MSHA产品和开源产品对比
切换数据源和延迟禁写，包括：PolarDB DRDS ✅ ❌ 通用能力 组件 功能大类 具体功能说明 商业产品 开源产品 网关 路由 条件路由（入口流量调度）✅ ❌ 注册中心同步 服务发现 跨集群的服务同步 ✅ ❌ 切流模块 命令通道 控制面和数据面的...
查看数据校验详情
根据实例是否包含增量写入（增量同步或增量迁移）模块，有如下两种情况：不含增量写入模块：全量数据写入完成后开始全量校验。含增量写入模块：说明 全量校验与增量校验任务没有依赖关系，相互之间没有影响。若增量任务为单任务形式（不...
离线同步任务调优
本文为您介绍影响数据同步速度的因素、如何通过调整同步任务的并发配置来实现同步速度最大化、作业的限速选项，以及数据同步过慢的场景。文档概述 同步速度受同步任务本身配置、数据库、网络等多方面影响，详情请参见：数据同步速度的影响...
PolarDB PostgreSQL版间的迁移
若DTS正向和反向同步任务均同步了某张表，且正向同步任务同步了该表的全量和增量数据，则反向同步任务只同步该表的增量数据。同步期间，DTS会在源库中创建前缀为dts_sync_的replication slot用于复制数据。通过该replication slot，DTS可以...
PolarDB PostgreSQL版（兼容Oracle）间的迁移
支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL 重要 2022年09月09日前创建的数据同步任务，需在配置同步任务前，在源库中创建触发器和函数来捕获DDL信息，详情请参见 通过触发器和函数实现PostgreSQL的DDL增量...
修改同步或迁移实例的当前位点
数据传输服务DTS（Data Transmission Service）支持修改同步或迁移实例增量写入模块的当前位点，帮助您在目标库写入数据时，跳过或再执行一次源库某段时间内的数据变更操作。背景信息 当前位点是实例写入到目标端的最新数据的时间戳，DTS...
创建并管理数据源
例如，同步MaxCompute数据前，需先创建MaxCompute数据源，创建完成后可在数据集成模块选择该数据源，控制同步任务读取或写入的数据库或数据仓库。背景信息 为了给您带来更为统一的产品使用体验，DataWorks于 2023年10月20日 开始逐步将...
通过DTS导入数据
DTS支持迁移全量数据及增量数据，您可以通过DTS迁移MySQL数据库（例如自建MySQL、RDS MySQL和PolarDB MySQL）同步或迁移至 云数据库 SelectDB 版，并在 云数据库 SelectDB 版 上完成亚秒级响应海量数据查询、万级高并发点查询以及高吞吐...
现代IM系统中的消息系统—架构
接收方会主动的向服务端拉取所有未同步消息，但接收方何时来同步以及会在哪些端来同步消息对服务端来说是未知的，所以要求服务端必须保存所有需要同步到接收方的消息，这是消息同步库的主要作用。对于新的同步设备，会有消息漫游的需求，这...
PolarDB MySQL版同步至云数据库SelectDB版
是否限制增量同步速率 您也可以根据实际情况，选择是否对增量同步任务进行限速设置（设置 每秒增量同步的行数RPS 和 每秒增量同步的数据量(MB)BPS），以缓解目标库的压力。环境标签 您可以根据实际情况，选择用于标识实例的环境标签。本...
RDS MySQL同步至云数据库SelectDB版
是否限制增量同步速率 您也可以根据实际情况，选择是否对增量同步任务进行限速设置（设置 每秒增量同步的行数RPS 和 每秒增量同步的数据量(MB)BPS），以缓解目标库的压力。环境标签 您可以根据实际情况，选择用于标识实例的环境标签。本...
数据同步流程
数据传输提供数据同步功能，帮助您实现数据源之间的数据实时同步。适用于数据异地多活、数据异地灾备、数据聚合和实时数据仓库等多种业务场景。您可以参考以下流程进行同步前的准备工作、以及购买、配置和管理数据同步项目。完成准备工作。...
计费方式
配置数据同步实例时 数据同步实例将从 增量数据采集 模块启动后，开始按同步链路规格来计费。数据同步实例暂停期间仍会收取费用。配置数据迁移实例时 如不勾选增量迁移，则不会收取费用。如勾选增量迁移，则数据迁移实例将从增量迁移任务...
Dataphin集成任务中多表同步是如何同步的
产品名称 Dataphin 产品模块 集成任务，多表同步 概述 本文为您介绍Dataphin管道集成任务中源表选择多表同步是怎样同步的 问题描述 集成任务同步数据中源表选择了多表同步，为什么右边的界面只显示了部分表的字段 问题原因 不清楚选择多表...
2023/05/30 更新日志
新功能 一、新增电商集成模块，支持Demandware商品信息同步 Commerce Integration功能是Salesforce社交电商产品提供的集成了Salesforce Commerce产品的模块，使用该功能可以更便捷地从Salesforce Commerce 产品中将数据同步到Social ...
配置工作空间
产品模块 权限名称 超级管理员 管理员 开发者 运营者 工作空间管理 工作空间增删 Y N N N 查看工作空间 Y Y N N 修改成员角色 Y Y N N 添加删除成员 Y Y N N 工作空间切换列表 Y Y，可查看自己被添加为成员的工作空间 孪生搭建 应用编辑&...
- 产品推荐
- 这些文档可能帮助您