现代IM系统中的消息系统—实现
查询群的方式与用户查询方式类似，功能也可以做相同的实现。用户可以根据自己需求定制不同的索引字段设置，需求实现方式如下：群ID：主键查询 二维码（含用户ID信息）：主键查询 群名：多元索引，用户名字段设置为分词字符串类型 群标签：...
跨账号同步ECS主机名
什么是同步ECS主机名 同步ECS主机名，是指通过PrivateZone自动获取ECS服务器实例信息中的主机名配置，然后根据ECS主机名在privateZone中一键生成相应的内网DNS解析记录（即主机名记录）。什么是跨账号同步ECS主机名 跨账号同步ECS主机名是...
CREATE TABLE AS（CTAS）语句
说明 在将数据同步到Hologres时，如果您的上游源表包含了 Fixed Plan 不支持类型的数据，建议通过 INSERT INTO语句 的方式，在Flink内部做类型转换后将数据同步到Hologres。不要用CTAS方式创建Sink结果表进行数据同步，因为这种方式会无法...
PolarDB MySQL版同步至阿里云消息队列Kafka版
如果已经是在同步中的任务，则需要修改同步对象，将该表移出，再次点击修改同步对象，加入该表，并将该表的大字段列过滤，不做同步。支持的同步架构 一对一单向同步。一对多单向同步。多对一单向同步。级联单向同步。关于各类同步架构的...
配置变更
定时任务配置生命周期 定时任务可以同步到 DEV、SIT 和 PRE 环境。PROD 生产环境随发布的后置任务生效。消息队列配置 在使用消息配置变更前，需要先了解 消息。目前，消息变更支持：消息类型变更（增加、删除、修改）消息订阅变更（增加、...
DataWorks数据集成常见问题
本文将会为您介绍通过DataWorks同步数据至Hologres时，常见的问题以及对应的排查手段，以帮助您能在同步遇见问题时能快速的解决。开源DataX如何将数据同步至Hologres？报错：Holohub does not binary type of Hologres for now?报错：...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将自建SQL Server同步至 云原生数据仓库AnalyticDB PostgreSQL版，帮助您轻松实现数据的传输，用于实时数据分析。前提条件 自建SQL Server数据库支持的版本，请参见 同步方案概览。已创建...
MySQL数据源
针对已经XA PREPARE的事务数据，实时同步会将其同步到目标端，如果XA ROLLBACK，实时同步不会针对XA PREPARE的数据做回滚写入的操作。若要处理XA ROLLBACK场景，需要手动将XA ROLLBACK的表从实时同步任务中移除，再添加表后重新进行同步。...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将自建SQL Server同步至 云原生数据仓库AnalyticDB PostgreSQL版，帮助您轻松实现数据的传输，用于实时数据分析。前提条件 自建SQL Server数据库支持的版本，请参见 同步方案概览。已创建...
通过数据同步功能同步Kafka至湖仓版（推荐）
AnalyticDB for MySQL 湖仓版（3.0）支持新建Kafka同步链路，通过同步链路从指定时间位点，实时同步Kafka中的数据入湖，以满足近实时产出、全量历史归档、弹性分析等需求。本文主要介绍如何添加Kafka数据源，新建Kafka同步链路并启动任务，...
PolarDB-X 1.0同步至云原生数据仓库 AnalyticDB MySQL...
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据库账号的权限要求 ...
PolarDB MySQL版同步至AnalyticDB MySQL 3.0
使用数据传输服务DTS（Data Transmission Service），可以帮助您将 PolarDB MySQL版 集群同步至 云原生数据仓库AnalyticDB MySQL版 3.0，帮助您快速构建企业内部BI、交互查询、实时报表等系统。前提条件 已创建源 PolarDB MySQL版 集群，...
PolarDB PostgreSQL版间的迁移
若DTS正向和反向同步任务均同步了某张表，且正向同步任务同步了该表的全量和增量数据，则反向同步任务只同步该表的增量数据。同步期间，DTS会在源库中创建前缀为dts_sync_的replication slot用于复制数据。通过该replication slot，DTS可以...
将Oracle数据同步到表格存储
通过Tapdata Cloud的可视化界面，您可以将Oracle数据实时同步到表格存储（Tablestore）中。前提条件 使用Tapdata Cloud同步Oracle数据到表格存储前，需要完成如下准备工作。已注册 Tapdata Cloud账号。已创建表格存储实例和表。具体操作，...
自动同步PolarDB-X元数据
当您需要 一站式完成 PolarDB分布式版 数据同步与管理时，可以在 PolarDB分布式版 实例中开通列存引擎并绑定目标 湖仓版（3.0）集群。相较于其他数据同步方案，一站式方案同步数据成本低、简单易用、能实时同步数据，可实现真正的实时分析...
RAM用户同步概述
本文为您介绍RAM用户同步的定义、使用流程和使用限制。什么是RAM用户同步 云SSO用户可以通过 RAM角色 或 RAM用户 访问RD账号的云资源，两种访问方式的差异如下表所示。本文主要为您介绍通过RAM用户登录的访问方式，即您可以配置RAM用户同步...
现代IM系统中的消息系统—模型
本章节主要介绍表格存储（Tablestore）的Timeline模型基本功能以及核心组件，并且会通过IM消息系统场景，介绍如何基于Timeline实现IM场景下消息同步、存储和索引等基本功能。Timeline模型 Timeline模型以简单为设计目标，核心模块主要包括...
功能概览
一个站点对只可以使用一种复制技术。保护组 Protected Group(PG)Consistent Protected Group(CPG)一个保护组可包含多个ECS实例，便于客户使用一个计划对多个ECS进行同一个时间点的操作。客户可以选择普通类型（多VM之间无关联），或者一致...
功能概览
一个站点对只可以使用一种复制技术。保护组 Protected Group(PG)Consistent Protected Group(CPG)一个保护组可包含多个ECS实例，便于客户使用一个计划对多个ECS进行同一个时间点的操作。客户可以选择普通类型（多VM之间无关联），或者一致...
DLA Lakehouse实时入湖
您需要在DTS中进行以下操作：说明 目前DLA中RDS数据源的入湖分析工作负载，会先利用RDS做数据的全量同步，然后依赖DTS数据订阅功能做增量同步，最终实现完整的RDS数据入湖。创建RDS MySQL数据订阅通道 说明 由于DLA Lakehouse只支持专有...
索引选择
维度 全局二级索引 本地二级索引 同步方式 异步方式 同步方式 第一列主键要求 可选数据表中的任意主键列或者预定义列 必须和数据表的第一列主键相同 同步延迟 毫秒级别 实时 读取一致性 最终一致性 强一致性 多元索引 一个多元索引是一系列...
Dataphin 同步任务是否可以使用视图
概述 本文描述了Dataphin 同步任务是否可以使用视图。详细信息 Dataphin 同步任务可以使用视图。如图所示，创建好视图后，在配置页面可以检索到，Mysql、Orcal均支持。适用于 Dataphin 版本：v2.9.4-3
数据导入与迁移
RDS增量数据同步 通过BDS数据同步服务可以将RDS增量数据实时同步到HBase增强版中，使用说明：开通 LTS服务。在BDS中添加HBase增强版集群关联，具体操作方法参见 添加HBase增强版数据。请参见 RDS全增量同步 完成配置。HBase迁移至HBase增强...
文件网关反向同步的使用场景及配置
文件网关支持反向同步功能，将OSS上的元数据同步回本地，您可以在云存储网关侧观察OSS上数据的变化。使用场景 当多台云存储网关实例共同访问一个OSS Bucket时，可以实现多实例数据共享。当您需要从OSS恢复数据到云存储网关时，反向同步功能...
手工触发同步
概述 手动触发同步：可以实现辅助DNS主动连接主DNS进行解析数据更新。注意：辅助DNS中的解析记录更新，一般是由主DNS发送NOTIFY来触发解析数据同步，或者是根据主DNS设置的刷新时间来触发解析数据同步（指时间到期则触发）。操作步骤 登录 ...
手动触发同步
概述 手动触发同步：可以实现辅助DNS主动连接主DNS进行解析数据更新。注意：辅助DNS中的解析记录更新，一般是由主DNS发送NOTIFY来触发解析数据同步，或者是根据主DNS设置的刷新时间来触发解析数据同步（指时间到期则触发）。操作步骤 登录 ...
数据上云场景
MaxCompute平台提供了丰富的数据上传下载工具，可以广泛应用于各种数据上云的应用场景，本文为您介绍三种经典数据上云场景。Hadoop数据迁移 您可使用MMA、Sqoop和DataWorks进行Hadoop数据迁移。使用DataWorks结合DataX进行Hadoop数据迁移的...
钉钉配置
同步类型可以选择手动同步或者自动同步，手动同步是仅同步一次，自动同步会在选择的时间点定时自动触发同步，如果钉钉有人员或部门变动都会同步到网盘 如果钉钉人员离职后，同步程序不会在网盘中删除该用户，只会禁用，需要管理员做好交接...
整库离线同步至Elasticsearch
整库离线同步方案包括周期性全量同步、周期性增量同步、一次性全量同步、一次性增量同步、一次性全量周期性增量同步。本文以一次性全量周期性增量同步至Elasticsearch为例，为您讲解如何将整库数据离线同步至Elasticsearch。前提条件 已...
产品优势
相对于传统的数据同步工具，数据同步服务的实时同步功能能够将并发粒度缩小到事务级别，能够并发同步同张表的更新数据，从而极大得提升同步性能，高峰期时，同步性能可以达到 30000 RPS（性能指标仅供参考，数据同步服务的数据迁移和同步...
启用或禁用SCIM同步
您可以从支持SCIM 2.0的外部IdP同步用户或用户组到云SSO。本文为您介绍在云SSO如何启用SCIM同步、获取SCIM服务端地址、禁用SCIM同步的具体操作。启用SCIM同步 启用SCIM同步后，您才能从外部IdP同步用户或用户组到云SSO。同时，您还需要创建...
我的资源
同步资源 您可以在菜单中单击 概览 进入产品页面，找到 同步资源 按钮并单击，或者在菜单中单击 我的资源 找到 同步资源 按钮并单击。以上两种方式都可以将当前账号以及关联账号下的资源同步至智能顾问（Advisor）中。查看已同步资源 您...
数据传输作业：数据集成
MaxCompute支持通过DataWorks数据集成功能将其他数据源数据同步至MaxCompute，数据集成作业主要有三种类型：离线同步、实时同步、同步解决方案。本文为您介绍MaxCompute数据集成的实现方案。离线同步 离线（批量）的数据通道通过定义数据...
同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
如果开启，请设置 RPS（全量同步阶段每秒最多可以同步至目标端的数据行数的最大值限制）和 BPS（全量同步阶段每秒最多可以同步至目标端的数据量的最大值限制）。说明 此处设置的 RPS 和 BPS 仅作为限速限流能力，全量同步实际可以达到的...
申请跨境数据同步权限
数据传输服务DTS（Data Transmission Service）默认仅支持非跨境的数据同步任务，若您需要创建跨境（跨国家或地区）的数据同步任务，需要申请开通跨境同步的权限。例如，创建从中国内地到非中国内地地域的同步任务时，需要申请跨境同步的...
创建同步MaxCompute
查看同步任务 可以点击对应connector的详情页面查看同步任务的运行状态和点位等信息，包含同步点位、同步状态以及重启和停止等操作，如下图所示：同步示例 1.USER_DEFINE同步模式 建立DataHub Topic 备注：topic schema中必须需要包含...
同账号同步实例
若您想实现跨地域的镜像同步，可以通过配置同步规则，将容器镜像从源实例同步至目标实例。前提条件 同步实例时，请确保您的源实例为标准版或高级版，基础版的源实例不支持同步实例。目标实例可以是基础版、标准版或高级版。说明 您可以在...
管理数据集
当数据集是由数据库创建时，您可以做以下操作。单击 数据库连接 后的 设置，修改数据库连接信息。单击 数据定时同步 后的 设置，打开 启用 开关，设置 定时执行 的类型，例如：每月第一天早上10点整进行数据同步。单击 数据定时同步 后的 ...
极速同步
您可以使用极速同步功能，将OSS Bucket中的数据变化极速同步至所有通过文件网关连接至该Bucket的本地客户端。前提条件 已创建文件网关并添加缓存。具体操作，请参见 创建文件网关 及 添加缓存。已创建OSS Bucket。具体操作，请参见 创建...
仓库同步
针对从其他平台导入至 Codeup 的代码库，支持快速触发三方源代码仓库数据的同步，在代码迁移阶段可以帮助企业循序渐进地将业务从旧系统迁移至云效Codeup。当企业切换代码平台的过程中，为了降低对日常业务的干扰，可以先迁移一部分敏感度低...
- 产品推荐
- 这些文档可能帮助您