问题示例 使用数据传输服务(DTS)同步完Redis后,使用Redis的 info keyspace 命令查看源端和目标端的keys情况,出现源端和目标端数据不一致,且含过期时间的keys占很大比重。如下图:可能原因 单靠 info keyspace 的 expires 来判断数据...
PyODPS是MaxCompute的Python版本的SDK,提供对MaxCompute对象的基本操作及DataFrame框架,帮助您在MaxCompute上使用Python进行数据分析,支持在DataWorks或本地环境上使用。本文为您介绍在本地环境上使用PyODPS时,如何安装PyODPS。前提...
选择链路规格并勾选 数据传输服务协议。说明 关于链路的规格信息,请参见 数据迁移链路规格说明 和 数据同步链路规格说明。升级数据迁移任务时,选择 迁移链路规格。升级数据同步作业时,选择 同步链路规格。说明 本文介绍通用操作,实际...
本文汇总了数据传输服务DTS(Data Transmission Service)计费的常见问题。常见问题 Q:按量付费的计费方式下,手动结束了数据迁移实例或数据同步实例,还会继续收费吗?A:不收费。数据迁移实例仅在增量数据迁移正常运行期间计费(包含...
概述 本文主要介绍MySQL中数据类型为Date的数据,通过数据订阅传输数据后,数据格式由 YYYY-MM-DD 格式变化为 YYYY:MM:DD 的原因。详细信息 DTS默认数据存储格式为 YYYY:MM:DD,YYYY-MM-DD 是展现出来的格式,实际...适用于 数据传输服务 DTS
问题原因 SDK运行的服务器没有公网IP,不能连接数据传输服务的服务器,或者因为订阅通道的消费时间点不在订阅通道的数据范围之内。解决方案 创建公网IP,建立SDK的公网连接,或者重新修改消费位点,具体的修改方法详见 修改订阅通道消费...
问题描述 订阅通道无法修改消费位点。问题原因 因为订阅通道还有下游消费。解决方案 登录 DTS控制台 查看消费来源IP,查看是否还有下游SDK在消费数据,如果有,那么需要先停止下游消费后,重新修改消费位点。...适用于 数据传输服务DTS
问题描述 DTS控制台数据迁移页面,迁移任务显示锁定中。问题原因 阿里云账号欠费,同时未及时续费。解决方案 正常续费即可,如何续费DTS请参考如下文档。续费包年包月实例 适用于 数据传输服务 DTS
在 产品 中配置待监控的DTS实例类型,DTS支持的类型如下所示:数据传输服务 DTS(Migration):数据迁移实例。数据传输服务 DTS(Change_tracking):数据订阅实例。数据传输服务 DTS(Synchronization):数据同步实例。说明 您也可以在...
问题原因 一般是由于数据传输服务连接不上源Oracle数据库。解决方案 当遇到此问题时,需要在安装Oracle的服务器上执行 netstat-ano 命令,查看Oracle数据库的端口是否配置了内外网IP监听。如果没有配置,那么需要修改Oracle的监听服务,...
本章节介绍了2024年数据传输服务DTS(Data Transmission Service)产品功能动态及对应的文档。2024年03月 类型 重点内容 相关文档 新增 新增支持PostgreSQL 16版本。同步方案概览 迁移方案概览 新增 新增支持为MySQL间的单向同步实例,一键...
问题描述 SDK重新运行后不能成功订阅数据。问题原因 因为数据订阅通道中保留数据的时间范围为1天,从当前时间减1天,当天时间订阅通道会删除过期数据。因此如果上次SDK退出时最后一条消费数据的时间点对应的数据,不...适用于 数据传输服务DTS
DTS启动订阅SDK时提示“get guid info failed”。问题原因 这是由于您在SDK中设置的订阅通道ID错误导致。解决方案 需要将示例代码中的client.askForGUID替换成您要订阅的订阅通道对应的ID即可。适用于 数据传输服务DTS
本文为您介绍如何使用数据传输提供的列过滤功能。操作步骤 将数据同步项目配置至 选择同步对象 步骤。详情请参见相应类型的 数据同步 项目文档。选择同步对象和映射方式后,在 选择同步范围 区域右侧的 目标端对象 列表中,鼠标悬停至目标...
本章节介绍了2019年之前数据传输服务DTS(Data Transmission Service)产品功能和对应的文档动态。2019年之前 发布时间 发布内容 相关文档 2018年7月17日 支持从DRDS同步至AnalyticDB for MySQL。从 PolarDB-X 同步至云原生数据仓库...
问题描述 为保障数据迁移任务的顺利执行,DTS任务会在预检查阶段检查待迁移的数据库在目标实例中是否存在。如果不存在,DTS会自动创建,如果创建失败则会提示预检查失败。问题原因 DTS在以下情况中自动创建数据库的...适用于 数据传输服务 DTS
问题描述 通过SDK正常下载数据过程中,突然暂停且不能订阅到数据。问题原因 SDK代码中没有调用ackAsConsumed接口汇报消费位点。解决方案 SDK内部设置了8192个Record的缓存空间,如果不调用ackAsConsumed汇报位点,...适用于 数据传输服务DTS
PyODPS是MaxCompute的Python SDK,能够方便地使用Python语言与MaxCompute进行交互和数据处理。通过该SDK,可以更高效地开发MaxCompute任务、进行数据分析和管理MaxCompute资源。本文为您介绍PyODPS的使用和常见方法。PyODPS介绍 PyODPS提供...
当您在MaxCompute中需要对大规模数据进行传输且对传输稳定性和延迟有要求时,您可以使用独享数据传输服务资源组。独享数据传输服务资源组可以提供更高的数据传输速度和更好的网络条件,以减少传输时间并提高效率。本文为您介绍如何购买、...
数据传输服务DTS(Data Transmission Service)旧版数据订阅功能已于2021年12月1日停止售卖,计划于2023年01月14日下线。为避免业务受到影响,建议您及时重新配置新版数据订阅实例完成服务的升级。下线功能 旧版数据订阅 下线时间 2023年01...
使用Python SDK进行日志服务各类操作前,您需要安装Python SDK。本文介绍Python SDK的安装方法。前提条件 已开通日志服务。更多信息,请参见 开通日志服务。已创建并获取AccessKey。更多信息,请参见 访问密钥。阿里云账号AccessKey拥有...
说明 若数据传输控制台自动跳转至数据管理DMS控制台,您可以在右下角的 中单击,返回至旧版数据传输控制台。根据实例类型,在左侧导航栏单击 数据迁移、数据同步 或 数据订阅。在页面顶部选择实例所属地域。找到目标实例,单击实例ID。根据...
本文描述数据传输支持的所有系统权限策略及其对应的权限描述,供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合,可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制(RAM)产品...
说明 若数据传输控制台自动跳转至数据管理DMS控制台,您可以在右下角的 中单击,返回至旧版数据传输控制台。在左侧导航栏,单击 数据迁移。在 迁移任务列表 页面顶部,选择迁移的目标集群所属地域。根据选择的迁移类型,选择执行下述步骤:...
说明 若数据传输控制台自动跳转至数据管理DMS控制台,您可以在右下角的 中单击,返回至旧版数据传输控制台。在左侧导航栏,单击 数据迁移。在 迁移任务列表 页面顶部,选择迁移任务所属的地域。在 数据迁移列表 页面,单击目标实例ID。根据...
说明 若数据传输控制台自动跳转至数据管理DMS控制台,您可以在右下角的 中单击,返回至旧版数据传输控制台。在左侧导航栏,单击 数据迁移。在 迁移任务列表 页面顶部,选择迁移任务所属的地域。在 数据迁移列表 页面,单击目标实例ID。在...
如果数据正常消费,那么数据传输控制台的消费位点就会正常往前走。
API 描述 OpenCdtService 开通CDT的非跨境流量传输服务 OpenCdtCbService 开通CDT的跨境流量传输服务 GetCdtServiceStatus 获取开通CDT的非跨境流量传输服务开通状态 GetCdtCbServiceStatus 获取开通CDT的跨境流量传输服务开通状态
RDS MySQL通过数据传输服务(DTS)可以实现主实例和异地灾备实例之间的实时同步。主实例和灾备实例均搭建主备高可用架构,当主实例所在区域发生突发性自然灾害等状况,主实例(Master)和备实例(Slave)均无法连接时,可将异地灾备实例...
操作步骤 登录 数据传输控制台。在左侧导航栏,根据需要设置标签的实例类型选择 数据迁移、数据同步、数据订阅 或 数据集成。在页面顶部选择实例所属地域。在实例列表页,查看目标实例所绑定的标签信息。相关API API 说明 查询标签 查询...
本文为您介绍使用Python语言编写的MaxCompute UDF的常见问题。类或资源问题 调用MaxCompute UDF运行代码时的常见类或资源问题如下:问题现象一:运行报错描述为 function 'xxx' cannot be resolved。产生原因:原因一:调用MaxCompute UDF...
本文介绍不同名账号存在性检查失败的处理办法。...说明 当前阿里云数据传输产品(DTS)不支持同一实例上多账号配置多迁移任务的模式。解决办法 请登录数据传输产品(DTS)控制台,重新配置任务,确保同一账号发起多个任务。
如果不再需要数据同步,您可以结束...操作步骤 登录 数据传输控制台。在 同步作业列表 页面顶部,选择数据同步实例所属地域。在 数据同步列表 页面,单击目标实例ID。找到目标同步作业,在其 操作 列选择 更多>结束同步。相关文档 释放实例
说明 若数据传输控制台自动跳转至数据管理DMS控制台,您可以在右下角的 中单击,返回至旧版数据传输控制台。在左侧导航栏,单击 数据同步。在 同步作业列表 页面顶部,选择数据同步实例所属地域。在 数据同步列表 页面,单击目标实例ID。...
说明 若数据传输控制台自动跳转至数据管理DMS控制台,您可以在右下角的 中单击,返回至旧版数据传输控制台。在左侧导航栏,单击 数据迁移。在 迁移任务列表 页面顶部,选择迁移任务所属的地域。在 数据迁移列表 页面,单击目标实例ID。在...
操作步骤 登录 数据传输控制台。在左侧导航栏,单击 数据集成。在数据集成任务列表的顶部,选择目标数据集成任务所属地域。找到目标数据集成任务,单击对应的实例ID。在左侧导航栏,单击 历史任务,可查看到该数据集成任务已经调度过的所有...
日志服务支持通过密钥管理服务KMS(Key Management Service)对数据进行加密存储,提供数据静态保护能力。日志服务同时支持基于SSL/TLS的HTTPS加密传输,有效防止数据在云端的潜在安全风险。服务器端加密 日志服务支持如下两种加密类型机制...
操作步骤 登录 数据传输控制台。在左侧导航栏,单击 数据订阅。在 数据订阅列表 页面上方,选择订阅通道所属地域。定位至目标数据订阅通道,在 操作 列选择 更多>重新配置。警告 执行重新配置操作后,将造成下述影响,请谨慎操作:数据订阅...
操作步骤 登录 数据传输控制台。在左侧导航栏,根据需要设置标签的实例类型选择 数据迁移、数据同步、数据订阅 或 数据集成。在页面顶部选择实例所属地域。选择目标实例右侧的操作列的 编辑标签。在弹出的对话框中,单击目标标签右侧的 ...
结束数据迁移项目 结束数据迁移项目后,数据传输仍保留当前项目的源端、目标端、迁移对象、监控和告警等配置信息。您可以根据业务需求,选择清空项目配置后重新配置或者释放当前项目。重要 数据传输支持结束处于 已暂停、失败 和 已完成 ...