MaxCompute JSON类型使用指南
MaxCompute当前支持JSON数据类型，提高了表中带有JSON类型数据的计算和分析的性能，本文为您介绍JSON类型的使用方法。JSON类型简介 背景信息 半结构化数据介于结构和非结构化数据之间，数据中有一定的Schema，但是Schema灵活，没有强约束，...
Java UDAF
UDAF无法通过反射分析获取函数签名，只能通过@Resolve 注解方式获取函数签名，例如@Resolve("smallint->varchar(10)")。更多@Resolve 注解信息，请参见@Resolve注解。自定义Java类：必选。UDAF代码的组织单位，定义了实现业务需求的变量及...
混访混挂迁移示例
当经典网络地址到期后，系统会自动删除经典网络地址，您将无法通过经典网络地址访问数据库。OSS本身提供经典网络和VPC两个访问域名，不需要切换。请参考 访问域名和数据中心 获取OSS的专有网络访问域名。在专有网络中创建ECS并完成配置。如...
创建PolarDB MySQL版数据订阅任务
通过数据订阅功能，您可以实时订阅增量数据，轻松帮助业务实现轻量级缓存更新、业务异步解耦、含ETL逻辑的数据实时同步等场景。本文介绍如何创建 PolarDB MySQL版 数据订阅任务。前提条件 已创建 PolarDB MySQL版 集群，详情请参见 购买...
创建RDS MySQL数据订阅任务
通过数据订阅功能，您可以实时订阅源库的增量数据，轻松帮助业务实现轻量级缓存更新、业务异步解耦、含ETL逻辑的数据实时同步等场景。本文将介绍如何创建 RDS MySQL 数据订阅任务。前提条件 已创建源 RDS MySQL 实例，创建方式，请参见 ...
创建DMS逻辑库的数据订阅任务
配置 说明 需要订阅的数据类型 需要订阅的数据类型 默认已勾选，且不支持修改。数据更新 订阅已选择对象的增量数据更新，包含数据的INSERT、DELETE和UPDATE操作。结构更新 订阅整个实例所有对象的结构创建、删除及修改，您需要使用数据订阅...
使用DTS创建数据订阅
配置 说明 需要订阅的数据类型 需要订阅的数据类型 默认已勾选，且不支持修改。数据更新 订阅已选择对象的增量数据更新，包含数据的INSERT、DELETE和UPDATE操作。结构更新 订阅整个实例所有对象的结构创建、删除及修改，您需要使用数据订阅...
创建RDS PostgreSQL数据订阅任务
配置 说明 需要订阅的数据类型 需要订阅的数据类型 默认已勾选，且不支持修改。数据更新 订阅已选择对象的增量数据更新，包含数据的INSERT、DELETE和UPDATE操作。结构更新 订阅整个实例所有对象的结构创建、删除及修改，您需要使用数据订阅...
经典网络切换为专有网络
云数据库MongoDB支持经典网络和专有网络两种网络类型，当您需要更安全的网络环境，但当前实例的网络类型为经典网络时，您可以切换实例的网络类型为专有网络。本文介绍将经典网络切换为专有网络的方法。前提条件 数据库版本为MongoDB 4.2及...
创建PolarDB-X 2.0数据订阅任务
配置 说明 需要订阅的数据类型 需要订阅的数据类型 默认已勾选，且不支持修改。数据更新 订阅已选择对象的增量数据更新，包含数据的INSERT、DELETE和UPDATE操作。结构更新 订阅整个实例所有对象的结构创建、删除及修改，您需要使用数据订阅...
Hologres外部表
在MaxCompute创建Hologres外部表时，Hologres中有的JSON、JSONB、MONEY等数据类型，目前在MaxCompute没有对应的数据类型，暂时不支持。Hologres外部表不支持cluster属性。注意事项 Hologres外部表使用过程中需要注意：对于Hologres的父、子...
创建PolarDB PostgreSQL版（兼容Oracle）数据订阅任务
配置 说明 需要订阅的数据类型 需要订阅的数据类型 默认已勾选，且不支持修改。仅支持 数据更新，即订阅已选择对象的增量数据更新，包含数据的INSERT、DELETE和UPDATE操作。源库对象 从 源库对象 列表中，选择待订阅对象，单击图标，将其...
配置数据订阅任务
数据订阅功能可以帮助您获取数据库的实时增量数据，您可以根据自身业务需求自由消费增量数据，并写入任意目标端，适配各类业务场景，例如缓存更新、业务异步解耦、异构数据源数据实时同步及含复杂ETL的多种业务场景。本文将介绍在DTS专属...
创建PolarDB-X 1.0数据订阅任务
配置 说明 需要订阅的数据类型 需要订阅的数据类型 默认已勾选，且不支持修改。数据更新 订阅已选择对象的增量数据更新，包含数据的INSERT、DELETE和UPDATE操作。结构更新 订阅整个实例所有对象的结构创建、删除及修改，您需要使用数据订阅...
创建PolarDB PostgreSQL版数据订阅任务
配置 说明 需要订阅的数据类型 需要订阅的数据类型 默认已勾选，且不支持修改。仅支持 数据更新，即订阅已选择对象的增量数据更新，包含数据的INSERT、DELETE和UPDATE操作。源库对象 从 源库对象 列表中，选择待订阅对象，单击图标，将其...
常见问题
使用SQL查询，在获取数据时通过迭代器每次仅获取一条数据，并流式返回查询结果。对于匹配数据，服务端会自动分批拉取。客户端在处理数据时，为了防止客户端内存溢出，可以在迭代器中获取到N条数据后，增加一个数据处理逻辑，再继续在迭代器...
项目管理（新版）
数据类型 MaxCompute数据类型包含 1.0数据类型、2.0数据类型 和 Hive兼容类型。您需要根据业务情况选择合适的数据类型版本，三种数据类型版本的区别请参见 数据类型版本说明。是否加密 指定创建的MaxCompute项目是否需要开启数据加密功能。...
使用OSS Foreign Table进行数据湖分析
ORC数据类型与 AnalyticDB PostgreSQL版 数据类型的映射关系，请参见 ORC文件数据类型对照表。支持访问PARQUET格式的二进制文件。PARQUET数据类型与 AnalyticDB PostgreSQL版 数据类型的映射关系，请参见 Parquet文件数据类型对照表。支持...
发现并处理大Key和热Key
TairHash是一种可为field设置过期时间和版本的HASH数据类型，它不但和Redis Hash一样支持丰富的数据接口和高处理性能，还改变了Hash只能为Key设置过期时间的限制，可以为field设置过期时间和版本。这极大地提高了HASH数据类型的灵活性，...
发现并处理Redis的大Key和热Key
TairHash是一种可为field设置过期时间和版本的Hash数据类型，它不但和Redis Hash一样支持丰富的数据接口和高处理性能，还改变了Hash只能为Key设置过期时间的限制，可以为field设置过期时间和版本。这极大地提高了HASH数据类型的灵活性，...
从自建TiDB增量迁移至RDS MySQL
警告 此场景属于异构数据库间的数据迁移，DTS在执行结构迁移时数据类型无法完全对应，请谨慎评估数据类型的映射关系对业务的影响，详情请参见 异构数据库间的数据类型映射关系。全量数据迁移 DTS将待迁移对象的存量数据全部迁移到目标库中...
PolarDB MySQL版迁移至Elasticsearch
由于 PolarDB MySQL版 和Elasticsearch实例支持的数据类型不同，数据类型无法一一对应。所以DTS在进行结构初始化时，会根据目标库支持的数据类型进行类型映射，详情请参见 结构初始化涉及的数据类型映射关系。其他注意事项 DTS会在源库定时...
创建Oracle数据订阅任务
通过数据订阅功能，您可以实时订阅源库的增量数据，轻松帮助业务实现轻量级缓存更新、业务异步解耦、含ETL逻辑的数据实时同步等场景。本文为您介绍如何创建Oracle数据订阅任务。前提条件 自建Oracle数据库的版本为9i、10g、11g版本，暂不...
自建Oracle迁移至RDS MySQL
警告 此场景属于异构数据库间的数据迁移，DTS在执行结构迁移时数据类型无法完全对应，请谨慎评估数据类型的映射关系对业务的影响，详情请参见 异构数据库间的数据类型映射关系。全量数据迁移 DTS会将自建Oracle数据库迁移对象的存量数据，...
自建Oracle迁移至PolarDB MySQL版
警告 此场景属于异构数据库间的数据迁移，DTS在执行结构迁移时数据类型无法完全对应，请谨慎评估数据类型的映射关系对业务的影响，详情请参见 异构数据库间的数据类型映射关系。全量数据迁移 DTS会将自建Oracle数据库迁移对象的存量数据，...
自建Oracle迁移至云原生数据仓库 AnalyticDB ...
警告 此场景属于异构数据库间的数据迁移，DTS在执行结构迁移时数据类型无法完全对应，请谨慎评估数据类型的映射关系对业务的影响，详情请参见 异构数据库间的数据类型映射关系。不兼容触发器。建议您删除源库的触发器，以避免因触发器而...
数据源配置常见问题
如果您的API使用了DataV暂不支持的数据源或接口，例如调用函数计算等，此类API也可以通过阿里云API网关中的数据源来获取数据。数据库数据源配置时报timeout，该如何处理？确认您是否已经完成 数据库白名单的配置。如果您的数据源为阿里云...
数据源配置常见问题
如果您的API使用了DataV暂不支持的数据源或接口，例如调用函数计算等，此类API也可以通过阿里云API网关中的数据源来获取数据。数据库数据源配置时报timeout，该如何处理？确认您是否已经完成 数据库白名单的配置。如果您的数据源为阿里云...
解决无法连接实例问题
数据库类型 错误信息 报错原因 解决办法 MySQL或MariaDB ERROR 2003(HY000):Can't connect to MySQL server on 'XXX'(10038或10060或110)无法连接到数据库：XXX 网络互通问题。确保ECS实例和RDS实例处于同一个地域。确保ECS实例和RDS实例的...
解决无法连接实例问题
数据库类型 错误信息 报错原因 解决办法 MySQL或MariaDB ERROR 2003(HY000):Can't connect to MySQL server on 'XXX'(10038或10060或110)无法连接到数据库：XXX 网络互通问题。确保ECS实例和RDS实例处于同一个地域。确保ECS实例和RDS实例的...
解决无法连接实例问题
数据库类型 错误信息 报错原因 解决办法 MySQL或MariaDB ERROR 2003(HY000):Can't connect to MySQL server on 'XXX'(10038或10060或110)无法连接到数据库：XXX 网络互通问题。确保ECS实例和RDS实例处于同一个地域。确保ECS实例和RDS实例的...
解决无法连接实例问题
数据库类型 错误信息 报错原因 解决办法 MySQL或MariaDB ERROR 2003(HY000):Can't connect to MySQL server on 'XXX'(10038或10060或110)无法连接到数据库：XXX 网络互通问题。确保ECS实例和RDS实例处于同一个地域。确保ECS实例和RDS实例的...
解决无法连接实例问题
数据库类型 错误信息 报错原因 解决办法 MySQL或MariaDB ERROR 2003(HY000):Can't connect to MySQL server on 'XXX'(10038或10060或110)无法连接到数据库：XXX 网络互通问题。确保ECS实例和RDS实例处于同一个地域。确保ECS实例和RDS实例的...
MaxCompute数据源
类型分类 数据集成配置类型 数据库数据类型 整数类 LONG BIGINT、INT、TINYINT和SMALLINT 布尔类 BOOLEAN BOOLEAN 日期时间类 DATE DATETIME、TIMESTAMP和DATE 浮点类 DOUBLE FLOAT、DOUBLE和DECIMAL 二进制类 BYTES BINARY 复杂类 STRING ...
Oracle数据源
查询目标表的所有信息，获取数据类型。数据同步任务开发：Oracle同步流程引导 Oracle数据同步任务的配置入口和通用配置流程指导可参见下文的配置指导，详细的配置参数解释可在配置界面查看对应参数的文案提示。创建数据源 在进行数据同步...
开发运维建议
PostgreSQL支持的数据类型如下：精确的数字类型、浮点、货币、字符串、字符、字节流、日期、时间、布尔、枚举、几何、网络地址、比特流、文本、UUID、XML、JSON、数组、复合类型、范围类型、对象、行号、大对象、ltree树结构类型、cube多维...
RDS MySQL迁移至Elasticsearch
支持增量迁移的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据类型映射关系 由于MySQL和Elasticsearch实例支持的数据类型不同，数据类型无法一一对应。所以DTS在进行结构初始化时，会根据目标库支持的数据类型进行类型映射...
配置任务常见错误码及排查方法
本文介绍了用户在使用控制台或OpenAPI配置任务时系统返回的错误码、出现报错的场景及解决方法。用户配置使用类错误码 错误码 报错...DTS.Msg.MaxRetryTime.Invalid 修改 源库、目标库无法连接后的重试时间 时。原因：修改的值不在取值范围内...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
警告 由于此场景属于异构数据库间的数据同步，数据类型无法一一对应，可能会导致任务失败或数据丢失，请谨慎评估数据类型的映射关系对业务的影响，详情请参见 结构初始化涉及的数据类型映射关系。不支持结构初始化的结构对象有：assemblies...
使用公网流量分析
当您使用CLB四层监听时，可通过直接获取或开启Proxy Protocol功能获取客户端真实IP，可参考 通过CLB四层监听获取客户端真实IP。公网流量分析能否采集到被安全组拦截的流量？入云方向：可以采集到。出云方向：采集不到。公网流量分析中 为...
- 产品推荐
- 这些文档可能帮助您