管理问题数据
支持保留问题数据的规则列表与问题数据口径 目前支持保留问题数据的监控规则，及各规则问题数据的定义，详情请参见：附录：支持保留问题数据的规则列表与问题数据口径。注意事项 目前仅MaxCompute表支持配置保留问题数据功能。目前仅部分...
未来规划
数据处理与分析：海量数据分析在线化（实时在线交互式分析）。如何对海量数据进行在线分析和计算，支持实时在线交互式分析，需要做并行处理（DSP 模型、MPP 模型等等），对并行调度计算进行优化。系统能力提升：智能化+安全（使用方便可靠...
ECS实例通过API绑定公网IP时报错“The IP is already ...
问题描述 本文介绍如何处理ECS实例通过API进行公网IP绑定报错问题。报错提示为“The IP is already in use”。问题原因 可能由于实例重复绑定公网IP导致。核实相应ECS实例是否已经绑定了公网IP，如果有，请根据公网IP地址直接解除绑定即可...
常见问题
非插件报错原因及解决方案 如何处理编码格式设置/乱码问题导致的脏数据报错？任务存在SSRF攻击Task have SSRF attacks如何处理？离线同步任务执行偶尔成功偶尔失败。离线同步源表有加列（修改）如何处理？如何处理表列名有关键字导致同步...
常见报错
报错概览 配置备份计划时常见报错 源库测试连接失败 备份恢复预检查时常见报错 源库连接性检查失败 数据库权限检查失败 OSS检查失败 源库binlog开启检查失败 源库binlog模式检查失败 源库binlog_row_image是否为FULL检查失败 源库server_id...
数据库访问失败的常见原因
网络问题排查 通过VPC访问数据库 请确保创建的数据库实例与访问数据库的函数在同一地域。如果报错 AccessDenied，错误码为403，请确保提供对ENI的操作授权。如果报错 InvalidArgument，错误码为400，请确保 VPC、vSwitch 和 安全组 配置...
版本发布记录
深度集成的生态 接入融合分析和数据回流能力 目前支持如下数据源的接入融合分析和数据回流能力，包括对象存储OSS上7种以上结构化、半结构化、以及多种压缩格式的数据文件，表格存储，AnalyticDB，云数据库版或自建数据库（MySQL、...
连接失败常见报错
为什么副本集实例写入数据报错：NotMaster、NotWritablePrimary或Time out after 30000ms while waiting for a server that matches writableServerSelector？reason:TopologyDescription { type:'ReplicaSetNoPrimary',当前连接的副本集...
离线同步常见问题
非插件报错原因及解决方案 如何处理编码格式设置/乱码问题导致的脏数据报错？任务存在SSRF攻击Task have SSRF attacts如何处理？离线同步任务执行偶尔成功偶尔失败 离线同步源表有加列（修改）如何处理？如何处理表列名有关键字导致同步...
常见问题
HTTPDNS:添加域名时提示超过了最大额度限制 HTTPDNS是否支持解析IPV6域名 域名劫持及数据劫持解决方案 如何处理“异步查询获取IP的接口时,1S之后再发起查询而前一次查询结果还没有返回”的问题？HTTPDNS代理模式下设置host为代理IP，...
通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的...
常见问题
如何确认ECS和Redis的网络环境是否相同 创建Redis实例时找不到已有的交换机 连接Redis报错“WRONGPASS invalid username-password pair”使用短连接访问Redis出现“Cannot assign requested address”错误 为什么没有加入IP白名单的客户端...
功能更新动态（2022年之前）
规避了审批者误操作，导致的数据泄露与安全问题。2020年9月17日 华东2（上海）、华南1（深圳）和华北2（北京）创建项目 编辑项目 Dev-Prod开发模式中，新增同时为Dev和Prod项目添加成员的功能。管理项目空间的权限和计算源 离线计算任务 ...
登录数据库
本文主要介绍在阿里云数据管理DMS控制台登录数据库时，常见的问题及解决方案。如何正确的填写登录DMS的数据库账号与密码？数据库账号指用户账号，密码指用户账号的密码。如下以在DMS登录RDS MySQL数据库举例。获取数据库账号与密码。在 RDS...
资源组操作及网络连通
数据同步网络连通问题 在做离线同步时，我们需要先了解哪些DataWorks及其网络能力？同步ECS自建的数据库的数据时，如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个地域（Region）下，进行数据同步时如何保障数据库与...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
常见报错
报错概览 数据传输服务DTS（Data Transmission Service）常见报错的类型有如下 四 种：配置任务时常见的报错 任务运行中常见的报错 其他常见的报错 关于表结构的报错 配置任务时常见的报错 DTS.Msg.LXCreateOrderError 报错场景：购买DTS...
公网PostgreSQL数据库一键上云
背景 RDS PostgreSQL基于用户VPC的网络构建，一键上云功能默认支持通过内网将其他数据库迁移到RDS PostgreSQL，如需将公网上的PostgreSQL数据库迁移上云，还需配置公网NAT网关并绑定弹性公网IP（EIP）。本文介绍为RDS PostgreSQL实例配置...
文档更新动态（2022年之前）
规避了审批者误操作，导致的数据泄露与安全问题。通用功能 创建项目 2020-09-17 编辑项目 功能拓展 Dev-Prod开发模式中，新增同时为Dev和Prod项目添加成员的功能。通用功能 管理项目空间的权限和计算源 2020-09-17 离线计算任务 功能拓展 ...
实时同步常见问题
实时同步Oracle、PolarDB、MySQL常见问题 实时同步Oracle、PolarDB、MySQL任务重复报错 报错信息与解决方案 报错信息与解决方案 实时同步Kafka数据报错：Startup mode for the consumer set to timestampOffset,but no begin timestamp was...
Tunnel命令常见问题
本文为您介绍使用Tunnel命令过程中的常见问题。问题类别 常见问题 Tunnel Upload Tunnel Upload是否支持通配符或正则表达式？Tunnel Upload对文件大小是否有限制？记录大小是否有限制？是否要使用压缩？同一个表或分区是否可以并行上传数据...
常见问题
如何处理导入数据报错：too many parts？为什么DataX导入速度慢？为什么Hive导入后其数据行数跟ClickHouse对不上？为什么Kafka导入后其数据行数跟ClickHouse对不上？如何使用Spark、Flink导入数据？如何从现有ClickHouse导入数据到云数据库...
任务运行失败
MySQL节点报错：暂不支持MySQL节点驱动 问题描述添加MySQL数据源时，选择了非连接串模式创建的数据源，导致运行任务时失败，报错信息为 sql execute failed!暂不支持的jdbc驱动。问题原因出现上述报错通常都是选择了非连接串模式创建的...
导入与导出
数据同步过程中，可以修改源表中的字段类型，目前仅支持整型数据类型之间、浮点数据类型之间的列类型更改，并且只能将取值范围小的数据类型更改为取值范围大的数据类型，或者将单精度数据类型更改为双精度数据类型。整型数据类型：支持...
功能特性
数据迁移 数据迁移功能帮助您实现同构或异构数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景 功能集 功能 功能描述 参考文档 同构迁移 逻辑迁移 支持同构数据库间的数据迁移。自建MySQL...
云数据库MongoDB版（单节点架构）全量迁移至云数据库...
云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 有公网IP的自建数据库 有公网IP的自建数据库 本文以 云数据库MongoDB版（单节点架构）...
云数据库MongoDB版（单节点架构）全量迁移至云数据库...
云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 有公网IP的自建数据库 有公网IP的自建数据库 本文以 云数据库MongoDB版（单节点架构）...
2023年
数据膨胀、倾斜与索引统计 SQL优化器 AnalyticDB PostgreSQL版 将join_collapse_limit参数默认值调整至10，从而优化多表JOIN时内存占用过高且执行时间过长的问题。无 缺陷修复 修复智能诊断功能统计表大小时可能会出现数字溢出的问题，现已...
Presto FAQ
如何处理建库报错：Generate vpc reverse access mapping ip&mapping port failed,please check your vpc_id(vpc-xxxx)and instance_id(rm-xxx)!如何查看表的分区数目？OSS/Hive相关问题 如何通过SQL查询一个OSS表里面的文件数？如何查询...
云数据库MongoDB版（副本集架构）迁移至云数据库...
支持的源和目标数据库 源数据库（副本集架构）目标数据库（副本集架构、分片集群架构）云数据库MongoDB版 云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能...
云数据库MongoDB版（副本集架构）迁移至云数据库...
支持的源和目标数据库 源数据库（副本集架构）目标数据库（副本集架构、分片集群架构）云数据库MongoDB版 云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能...
迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...
目标端表对象存在记录时处理策略 处理策略包括 忽略 和 停止迁移：选择 忽略：当目标端表对象存在数据时，如果原数据与写入数据冲突，数据传输采用将冲突数据记录日志，保留原数据不变的策略进行数据写入。重要 选择 忽略，全量校验将使用 ...
RDS MySQL迁移至Tablestore
有公网IP的自建数据库 ECS上的自建数据库 通过数据库网关接入的自建数据库 通过云企业网CEN接入的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 说明 本文以RDS MySQL实例为源数据库介绍配置流程，其他数据源配置流程与本案例...
数据源配置常见问题
本文介绍在DataV中连接数据源时，遇到的常见问题及相应的解决方法。数据库连接不成功，如何解决？请根据数据库的网络类型和所在地域，将相应的DataV服务器IP地址加入到您的数据库白名单或ECS的安全组设置中，或者使用代理工具来连接您的...
数据源配置常见问题
本文介绍在DataV中连接数据源时，遇到的常见问题及相应的解决方法。数据库连接不成功，如何解决？请根据数据库的网络类型和所在地域，将相应的DataV服务器IP地址加入到您的数据库白名单或ECS的安全组设置中，或者使用代理工具来连接您的...
从自建MySQL迁移至MyBase MySQL
目标已存在表的处理模式 预检查并报错拦截：检查目标数据库中是否有同名的表。如果目标数据库中没有同名的表，则通过该检查项目；如果目标数据库中有同名的表，则在预检查阶段提示错误，数据迁移任务不会被启动。说明 如果目标库中同名的表...
PolarDB PostgreSQL版间的迁移
警告 选择为 忽略报错并继续执行，可能导致数据不一致，给业务带来风险，例如：结构一致的情况下，如在目标库遇到与源库主键或唯一键的值相同的记录：全量期间，DTS会保留目标集群中的该条记录，即源库中的该条记录不会同步至目标数据库中...
云数据库MongoDB版（副本集架构）同步至云数据库...
源数据库 目标数据库 云数据库MongoDB版（副本集架构）云数据库MongoDB版（副本集架构、分片集群架构）ECS上的自建MongoDB数据库（副本集架构）ECS上的自建MongoDB数据库（副本集架构、分片集群架构）通过专线、VPN网关或智能网关接入的自...
自建MySQL迁移至PolarDB MySQL版
本文以有公网IP的自建数据库为例介绍配置流程，其他类型的源数据库配置流程与本案例类似。RDS MySQL 实例。以下类型的自建数据库：有公网IP的自建数据库。ECS上的自建数据库。通过专线、VPN网关或智能网关接入的自建数据库。通过数据库网关...
什么是弹性公网 IP
弹性公网 IP EIP（Elastic IP Address）是可以独立购买和持有的公网IP地址资源。目前，EIP 支持绑定到专有网络类型的 云服务器 ECS（Elastic Compute Service）实例、辅助弹性网卡、负载均衡 SLB（Server Load Balancer）实例、NAT 网关...
- 产品推荐
- 这些文档可能帮助您