RDS SQL Server迁移至云原生数据仓库 AnalyticDB ...
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待迁移的表，分批配置任务。如需进行增量迁移，数据日志：需开启，备份模式设置为Full，且已成功执行过全量物理备份。如为增量迁移任务，DTS要求源数据库的数据日志保存24...
RDS SQL Server同步至DataHub
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致任务失败。数据日志：需开启，备份模式设置...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致任务失败。数据日志：需开启，备份模式设置...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致任务失败。数据日志：需开启，备份模式设置...
PolarDB-X 1.0同步至阿里云消息队列Kafka
源库、目标库出现其他问题后的重试时间 在同步任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
RDS SQL Server同步至云原生数据仓库AnalyticDB ...
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致任务失败。数据日志：需开启，备份模式设置...
搜索（审计）
设置并打开导出的CSV文件 当导出的SQL日志包含数据分隔符时，使用Excel等工具打开CSV文件时可能会出现数据没有分列显示的现象。为了避免该问题，采用冷热混合存储的 搜索 功能在导出CSV文件时，增加了可供选择的 CSV分隔符。本文以Windows...
RDS术语
此外，它还提供了用于部署、监视和升级数据层组件（如应用程序使用的数据库和数据仓库）的工具以生成查询和脚本。实例 一个独立占用物理内存的数据库服务进程，是虚拟化的数据库服务器。可以设置不同的内存大小、磁盘空间和数据库类型。您...
资产安全概述
典型应用场景：数据集成时对敏感数据加密、数仓分层建设时对应用层数据脱敏等。动态脱敏白名单 应用于特定的场景下，需要 暂时对一些用户开放真实数据的查询权限，完成特定的业务目标。典型应用场景：数据研发进行问题排查、特定时期（如双...
资产安全概述
典型应用场景：数据集成时对敏感数据加密、数仓分层建设时对应用层数据脱敏等。动态脱敏白名单 应用于特定的场景下，需要 暂时对一些用户开放真实数据的查询权限，完成特定的业务目标。典型应用场景：数据研发进行问题排查、特定时期（如双...
RDS术语
此外，它还提供了用于部署、监视和升级数据层组件（如应用程序使用的数据库和数据仓库）的工具以生成查询和脚本。实例 一个独立占用物理内存的数据库服务进程，是虚拟化的数据库服务器。可以设置不同的内存大小、磁盘空间和数据库类型。您...
Db2 for LUW迁移至阿里云消息队列Kafka版
源库、目标库出现其他问题后的重试时间 在迁移任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
RDS SQL Server同步至RDS MySQL
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致任务失败。数据日志：需开启，备份模式设置...
单元测试报告
字段枚举值检查 字段的枚举值是否都在代码考虑范围内，是否有可能会出现新值。主键检查 物理主键或逻辑主键是否成立。数据完整性检查 代码中引用的数据能否支撑实际需求。字段间逻辑检查 字段间的业务逻辑关系是否在数据上成立，例如余额=...
RDS术语
此外，它还提供了用于部署、监视和升级数据层组件（如应用程序使用的数据库和数据仓库）的工具以生成查询和脚本。实例 一个独立占用物理内存的数据库服务进程，是虚拟化的数据库服务器。可以设置不同的内存大小、磁盘空间和数据库类型。您...
自建SQL Server同步至PolarDB MySQL版
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致任务失败。数据日志：需开启，备份模式设置...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致任务失败。数据日志：需开启，备份模式设置...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致任务失败。数据日志：需开启，备份模式设置...
PolarDB-X 2.0同步至阿里云消息队列Kafka
源库、目标库出现其他问题后的重试时间 在同步任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
概述
这就导致了不同系统之间会进行数据迁移，同一份数据可能在不同源之间冗余，进而出现数据不一致的问题，以及特征难管理、模型难升级等困境。除此之外，数据工程师、算法工程师和开发工程师的人力成本也是当前数据驱动的智能决策应用难以大...
设计阶段
完成需求阶段的工作后，数据产品经理会产出最终版本的产品需求文档，以供设计人员进行设计工作。设计工作包含数据探查和系分设计两部分：数据探查旨在了解来源数据的数据形态，例如数据质量、数据分布等。结合业务场景，帮助分析和判断需求...
Db2 for LUW同步至自建Kafka集群
待同步的表需具备主键或唯一约束，且字段具有唯一性，否则可能会导致目标数据库中出现重复数据。如同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整...
行业趋势与背景
PolarDB-X 2.0 2018年开始，我们逐渐触碰到了计算层的能力边界，比如无法提供RR隔离级别的事务能力、计算下推受限于SQL表达能力、数据查询的传输效率低下、多副本的线性一致性不可控等，这些问题像一个无法穿透的屏障，但我们能看到屏障的...
慢日志分析
常见问题 Q：对于 RDS MySQL 和 PolarDB MySQL版 数据库实例，为什么会出现慢日志记录的SQL执行完成时间与SQL语句的实际执行时间不同？A：通常情况下是执行SQL语句修改了时区。慢日志记录的SQL执行时间的时区，存在会话级别、数据库级别和...
图标散点层（v2.x版本）
图标散点层是基础平面地图的子组件，能够以图标散点的形式表现地理位置上的点数据信息。图标散点层支持独立的样式、数据和交互配置，包括图标散点层的图标配置、系列配置、弹框样式以及交互配置等。本文介绍图标散点层各配置项的含义。参见...
RDS术语
此外，它还提供了用于部署、监视和升级数据层组件（如应用程序使用的数据库和数据仓库）的工具以生成查询和脚本。实例 一个独立占用物理内存的数据库服务进程，是虚拟化的数据库服务器。可以设置不同的内存大小、磁盘空间和数据库类型。您...
RDS术语
此外，它还提供了用于部署、监视和升级数据层组件（如应用程序使用的数据库和数据仓库）的工具以生成查询和脚本。实例 一个独立占用物理内存的数据库服务进程，是虚拟化的数据库服务器。可以设置不同的内存大小、磁盘空间和数据库类型。您...
技术面临的挑战与革新
在部分存储节点出现热点数据、资源紧张时，PolarDB会自动迁移部分数据到其他节点。采用独有的Parallel-Raft技术，每份数据会有三个副本，每次IO都保证至少有两个副本落盘，保障了RPO。由于是共享存储架构，节点间状态接近于完全同步，当...
慢日志分析
常见问题 Q：为什么会出现慢日志记录的SQL执行完成时间与SQL语句的实际执行时间不同？A：通常情况下是执行SQL语句修改了时区。慢日志记录的SQL执行时间的时区，存在会话级别、数据库级别和系统级别。慢日志时间设置逻辑为：当数据库存在...
慢SQL
慢日志问题极大地影响数据库的稳定性，当数据库出现负载高、性能抖动等问题时，数据库管理员或开发首先会查看是否有慢日志在执行。数据库自治服务DAS（Database Autonomy Service）支持慢日志分析功能，会统计并分析数据库中执行时间超过...
慢日志
常见问题 Q：为什么会出现慢日志记录的SQL执行完成时间与SQL语句的实际执行时间不同？A：通常情况下是执行SQL语句修改了时区。慢日志记录的SQL执行时间的时区，存在会话级别、数据库级别和系统级别。慢日志时间设置逻辑为：当数据库存在...
矢量散点层（v2.x版本）
矢量散点层是基础平面地图的子组件，支持独立的样式、数据和交互配置，包括矢量散点层的散点配置、系列配置、弹框样式以及交互配置等，能够以矢量散点的形式表现地理位置上的点数据信息。本文介绍矢量散点层各配置项的含义。单击 子组件...
查看集群日报与分析
在具体问题中会告知您出现问题的RegionServer、表以及分区等信息，您可以进行相应的优化。集群总览分析 在集群总览信息中，您可以获取以下图表信息：集群健康度评分趋势图 集群分区均衡度趋势图 集群分区数量分布饼图 集群请求数趋势图 总...
慢日志
慢日志问题极大地影响数据库的稳定性，当数据库出现负载高、性能抖动等问题时，数据库管理员或开发首先会查看是否有慢日志在执行。数据库自治服务DAS（Database Autonomy Service）支持慢日志分析功能，会统计并分析数据库中执行时间超过...
慢日志
常见问题 Q：为什么会出现慢日志记录的SQL执行完成时间与SQL语句的实际执行时间不同？A：通常情况下是执行SQL语句修改了时区。慢日志记录的SQL执行时间的时区，存在会话级别、数据库级别和系统级别。慢日志时间设置逻辑为：当数据库存在...
MySQL一键实时同步至MaxCompute
例如，CPU、内存、网络等互相影响，可能会导致离线任务变慢或实时任务延迟等问题，甚至在资源不足的极端情况下，可能会出现任务被OOM KILLER杀掉等问题。执行同步任务 进入 数据集成>同步任务 界面，找到已创建的同步方案。单击操作列的 ...
HBase数据同步与迁移
如果您想要将自建HBase或阿里云HBase中的数据迁移或同步至Lindorm 宽表引擎，可以通过LTS服务完成存量数据迁移和实时...常见问题 Q：什么场景会导致“不消费数据”？A：没有终止任务的前提下直接释放LTS集群；同步任务暂停；任务异常阻塞。
企业版和标准版功能对比
自治服务开启后，DAS会在数据库出现异常时，自动进行根因分析，给出优化或止损建议，并自动进行优化或止损操作（需经您授权后才会开启优化操作）。支持 支持 会话管理 PolarDB MySQL版 的一键诊断融合了DAS部分功能，您可以通过其中的会话...
混合散点层（v2.x版本）
混合散点层是基础平面地图的子组件，能够以散点的形式表现地理位置上的点数据信息。混合散点层支持独立的样式、数据和交互配置，包括混合散点层的散点样式、标注样式、弹框样式以及交互配置等。本文介绍混合散点层各配置项的含义。重要 ...
配置备份计划
连接方式：选择连接方式，当前支持：非加密连接 SSL安全连接：SSL（Secure Sockets Layer）能在传输层对网络连接进行加密，提升通信数据的安全性和完整性，但会增加网络连接响应时间。选择 SSL安全连接 前，请先在RDS实例中开启SSL。具体...
- 产品推荐
- 这些文档可能帮助您