集群管理常见问题
加密数据盘后，数据盘上的动态数据传输以及静态数据都会被加密。如果您的业务存在安全合规要求，则可以使用该功能。数据盘加密后在ECS的OS层面对应用是透明的，因此不会影响作业运行。如何清理创建失败的集群？集群创建失败，通常是由于RDS...
文档修订记录
任务调度属性配置概述 2023年2月更新记录 时间 特性 类别 描述 产品文档 2023.2.28 新增功能 数据治理中心 DataWorks支持您根据业务需要，将 治理工作台>治理项问题 页面待解决的治理项问题以通知的形式，通过系统提示、邮件、钉钉群消息等...
资源组操作及网络连通
数据同步网络连通问题 在做离线同步时，我们需要先了解哪些DataWorks及其网络能力？同步ECS自建的数据库的数据时，如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个地域（Region）下，进行数据同步时如何保障数据库与...
创建集群
打开该功能，数据盘上的动态数据传输以及静态数据都会被加密，详情请参见 开启数据盘加密。确认订单（可选）保存为集群模板：如果身份认证选择的 密钥对，则可以单击 保存为集群模板，保存当前集群的配置信息为集群模板。在 保存为集群模板...
时空引擎版本发布记录
修复 ST_BuildPyramid 函数，解决超大数据构建矢量金字塔时的内存占用问题。4.8 新特性 增强 ST_Union 函数，支持按内存使用量分批次执行，避免大数据量造成OOM。新增 ST_SetValue 函数，支持指定像素位置设置像素值。栅格数据支持对HDFS...
运行失败
解析表数据时出现“-nan”错误 报错信息 解决方法 该问题一般是原始doc或query表输入的格式有问题，可能存在很大的值或者接近0的值。例如某一行vector下的值为 1.23~4.56~7.89~nan~4.21 或 1.1~2.2~127197893781729178311928739179222121....
蓝图编辑器常见案例教学
针对蓝图编辑器常见的问题，本文通过理论介绍及实操演示提出问题的解决方法。视频链接 DataV小课堂直播视频：蓝图编辑器常见案例教学直播视频使用教程。案例概览 请求数据接口时动态传递参数 本案例是在请求数据接口时传递动态参数，实现...
混合存储型（已停售）
在正常业务请求中，活跃的商品数据会保留在内存，不活跃的商品数据会逐渐交换到磁盘上，从而解决内存不够的问题。在线教育 在线教育类的场景有大量的课程、题库以及师生交流信息等数据，通常只有热门课程和最新题库会被频繁访问。使用混合...
配置资源组与网络连通
在数据同步任务配置前，您需要确保用于执行同步任务的独享数据集成资源组与您将要同步的数据来源端与目的端数据库的网络连通性，您可以根据数据库所在网络环境，选择合适的网络解决方案来实现网络连通。本文为您介绍数据库在不同网络环境中...
通配符列
为解决这一问题，Lindorm推出通配符列，帮助您实现多数据类型动态列的写入。通配符列名目前支持的通配符为星号（*）和英文问号?系统会将通配符匹配到的列中的数据转换为指定数据类型。详细规则如下：英文问号?可以匹配任何单个字符。星号...
常见问题
如何确认ECS和Redis的网络环境是否相同 创建Redis实例时找不到已有的交换机 连接Redis报错“WRONGPASS invalid username-password pair”使用短连接访问Redis出现“Cannot assign requested address”错误 为什么没有加入IP白名单的客户端...
新功能发布记录
无 2023年9月 湖仓版 类别 名称 说明 相关文档 新增 Spark应用性能诊断 湖仓版（3.0）推出Spark应用性能诊断功能，帮助您快速定位和分析性能瓶颈问题，提高问题解决效率。Spark应用性能诊断 Spark应用访问公网配置说明 湖仓版（3.0）支持...
2019年
本章节介绍了2019年数据传输服务DTS（Data Transmission Service）产品功能和对应的文档动态。更多新功能介绍 详情请参见 数据传输服务产品动态。2019年 发布时间 发布内容 相关文档 2019年12月 支持迁移PostgreSQL 11版本数据库。从自建...
离线同步常见问题
数据同步原则：来源端数据源的数据要能写入目的端数据源（来源端和目的端类型需要匹配，字段定义的大小需要匹配），即源端数据类型需要与写端数据类型匹配，源端是VARCHAR类型的数据不可写到INT类型的目标列中；目标端的数据类型定义的大小...
如何备份RDS只读实例
常见问题 Q：通过内网IP配置的备份计划出现连接源实例失败的情况，可能原因及解决方法是什么？A：可能原因：本文方法二中的IP是一个即时的内网IP，当只读实例发生克隆、迁移可用区、切换VPC、切换交换机时，即时内网IP可能会发生变化，从而...
多主集群（库表）商业化
不同数据库可以在不同计算节点秒级动态调度，极大提升整体的并发读写能力。多主互备（省去备节点）如果某个主节点发生故障，可秒级切换到其他低流量主节点，同时由于没有额外的用于热备的闲置资源，成本降低一半。全局只读节点 可以在全局...
RDS MySQL只读实例逻辑备份
常见问题 Q：通过内网IP配置的备份计划出现连接源实例失败的情况，可能原因及解决方法是什么？A：可能原因：本文方法二中的IP是一个即时的内网IP，当只读实例发生克隆、迁移可用区、切换VPC、切换交换机时，即时内网IP可能会发生变化，从而...
修改专有网络VPC或交换机
云原生内存数据库Tair 实例支持修改专有网络或交换机，例如通过该功能将 Tair 实例的专有网络调整至ECS实例所属的专有网络，实现ECS实例与 Tair 实例间的互连。前提条件 若 经典 版集群架构实例开通了 直连地址，请临时释放直连地址，待...
动态修改schema
动态修改schema操作包括为源索引创建灰度索引并修改多元索引schema、等待表数据全部同步到灰度索引、设置权重进行A/B测试、交换源索引和灰度索引的schema和删除灰度索引五个步骤。功能概述 表格存储数据表是schema free的，而多元索引是强...
修改专有网络VPC或交换机
云数据库Redis版 支持修改专有网络或交换机，例如通过该功能将Redis实例的专有网络调整至ECS实例所属的专有网络，实现ECS实例与Redis实例间的互连。前提条件 若 经典 版集群架构实例开通了 直连地址，请临时释放直连地址，待修改专有网络...
概述
Serverless数据库能够使得数据库集群资源随客户业务负载动态弹性扩缩，将客户从复杂的业务资源评估和运维工作中解放出来。本文介绍了Serverless的工作原理、核心优势和适用场景。背景 数据库是现代企业IT系统中非常重要的一部分。在创建...
8.0.1和8.0.2版功能对比
支持归档表 支持归档分区和表 其他 PolarDB for AI PolarDB for AI功能通过一系列MLOps和内置的模型解决了数据、特征和模型的割裂状态，实现了基于数据库的数据智能的一站式服务。支持 支持 国产化兼容/性能优化 ARM兼容性/性能优化。...
功能特性
OceanBase 数据库真正实现了用一套计算引擎同时支持混合负载的能力，让用户通过一套系统解决 80%的问题。相对于中国很多分布式数据库采用的通过两种不同的计算引擎，甚至两套数据库系统去分别支持 OLTP 和 OLAP 的方式具有巨大优势。多租户...
PolarDB Serverless实现了哪些突破
背后的技术难点 在 PolarDB Serverless之前，学术界已经对分离架构有一定的研究，并且也进行了一些技术上的实验，但都没有解决分离架构下的数据库的性能和弹性问题。PolarDB Serverless通过技术创新解决了困扰业界的难题。PolarDB ...
恢复全量数据
如果您拥有原实例的数据备份和日志备份，可以将其恢复到新实例中，可用于误操作后恢复以及分析历史数据等场景。前提条件 原实例需要满足如下条件：实例运行状态为 运行中 且没有被锁定。当前没有进行中的迁移任务。已完成备份。RDS默认有...
功能特性
数据迁移 数据迁移功能帮助您实现同构或异构数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景 功能集 功能 功能描述 参考文档 同构迁移 逻辑迁移 支持同构数据库间的数据迁移。自建MySQL...
区域热力层（v1.x版本）
在数据配置的过程中，可能会出现区域文字标注有偏移的问题，解决方法如下。查看下您的区域热力层版本，目前可以使用的区域热力层组件包括区域热力层v0.2.4及以上版本。如果您使用的区域热力层版本较低，需要先删除该层，再重新添加。...
客户案例
其提供了丰富的分区方式（HASH，RANGE，RANGE+HASH 等），并且提供在线的业务无感知的动态分区能力，集群扩容只需要 DBA 简单的增加存储节点，以及做一些简单的 DDL 操作即可，完全对业务透明，解决了我们业务数据爆炸式增长的问题。...
区域热力层
在数据配置的过程中，可能会出现区域文字标注有偏移的问题，解决方法请参考 基础平面地图 中 区域热力层 子组件内的 文字标注偏移解决方案。热力值数据接口 您可以通过配置热力值数据接口，自定义区域热力层的样式。区域热力层支持数据优先...
二级索引
Lindorm宽表支持Tabular模型下的二级索引功能，此功能在非主键匹配的查询场景下，可以降低应用的开发复杂性、保证数据的一致性和提高写入效率。本文介绍Lindorm Tabular模型下二级索引的基本特性和使用示例。背景信息 对于Lindorm Tabular...
创建SQL Server只读实例
当您面临数据库读取压力大幅增加时，可以通过创建一个或多个只读实例来扩展读取能力，提高应用的整体吞吐量。RDS SQL Server基于源生AlwaysOn技术，通过物理复制方式复制主实例生成只读实例，只读实例数据与主实例保持一致，并且主实例的...
创建SQL Server只读实例
当您面临数据库读取压力大幅增加时，可以通过创建一个或多个只读实例来扩展读取能力，提高应用的整体吞吐量。RDS SQL Server基于源生AlwaysOn技术，通过物理复制方式复制主实例生成只读实例，只读实例数据与主实例保持一致，并且主实例的...
数据集成概述
为了解决上述问题，DataWorks提出了面向业务场景的同步任务配置化方案，支持不同数据源的一键同步功能，例如，“一键实时同步至Elasticsearch”、“一键实时同步至Hologres”和“一键实时同步至MaxCompute”功能等，通过此类功能，您只需要...
使用MaxCompute访问
如果在创建数据源的时候出现网络超时的报错可以根据 配置资源组与网络连通 进行解决，如果还是有问题，可以 提交工单 联系DataWorks工作人员获取支持。验证MaxCompute数据同步至文件引擎 以下示例用来验证MaxCompute数据是否同步到文件引擎...
区域热力层（v3.x版本）
文字标注偏移问题 在数据配置的过程中，可能会出现区域文字标注有偏移的问题，解决方法如下。查看当前区域热力层版本，目前可以使用的区域热力层组件包括 区域热力层v0.2.4及以上版本。如果您使用的区域热力层版本较低，需要先删除该层，再...
区域热力层（v2.x版本）
在数据配置的过程中，可能会出现区域文字标注有偏移的问题，解决方法如下。查看下您的区域热力层版本，目前可以使用的区域热力层组件包括区域热力层v0.2.4及以上版本。如果您使用的区域热力层版本较低，需要先删除该层，再重新添加。...
区域热力层（v3.x版本）
在数据配置的过程中，可能会出现区域文字标注有偏移的问题，解决方法如下。查看下您的区域热力层版本，目前可以使用的区域热力层组件包括区域热力层v0.2.4及以上版本。如果您使用的区域热力层版本较低，需要先删除该层，再重新添加。...
数据管理DMS的数据追踪功能无法追踪到数据
本文解释数据管理DMS的数据追踪功能无法追踪到数据的原因及解决方案。问题描述 数据管理DMS的数据追踪功能无法追踪到数据。问题原因 数据追踪的筛选条件可能选择错误。解决方案 请参考下列步骤进行排查：请检查时间和区域的选择是否正确。...
Tair集群无感扩缩容
社区版Redis集群版通常会涉及到数据节点弹性扩缩容、分片间的数据迁移等需求，但业界常见的扩缩容方案仍存在一些问题，例如按Key迁移速度慢、不支持多Key命令、Lua脚本无法迁移、大Key迁移出现卡顿甚至引发高可用切换、迁移失败回滚复杂等...
技术面临的挑战与革新
在部分存储节点出现热点数据、资源紧张时，PolarDB会自动迁移部分数据到其他节点。采用独有的Parallel-Raft技术，每份数据会有三个副本，每次IO都保证至少有两个副本落盘，保障了RPO。由于是共享存储架构，节点间状态接近于完全同步，当...
- 产品推荐
- 这些文档可能帮助您