手动续费（2.0版）
包月套餐数据库有到期时间，如果到期未续费，将导致业务中断甚至数据丢失，详情请参见 欠费或到期对数据库的影响。在包月套餐数据库未到期或者到期后7天内，您可以手动给数据库续费，延长数据库的使用时间。按量付费数据库没有到期时间，不...
云数据库录入
本文介绍如何通过数据管理DMS录入阿里云数据库。前提条件 支持录入的云数据库类型，请参见 支持的云数据库。系统角色为DBA或管理员。查看系统角色的操作，请参见 查看我的系统角色。已在云数据库的白名单中添加DMS的服务器访问地址。详细...
添加体验空间数据库
本文介绍如何使用 体验空间 数据库。查看空间容量 在数据库列表中的体验空间右侧，或在体验空间数据库详情页的右上角，可以查看当前空间的已使用容量和总容量。说明 在用户上传数据时，系统首先会计算上传文件与当前剩余空间的容量。如果...
管理数据库资产
在审计数据库前，您必须在数据库审计系统中添加要审计的数据库。本文介绍如何在数据库审计系统中管理数据库。背景信息 关于数据库审计支持的数据库类型，请参见 支持的数据库类型。添加数据库 您可以参考以下步骤在数据库审计系统中添加要...
从零开始完成无锁结构变更
数据管理DMS的无锁结构变更功能可以较好地规避因锁表而导致的业务阻塞，以及数据库原生OnlineDDL带来的主备延迟问题。本文以云数据库RDS MySQL举例，引导您快速使用DMS完成无锁结构变更。新增实例并开启无锁结构变更 登录 数据管理DMS 5.0...
基本概念
数据更新 数据更新是指仅修改数据，未修改结构定义的操作，例如INSERT、DELETE和UPDATE操作。结构更新 结构更新是指修改结构对象定义语法的操作，例如CREATE TABLE、ALTER TABLE、DROP VIEW等操作。数据范围 数据范围是指存储在数据订阅...
创建数据流
在数据管理DMS离线集成中，可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。本文介绍创建数据流和配置的方法。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB...
查询报错问题
用户使用的是普通表，且写入大量数据后未执行optimize操作，此时执行SQL会随着插入数据多而变得越来越慢。这是因为分析型数据库MySQL版的实时数据增量部分默认未建索引，因此执行查询时会频繁访问磁盘。为保证查询速度，建议当用户执行过...
管理数据源权限
您可以针对整个工作空间，或者工作空间下的某些人员进行数据源分享：如果数据源未设置过权限，则继承以前数据源的权限控制。当针对某个工作空间进行权限设置时，将会影响该工作空间内的所有人员。即使后续添加新成员，也会遵循同样的权限。...
备份数据库
数据库备份DBS 的 批量备份 功能支持备份单个数据库和多个数据库。本文以批量配置MySQL逻辑备份为例，向您介绍如何备份数据库。说明 关于各类数据库备份方案，请参见 备份方案概览。前提条件 已添加数据源。如何添加数据源，请参见 手动...
概述
当应用程序使用 testAcc 连接数据库，并查询某个表中的 name、age 和 hobby 时，Proxy会将 name 和 age 列的数据进行脱敏后再返回，hobby 列的数据则未进行脱敏原样返回。Proxy会对不同类型的数据进行不同的脱敏处理，具体脱敏处理说明如下...
采集数据
本文为您介绍如何新建OSS和RDS数据源来访问本教程所提供的用户信息与网站日志数据，配置数据同步链路至私有OSS数据源，并通过EMR Hive节点建表去查询同步后的数据，完成数据同步的操作过程。前提条件 开始本文的操作前，请准备好需要使用的...
导出至OSS
未做分区的普通外表语法支持 使用 INSERT INTO 或 INSERT OVERWRITE SELECT 导入数据时，默认是同步执行流程，如果数据量较大达到几百GB，客户端到 AnalyticDB MySQL 服务端的连接会中断，导致数据导入失败。因此，如果您的数据量较大时，...
RDS SQL Server空间不足问题
回收和释放数据空间 分析 数据空间的总大小（即所有数据文件大小总和）是由已分配（Allocated）空间和未分配（Unallocated）空间两部分组成：已分配空间包括已使用（Used）空间和未使用（Unused）空间，未使用空间只能分配给同一表或索引...
创建Hologres数据源
使用限制 仅当Hologres实例和DataWorks工作空间同地域、属于同一阿里云主账号，且数据源未开启SSL认证时，基于该实例创建的Hologres数据源才可被绑定为计算引擎，即此类数据源才可在DataWorks的数据开发、运维中心页面中执行对应计算任务。...
进入数据质量概览（新版）
数据质量概览为您展示当前工作空间下，需要重点关注的数据质量总览指标、实例运行后触发的质量规则校验状态的趋势及分布情况、TOP质量问题表及质量问题责任人、质量规则覆盖保障情况等，帮助质量负责人快速了解工作空间数据质量整体情况，...
宜搭创建大屏实操
签约表 表单包括 签约日期、合同编码、客户名称、合同名称、我方签约人、客户签约人、合同金额、单位、已收回款、未收回款，客户所在地址 以及 签约明细 等信息。在创建好的 客户库 和 签约表 中分别录入一些数据，以便后续大屏展示。单击 ...
互联网、电商行业离线大数据分析
通过阿里云MaxCompute、云数据库RDS MySQL、DataWorks等产品，可以实现互联网、电商网站的离线数据分析，且支持通过DataV大屏展示分析后的业务指标数据。概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标...
MongoDB（无分片键）迁移至MongoDB（分片集群架构）
数据传输服务DTS（Data Transmission Service）支持在源端MongoDB的数据中分片键字段缺失的情况下，将数据迁移至分片集群架构的MongoDB中，并指定分片键的默认值。本文以 云数据库MongoDB版（副本集架构）为源且 云数据库MongoDB版（分片...
MongoDB（无分片键）迁移至MongoDB（分片集群架构）
数据传输服务DTS（Data Transmission Service）支持在源端MongoDB的数据中分片键字段缺失的情况下，将数据迁移至分片集群架构的MongoDB中，并指定分片键的默认值。本文以 云数据库MongoDB版（副本集架构）为源且 云数据库MongoDB版（分片...
MongoDB（无分片键）同步至MongoDB（分片集群架构）
数据传输服务DTS（Data Transmission Service）支持在源端MongoDB的数据中分片键字段缺失的情况下，将数据同步至分片集群架构的MongoDB中，并指定分片键的默认值。本文以 云数据库MongoDB版（副本集架构）为源且 云数据库MongoDB版（分片...
MongoDB（无分片键）同步至MongoDB（分片集群架构）
数据传输服务DTS（Data Transmission Service）支持在源端MongoDB的数据中分片键字段缺失的情况下，将数据同步至分片集群架构的MongoDB中，并指定分片键的默认值。本文以 云数据库MongoDB版（副本集架构）为源且 云数据库MongoDB版（分片...
访问控制权限概述
数据管理DMS提供了全方位细粒度的数据安全管理功能，支持对实例、数据库、表、数据列、数据行等进行权限管理，可按需给授权对象登录、查询、导出、变更等权限类型。权限类别说明 权限分类 权限类别 权限说明 实例是否开启安全托管 操作权限...
管理访问控制权限
数据管理DMS提供了全方位细粒度的数据安全管理功能，支持对实例、数据库、表、数据列、数据行、元数据等进行访问控制权限管理。本文对DMS提供的访问控制权限进行介绍。权限类别说明 权限分类 权限类别 权限说明 实例是否开启安全托管 操作...
空间碎片自动回收
删除或更新数据库数据时，会使数据在磁盘上的存储变得不连续，产生空间碎片，这导致磁盘空间浪费和数据库性能下降。DAS支持自动回收MySQL中达到阈值（如表空间大小、碎片率）的表的空间碎片。回收在实例可维护时间段执行，且会检查实例负载...
执行补数据并查看补数据实例（旧版）
补数据可通过补历史或未来一段时间的数据，将写入数据至对应时间分区。代码中的 调度参数，将根据补数据选择的业务时间自动替换为具体值，并结合业务代码将对应时间数据写入指定分区。具体写入的分区与执行的代码逻辑，与任务定义的代码...
数据质量概述
当实例状态为质量监控校验失败时，可能是代码运行成功但节点产出的表数据不符合预期，数据质量强规则校验未通过导致任务失败退出并阻塞下游实例运行。打开实例 运行日志 中的 DQC日志，查看数据质量校验结果。详情请参见 查看周期实例。...
Kafka实时ETL同步至Hologres
在 数据输出预览 窗口，您可以根据需要修改输入数据，或者单击 手工构造数据 按钮自定义输入数据，然后单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点处理异常，或者产生脏数据时，也会实时反馈异常信息，能够帮助...
执行补数据并查看补数据实例（新版）
补数据可通过补历史或未来一段时间的数据，将写入数据至对应时间分区。代码中的 调度参数，将根据补数据选择的业务时间自动替换为具体值，并结合业务代码将对应时间数据写入指定分区。具体写入的分区与执行的代码逻辑，与任务定义的代码...
产品服务等级协议
3.赔偿方案 3.1 赔偿标准 每个数据资源平台实例按单实例月度服务可用性，按照下表中的标准计算赔偿金额，赔偿方式仅限于用于购买数据资源平台产品的代金券，且赔偿总额不超过未达到服务可用性承诺当月客户支付的月度服务费用的25%...
配置数据质量监控
本文为您介绍如何通过数据质量实现表数据监控。前提条件 在进行本实验前，请确保已完成 采集数据 和 加工数据。已通过数据集成将存储于RDS MySQL的用户基本信息（ods_user_info_d）同步至MaxCompute的ods_user_info_d表。已通过数据集成将...
配置数据质量监控
本文为您介绍如何通过数据质量实现表数据监控。前提条件 在进行本实验前，请确保已完成 采集数据 和 加工数据。已通过数据集成将存储于RDS MySQL的用户基本信息（ods_user_info_d）同步至MaxCompute的ods_user_info_d表。已通过数据集成将...
空间碎片自动回收
在数据库表中进行数据删除和更新操作时，会使表数据在磁盘上的存储变得不连续，从而产生空间碎片，导致磁盘空间浪费和性能下降。数据库自治服务DAS支持空间碎片自动回收功能，在实例的可维护时间段内，自动在主实例上执行Optimize Table或...
新建离线物理表
使用限制 若您未购买 数据标准 模块，不支持设置表中的 数据标准 字段。若您未购买 资产安全 模块，不支持设置表中的 数据分级、数据分类 字段。若您未购买 资产质量 模块，不支持实现主键字段的 唯一 和 非空 校验。步骤一：离线物理表 在...
新建离线物理表
使用限制 若您未购买 数据标准 模块，不支持设置表中的 数据标准 字段。若您未购买 资产安全 模块，不支持设置表中的 数据分级、数据分类 字段。若您未购买 资产质量 模块，不支持实现主键字段的 唯一 和 非空 校验。步骤一：离线物理表 在...
概述
如果您在2022年2月21日21点前未使用过数据开发功能，推荐您通过EMR Workflow进行数据开发，详情请参见 什么是EMR Workflow。如果您在2022年2月21日21点前使用过数据开发功能，需要继续在EMR上使用数据开发功能，建议您尽快迁移到EMR ...
数据归档
在进行库表恢复时，只能恢复所选数据库中未进行数据归档的数据。在进行备份集下载时，所下载的备份集中仅包含尚未进行数据归档的数据。说明 已开启数据归档的实例，相较于未开启时，由于需要恢复数据归档的数据，备份/恢复的时长会增长。...
添加及管理识别结果
指定数据分类：若当前生效结果为自动继承的结果，且继承策略为仅继承分级，不继承分类，则可能出现生效结果未指定数据分类的情况，此时建议您指定数据分类，否则可能无法命中脱敏规则。在 指定数据分类 对话框，选择数据分类，您也可直接...
添加及管理识别结果
指定数据分类：若当前生效结果为自动继承的结果，且继承策略为仅继承分级，不继承分类，则可能出现生效结果未指定数据分类的情况，此时建议您指定数据分类，否则可能无法命中脱敏规则。在 指定数据分类 对话框，选择数据分类，您也可直接...
实验介绍
数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品：一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集，...
- 产品推荐
- 这些文档可能帮助您