数据查询
Lindorm宽表引擎在集群管理系统中提供了SQL查询入口，您可以使用SQL语法来查询Lindorm宽表数据。本节介绍通过集群管理系统查询宽表数据。前提条件 已登录目标实例的集群管理系统，具体操作请参见 登录集群管理系统。使用限制 为确保数据...
【通知】敏感数据保护功能商业化
自 2021年10月13日 起，阿里云数据管理DMS中的敏感数据保护功能将转入收费阶段。商业化时间 敏感数据保护功能将于 2021年10月13日 开始收费。功能变化 商业化后，敏感数据保护的细分功能的变化如下：功能 自由操作、稳定变更模式 安全协同...
创建Kudu数据源
背景信息 Kudu提供接近于关系数据库管理系统（RDBMS）的功能和数据模型，提供类似于关系型数据库的存储结构来存储数据，允许用户以和关系型数据库相同的方式插入、更新、删除数据。Kudu仅仅是一个存储层，并不存储数据，因此需要依赖外部的...
生态集成
云原生数据仓库AnalyticDB PostgreSQL版 具备完善和开放的生态系统，支持无缝对接业界以及阿里云生态的数据管理工具，BI报表可视化工具，ETL工具，数据迁移工具，同时可以与业界流行的流式处理系统，日志类系统，大数据类系统，传统数仓及...
功能特性
消费订阅数据 数据订阅流量管理 数据订阅实例的源库为MySQL时，支持通过配置费用的类型选择是否收取数据流量费用。计费项 创建RDS MySQL数据订阅任务 任务管理 DTS任务管理 功能集 功能 功能描述 参考文档 任务管理 任务创建与配置 支持...
通过DMS连接StarRocks实例
数据管理DMS（Data Management）是一款支撑数据全生命周期的一站式数据管理平台。您只需在DMS控制台录入StarRocks实例的相关信息，即可轻松实现通过图形化的Web界面对StarRocks实例的高效管控与深度运维，极大提升数据管理体验及操作效率。...
登录DMS的账号
登录 数据管理DMS 5.0。在顶部菜单栏中，选择 运维管理>配置管理。RAM用户配置管理。是否开启RAM权限校验 是否开启 说明 开启（默认）具有AdministratorAccess权限策略的RAM用户，会被初始化为DMS的管理员。如果某个RAM用户是DMS中的普通...
新功能发布记录
本文介绍 数据管理DMS 的产品功能动态及相关文档。功能发布更新 2024年 03月 功能名称 变更类型 功能描述 相关文档 数据工作站 新增 支持以文档形式交付查询的数据和数据变化趋势等信息，并支持在交付后使用智能工具解答数据相关问题。使用...
数据归档至用户OSS
数据归档 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 解决方案>数据归档。在页面右上角，单击 数据归档。在 新建数据归档工单 页面，配置以下信息：配置项 说明 任务名 请输入明确、清晰的任务名，方便后续查询。归档目标 选中 OSS。OSS...
新建云计算资源
添加云计算资源为使用数据资源平台做数据支撑。本文介绍如何添加MaxCompute和RDS MySQL云计算资源。前提条件 在新建MaxCompute云计算资源之前，已完成以下操作：开通MaxCompute。创建MaxCompute项目 在新建RDS MySQL云计算资源之前，已完成...
逻辑数仓一键生成报表
您可通过 数据管理DMS 逻辑数仓的一键报表功能，轻松在Quick BI中可视化地分析逻辑数仓的查询数据。本文主要介绍如何使用一键报表功能。应用场景 该功能包含但不限于如下场景：某销售团队可以使用该功能生成销售数据报表，包括销售额、销售...
新建云计算资源
添加云计算资源为使用数据资源平台做数据支撑。以新建ApsaraDB for RDS和MaxCompute云计算资源为例，介绍如何新建云计算资源。前提条件 您已经购买ApsaraDB for RDS云计算资源，并完成RDS快速入门，具体操作，请参见 RDS快速入门。您已经...
数据加工过程卡点校验
离线系统卡点校验 MaxCompute将离线业务系统生成的数据，通过同步工具（DataWorks的数据集成或阿里云DTS）进入数据仓库系统（MaxCompute）。数据在数据仓库中进行清洗、加工、整合、算法和建模等一系列运算后，再通过同步工具输出到数据...
安全托管
安全托管是 数据管理DMS 在阿里集团数据库权限访问控制最佳实践，为企业提供一系列数据库权限管控的集合，可帮助企业实现多云数据库统一权限管理。背景信息 传统的管理数据库方案，需要先获得数据库账号与密码，登录数据库后才能进行其他...
功能概览
1.4 生态融合 系出飞天，与阿里云大数据系统深度整合，无缝对接MaxCompute、实时计算、交互式分析等产品，打通整个大数据体系。2.产品功能 2.1 数据接入 提供多种SDK、API和Flume、Logstash等第三方插件，让您高效便捷的把数据接入到数据...
功能更新动态（2023年）
新建和管理数据标准 新建和管理落标映射规则 已映射关系管理 无效映射关系管理 查看落标评估明细 资产质量 支持按照全局、项目、个人视角进行查看质量规则、校验记录、治理工作台、整改流程，并支持按照个人的权限控制个人所能查看的数据...
文档更新动态（2023年）
更新说明 新建和管理数据标准 新建和管理落标映射规则 已映射关系管理 无效映射关系管理 查看落标评估明细 资产质量功能优化 支持按照全局、项目、个人视角进行查看质量规则、校验记录、治理工作台、整改流程，并支持按照个人的权限控制...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
用户及权限管理
集群管理系统的用法，请参见 登录集群管理系统。重要 宽表引擎集群管理系统支持TRASH权限，该权限目前在时序引擎中无实际意义。如果宽表引擎中的Namespace与时序引擎的Database同名，且某个用户拥有该Namespace的权限，则该用户默认就拥有...
步骤二：实时项目规划
单击 校验并提交，系统将校验计算源的连通性并创建。步骤三：创建项目 按照下图操作指引，进入 新建项目 对话框。在 生产开发类型 步骤中选择 Basic模式 后，单击 下一步。在 新建项目 对话框中，配置项目参数。参数 描述 数据板块 不进行...
步骤二：实时项目规划
单击 校验并提交，系统将校验计算源的连通性并创建。步骤三：创建项目 按照下图操作指引，进入 新建项目 对话框。在 生产开发类型 步骤中选择 Basic模式 后，单击 下一步。在 新建项目 对话框中，配置项目参数。参数 描述 数据板块 不进行...
使用域账号登录DMS
您可以通过配置用户SSO（Single Sign On，单点登录，也称为身份联合登录）或角色SSO，实现使用企业自身的身份认证系统登录阿里云控制台。背景信息 阿里云支持基于SAML 2.0的SSO...在产品名中，单击 数据管理DMS。即可访问数据管理DMS。
DataWorks On EMR使用说明
模块 说明 相关文档 数据地图 DataWorks数据地图提供了企业级数据管理平台，能够基于统一元数据的底层建设，提供数据对象的管理和盘点的能力，以及数据对象的快速查找和深度理解的能力。数据地图概述 安全中心 数据保护伞 审批中心 安全...
Hadoop集群迁移至DataLake集群
元数据类型：确认旧集群采用的元数据类型（DLF、自建RDS），以规划新架构中元数据管理系统的对接和迁移策略。数据存储架构：分析旧集群的数据存储架构（本地HDFS、OSS、JindoFS block模式），为后续数据迁移路径设计提供依据。用户认证&...
配置DTS迁移、同步或校验任务
DISTRIBUTED_DMSLOGICDB：数据管理DMS逻辑库。自建数据库 OTHER：有公网IP的自建数据库。ECS：ECS上的自建数据库。EXPRESS：通过专线接入的自建数据库。CEN：通过云企业网CEN接入的自建数据库。DG：通过数据库网关接入的自建数据库。说明 ...
DataWorks模块使用说明
使用流程概览：参考文档：数据分析概述 数据治理 子模块：数据地图 功能说明：DataWorks数据地图提供了企业级数据管理平台，能够基于统一元数据的底层建设，提供数据对象的管理和盘点的能力，以及数据对象的快速查找和深度理解的能力。...
OpenEvent概述
例如，在数据治理的数据质量模块，给某个表启用了表行数大于0的规则，页面上用户可以对某次校验结果进行反馈，当用户执行了反馈操作，系统会把用户反馈的内容（校验规则ID、反馈内容等）发送给订阅端。数据质量校验完成事件 描述：在数据...
Kafka元数据管理
添加Topic 进入Kafka数据管理页。登录 阿里云E-MapReduce控制台。在顶部菜单栏处，根据实际情况选择地域 和资源组。单击上方的 元数据管理 页签。在左侧导航栏，单击 Kafka数据管理。在 Kafka数据管理 页面，单击右上角的 添加Topic。在 ...
用户角色和权限
RAM用户在Dataphin中可以被授予不同的RAM角色，以实现不同的权限控制：详细说明如下：全局权限包含的角色：超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块权限包含的角色：板块架构师 业务负责人 数据负责人 项目权限包含...
用户角色和权限
RAM用户在Dataphin中可以被授予不同的RAM角色，以实现不同的权限控制：详细说明如下：全局权限包含的角色：超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块权限包含的角色：板块架构师 业务负责人 数据负责人 项目权限包含...
产品优势
数据库备份DBS 支持多种环境的数据库备份，通过专线接入、公网等接入技术，实现用户本地IDC数据库备份、ECS自建数据库的备份、其他云环境和RDS数据库备份，通过简单地配置实现数据库全量备份、增量备份以及数据恢复。低成本 DBS使用飞天...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
详情请参见 通过标签管理数据迁移项目。说明 PolarDB-X 1.0 数据库至 OceanBase 数据库 MySQL 租户的数据迁移项目启动成功后，该项目会自动删除，请选择合适的标签进行标记。源端 如果您已新建 PolarDB-X 1.0 数据源，请从下拉列表中进行...
跨阿里云账号迁移RDS实例
复制源表Online DDL工具执行过程的临时表到目标库 若源库使用 数据管理DMS（Data Management）或gh-ost执行Online DDL变更，您可以选择是否迁移Online DDL变更产生的临时表数据。重要 DTS任务暂不支持使用pt-online-schema-change等类似...
步骤二：规划数仓
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。本文将指导您完成本教程的规划数仓。背景信息...
步骤二：规划数仓
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。本文将指导您完成本教程的规划数仓。背景信息...
数据导出
修改默认审批模板 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 安全与规范>安全规则。单击目标规则集行 操作 列下的 编辑。在 详情 页左侧的导航栏中，单击 数据导出。检测点选择 基础配置项。单击 数据导出默认审批模板 规则名行 操作 列...
使用DTS将MongoDB Atlas数据库迁移至阿里云
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择阿里云MongoDB实例所属地域。定位至已购买的数据迁移实例，单击 ...
使用DTS将MongoDB Atlas数据库迁移至阿里云
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择阿里云MongoDB实例所属地域。定位至已购买的数据迁移实例，单击 ...
跨阿里云账号同步RDS MySQL实例
使用信任策略中配置的阿里云账号，登录 DMS数据管理服务。在顶部菜单栏中，单击 集成与开发（DTS）。在左侧导航栏，选择 数据传输（DTS）>数据同步。说明 实际操作可能会因DMS的模式和布局不同，而有所差异。更多信息，请参见 极简模式 和 ...
开发管控：管理者
开放平台扩展程序 扩展程序概述 测试应用扩展程序 流程管控展示 数据治理检查项 数据治理中心概述 配置治理项 数据建模：数据建模系统管理 说明 标准模式工作空间的发布操作默认为同空间发布，若您存在跨空间、跨云发布场景，则可选择使用...
- 产品推荐
- 这些文档可能帮助您