术语表
三权分立 可以将高权限账号拥有的权限分给系统管理员、安全管理员和审计管理员这3个角色，避免因权限高度集中带来的风险，增强数据库的安全性。三权分立主要运用于金融业务场景中。白名单 为PolarDB-X实例提供访问安全保护，设置白名单并不...
创建EMR Hive节点
您可以创建EMR（E-MapReduce）HIVE节点，通过类SQL语句协助读写、管理存储在分布式存储系统上的大数据集的数据仓库，完成海量日志数据的分析和开发工作。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务...
产品优势
HBase Shell 黑屏工具 数据查询 集群管理系统内支持图形化SQL交互查询，请参见 数据查询，也支持使用开源工具HBase Shell/CQLsh。HBase Shell CQLsh 生态体系 数据搬迁 支持与HBase/Cassandra各个版本之间的在线、跨版本、自动化、高效搬迁...
开发管控：管理者
开放平台扩展程序 扩展程序概述 测试应用扩展程序 流程管控展示 数据治理检查项 数据治理中心概述 配置治理项 数据建模：数据建模系统管理 说明 标准模式工作空间的发布操作默认为同空间发布，若您存在跨空间、跨云发布场景，则可选择使用...
内存型
全球多活 Redis全球多活是基于云数据库Redis自研的多活数据库系统，可轻松实现异地多个站点同时对外提供服务的业务场景，助力企业快速复制阿里巴巴异地多活架构。借助DTS实现双向数据同步 通过 数据传输服务DTS（Data Transmission Service...
DataWorks On CDP/CDH使用说明
模块 说明 相关文档 数据地图 DataWorks数据地图提供了企业级数据管理平台，能够基于统一元数据的底层建设，提供数据对象的管理和盘点的能力，以及数据对象的快速查找和深度理解的能力。数据地图概述 安全中心 数据保护伞 审批中心 安全...
RTMP视频流播放器
详情请参见 管理数据过滤器。数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的数据。如果系统反应延迟，您可以单击右侧的 图标，查看数据响应结果，也可以单击右侧的 图标，获取组件的最新...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
增强E-R
数据管理DMS 的增强E-R功能基于DMS自研的统一Catalog的元数据采集引擎、列算子血缘解析引擎（解析字段间关联、依赖和影响关系的引擎）和数据资产知识图谱构建等核心能力，可清晰地展现您名下某个数据库内资产之间的关联关系。本文介绍了...
安全白皮书
系统沙箱配合鉴权管理机制，用来保证数据的安全，以避免出现内部人员恶意或粗心造成服务器故障。网络隔离 云数据库ClickHouse只支持VPC网络，集群中所有的节点都运行在同一VPC网络内部，默认只提供VPC内网访问；用户可以手动开通外网访问...
创建单节点实例
云数据库MongoDB的单节点实例是阿里云为用户提供的一种高性价比实例，适用于存储企业非核心数据的场景，例如开发、测试、学习、培训等。本文介绍如何创建单节点实例。前提条件 已注册阿里云账号，注册流程请参见 注册阿里云账号。注意事项 ...
DataWorks On MaxCompute使用说明
虚拟节点 HTTP触发器节点 OSS对象检查节点 FTP Check节点 赋值节点 参数节点 do-while节点逻辑原理介绍 for-each节点逻辑原理介绍 分支节点 节点任务开发完成后，可根据需要执行如下操作：调度配置 若节点任务需进行周期性调度运行，可定义...
创建单节点实例
云数据库MongoDB的单节点实例是阿里云为用户提供的一种高性价比实例，适用于存储企业非核心数据的场景，例如开发、测试、学习、培训等。本文介绍如何创建单节点实例。前提条件 已注册阿里云账号，注册流程请参见 注册阿里云账号。注意事项 ...
控制台发布记录
2022-11-20 集群保护锁 新增全局只读节点 在产品系列为多主集群（库表）的集群中，您可以通过增加全局只读节点的方式，来读取集群中所有读写节点的数据，以处理跨节点的汇聚库请求，而无需额外配置数据同步和部署独立的集群资源来实现数据...
使用限制
使用NimoShake将Amazon DynamoDB迁移至阿里云 使用MongoDB工具将MongoDB Atlas迁移至阿里云 使用DTS将MongoDB Atlas数据库迁移至阿里云 使用DTS将华为云文档数据库迁移至阿里云 使用DTS将腾讯云MongoDB增量迁移至阿里云 使用DTS将腾讯云...
管理节点组
背景信息 节点组是您使用阿里云E-MapReduece服务对集群节点进行管理的核心单元，通常是由相同规格的ECS实例组成。您可以通过对节点组进行操作，批量管理一个组内的节点。您也可以根据业务规划，创建不同规格的实例组。例如，内存型实例节点...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
创建同步任务
本文为您介绍如何通过创建同步任务，导出MaxCompute中的数据至MySQL数据源中。前提条件 已通过RDS创建MySQL实例，获取RDS实例ID，并在RDS控制台添加白名单。详情请参见 快速创建RDS MySQL实例 和 添加白名单。说明 如果是通过自定义资源组...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
基本概念
任务（Task）任务是对数据执行的操作的定义，示例如下：通过数据同步节点任务，将数据从RDS同步至MaxCompute。通过MaxCompute SQL节点任务，运行MaxCompute SQL来进行数据的转换。每个任务使用0或0个以上的数据表（数据集）作为输入，生成...
集群系列
可靠性更强的备节点 阿里云技术团队通过云原生技术对RDS进行了一系列深度优化，进一步提升了RDS MySQL集群系列实例备节点的可靠性：重构RDS高可用系统，将备节点的故障发现时长从分钟级优化到秒级。基于EBS（Elastic Block Storage）提供的...
使用须知
安全管理 人员管理 安全管理包括人员管理、角色管理、权限管理等。通过DataWorks使用MaxCompute时，由于DataWorks和MaxCompute有各种权限模型，因此您需要理清楚两个产品之间的权限关系，再从业务需求出发进行权限管理。安全管理过程中，您...
技术架构
闭环的生态工具：数据管理DMS，基于阿里巴巴集团十余年的数据库服务平台的云版本，提供免安装、免运维、即开即用、多种数据库类型与多种环境统一的Web数据库管理终端，可以为企业用户快速复制搭建与阿里集团同等安全、高效、规范的数据库...
客户案例
阿里妈妈 公司介绍 阿里妈妈广告业务主要是一种 P4P（Pay for Performance）形式的广告业务系统，而报表中心作为阿里妈妈向广告主透出广告效果数据的唯一平台，在阿里巴巴大平台丰富多样的商业场景下，为客户提供优质，高效，可靠的数据...
迁移MongoDB实例至其他地域
本文介绍如何使用数据传输服务DTS（Data Transmission Service），实现全量数据迁移和增量数据迁移MongoDB副本集实例至其他地域，全量数据迁移MongoDB单节点实例至其他地域。前提条件 源实例类型为单节点实例或副本集实例。如果源实例为分...
迁移MongoDB实例至其他地域
本文介绍如何使用数据传输服务DTS（Data Transmission Service），实现全量数据迁移和增量数据迁移MongoDB副本集实例至其他地域，全量数据迁移MongoDB单节点实例至其他地域。前提条件 源实例类型为单节点实例或副本集实例。如果源实例为分...
SmartData常见问题
JindoFS是阿里云开源大数据E-MapReduce产品提供的一套Hadoop文件系统，主要对Hadoop和Spark大数据生态系统使用阿里云OSS提供多层次的封装支持和优化。基础功能提供适配OSS和支持访问，您可以直接使用JindoFS SDK；标准功能针对OSS提供分布...
什么是云原生内存数据库Tair
云原生内存数据库Tair 是阿里云国产自研的云原生内存数据库。在完全兼容Redis的基础上，提供了丰富的数据模型和企业级能力来帮助客户构建实时在线场景。同时，Tair与新型存储介质——持久内存的高效结合，相比内存型，成本降低30%以上，并...
规划工作空间
数据接入层（STG）：按应用系统划分，例如“stg_营销系统”、“stg_生产管理系统”等。任务节点：只有数据集成任务。数据表：只有原始数据，生命周期短。空间成员：各应用系统的DBA。资源倾斜：数据集成资源组、存储空间。数据清洗层（ODS...
天任务依赖分钟任务最佳实践
每天00:00执行的SQL任务为天任务，依赖于每5分钟抽取一次数据的分钟任务。天任务会对当天同步任务抽取的所有数据进行计算。前提条件 开始本实验前，您需要首先准备好以下内容：请确保已拥有阿里云账号并进行实名认证，详情请参见 开通...
公共节点
Hive Hive节点通过类SQL语句协助读写、管理存储在分布式存储系统上的大数据集的数据仓库，完成海量日志数据的分析和开发工作，具体操作，请参见 新建Hive类型的公共节点。Hologres Hologres节点运行于Hologres云计算资源之上，您可使用标准...
数据开发概述
与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您轻松构建离线数仓、实时数仓与即席分析系统，保证数据生产的高效稳定。...
新功能发布记录
通过标签管理数据迁移项目 通过标签管理数据同步项目 支持在预检查步骤提供移除不符合条件的对象能力，方便用户轻松创建项目，提升产品易用性 数据迁移模块文档 支持在选择增量同步（不包含全量迁移的场景）下选择增量同步位点 2023 年 5 ...
将ECS上分片集群架构的自建MongoDB迁移上云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将ECS上分片集群架构的自建MongoDB数据迁移至阿里云MongoDB实例中。通过DTS的增量迁移功能，可以实现在应用不停服的情况下，平滑完成数据库的迁移。本文为旧版DTS迁移操作...
创建集群
这是一个预设的、用于定期或在特定条件下清理不再使用的PVC资源的Job任务，旨在优化存储资源管理，避免无效或冗余数据持久化导致的存储空间浪费问题。Presto：是基于内存的分布式SQL交互式查询引擎。支持多种数据源，适合PB级海量数据的...
数据分析整体趋势
通过持续投入和积累，阿里云从2020年开始，连续三年荣获Gartner云数据库管理系统魔力象限全球领导者称号。在数据分析关键能力层面，下图为 云原生数据仓库AnalyticDB PostgreSQL版 在《2020 Gartner Critical Capabilities for Cloud ...
跨阿里云账号迁移MongoDB实例
当执行 实例版本升级、数据迁移、变更实例配置、按备份点将备份数据恢复至新建实例、按时间点将备份数据恢复至新建实例 或 恢复云数据库MongoDB单个或多个数据库 等操作时，为保证提供更出色的性能和稳定性，系统会默认将您的数据库小版本...
跨阿里云账号迁移MongoDB实例
当执行 实例版本升级、数据迁移、变更实例配置、按备份点将备份数据恢复至新建实例、按时间点将备份数据恢复至新建实例 或 恢复云数据库MongoDB单个或多个数据库 等操作时，为保证提供更出色的性能和稳定性，系统会默认将您的数据库小版本...
创建副本集实例
云数据库MongoDB提供的副本集实例适用于读多写少或存在临时突发大促活动等场景，例如阅读类网站、订单查询系统等。本文介绍云数据库MongoDB副本集实例的创建方法。前提条件 已注册阿里云账号，注册流程请参见 注册阿里云账号。免费试用 ...
权限管理与规范化数据开发
进入 数据建模 阿里云DataWorks联合建模工具DDM（Datablau Data Modeler）为您提供一体化的数据建模解决方案，我们将数据模型设计管控、引标落标等能力融入DataWorks规范化开发流程，助力用户实现数据资产价值化输出，在数据全生命周期上...
- 产品推荐
- 这些文档可能帮助您