应用场景
该方案优势如下：全托管免运维 弹性扩展能力 开放数据湖架构 一站式的数据开发平台 数据查询与分析场景 在传统数据平台下，数据仓库工程师和数据分析师通常面临两个不同的环境，甚至使用不同的引擎和语法，导致数据指标和算子行为存在差异...
MyBase与自建数据库对比优势
开放数据库管理权限与可控的OS权限，提供发挥DBA价值的空间。运营复杂，DBA自行安装部署数据库、搭建HA、备份、监控。运维压力大，依赖资深DBA。弹性机制 可按现有规格直接创建相同实例。专属集群内资源分配率可调整，用户可自行定义符合...
使用DTS和DG迁移、同步或订阅本地或第三方云数据库
数据管理DMS提供了通过数据库网关录入第三方云数据库的功能，无需开放数据库的公网地址即可完成连接，对数据传输进行安全加密，同时免防火墙配置，大大降低使用门槛。了解更多数据库网关的信息，请参见 什么是数据库网关。操作步骤 创建...
使用DTS和DG迁移、同步或订阅本地或第三方云数据库
数据管理DMS提供了通过数据库网关录入第三方云数据库的功能，无需开放数据库的公网地址即可完成连接，对数据传输进行安全加密，同时免防火墙配置，大大降低使用门槛。了解更多数据库网关的信息，请参见 什么是数据库网关。操作步骤 创建...
使用DMS和DG管理本地或第三方云数据库
针对以上问题，数据管理DMS提供了通过数据库网关录入本地机房或第三方云数据库的功能，无需开放数据库的公网地址即可完成连接，并对数据传输进行安全加密。了解更多数据库网关的信息，请参见 数据库网关简介。操作步骤 登录 数据库网关控制...
使用DMS和DG管理本地或他云数据库
针对以上问题，数据管理DMS提供了通过数据库网关录入本地机房或第三方云数据库的功能，无需开放数据库的公网地址即可完成连接，并对数据传输进行安全加密。了解更多数据库网关的信息，请参见 数据库网关简介。操作步骤 登录 数据管理DMS 5....
常见问题
Q：对于按自定义时间列冷热分离，如果更新了原有的冷数据，更新后的数据还是冷数据吗？A：如果更新的冷数据不是自定义时间列，那么更新后的数据依旧是冷数据；如果更新的是自定义时间列中的数据，则需要根据新写入的时间内容来重新划分冷热...
数据源管理常见问题
对于数据代理服务的适用场景包括：内网数据库、不想开放数据库外网访问和SQL查询耗时较长有10s超时限制的，关于Proxy的获取方式请参见：DataV Proxy应用使用说明。说明 在数据代理服务配置连接数据库时，DataV数据源配置连接数据代理服务，...
数据源管理常见问题
对于数据代理服务的适用场景包括：内网数据库、不想开放数据库外网访问和SQL查询耗时较长有10s超时限制的，关于Proxy的获取方式请参见：DataV Proxy应用使用说明。说明 在数据代理服务配置连接数据库时，DataV数据源配置连接数据代理服务，...
Lindorm for Cassandra应用实践
开放数据生态：提供简单易用的数据交换、处理、订阅等能力，能够高度兼容MySQL、Spark、Flink、Kafka等系统。开源Cassandra挑战 开源Cassandra是基于Amazon DynamoDB和Google Bigtable设计的一款分布式NoSQL数据库，具备无中心、一致性可调...
什么是MaxCompute
支持多种分析场景 支持开放数据生态，以统一平台满足数据仓库、BI、近实时分析、数据湖分析、机器学习等多种场景。开放的平台 支持开放接口和生态，为数据、应用迁移、二次开发提供灵活性。支持与Airflow、Tableau等开源和商业产品灵活组合...
常见问题
数据安全中心会登录到数据库获取数据吗？如何满足安全性要求 在获取数据库授权的情况下，数据安全中心会以数据采样的方式进行敏感数据识别，不会对数据库中的数据进行保存。数据安全中心是否支持统一管理跨阿里云账号的数据资源？目前暂不...
友盟数据分析
U-DOP数据开放平台是友盟+为开发者提供的数据开放和私域数据融合的平台，通过一键订阅分析模板、拖拽式自助分析报表来快速完成数据分析工作。U-DOP数据开放平台不仅仅为您提供了U-App的统计明细数据，同时包含了多主题的分析模板和可订阅的...
数据服务概述
数据服务作为统一的数据服务出口，实现了数据的统一市场化管理，有效地降低数据开放门槛的同时，保障了数据开放的安全。前提条件 已购买 数据服务 增值服务，开通Dataphin 常见数据应用问题 一般从需求提出到需求交付分为：需求提出-需求...
Dataphin支持的数据源
数据服务作为统一的数据服务出口，实现了数据的统一市场化管理，有效地降低数据开放门槛的同时，保障了数据开放的安全。数据服务概述 本文仅列举了支持接入Dataphin的数据源及在Dataphin中支持的应用场景。若需要查看数据源在各场景中具体...
DataWorks V2.0
数据服务与API网关一道为您提供了安全稳定、低成本、易上手的数据开放共享服务。数据保护伞（新增）数据保护伞 为MaxCompute提供数据资产识别、敏感数据发现、数据分级分类、脱敏、访问监控、风险发现预警与审计的能力。
客户案例
解决方案 友盟+联合MaxCompute构建开发者数据银行，为企业提供面向分析的、实现友盟域数据与企业私域数据全面融合的自助分析服务“U-DOP数据开放”。该服务通过订阅数据包返还数据到MaxCompute，预置分析模板并结合可视化分析BI工具来快速...
Spark Connector
为了更好地融入大数据生态，MaxCompute开放了存储组件（Storage API），通过调用Storage API直接访问MaxCompute底层存储，有助于提高第三方引擎访问MaxCompute数据的速度与效率。本文为您介绍如何使用第三方计算引擎Spark通过Spark ...
开通Dataphin
帮助您统一数据主题单元，并进一步支持面向主题的自助API配置、调试、预发、上线及调用监控管理，做到数据使用权限字段粒度控制，有效降低业务的数据消费门槛，同时为您保障数据开放的安全性。支持选购的规格包括 api.base（最大500 QPS）...
数据服务入门
步骤一：创建数据源并配置网络连通性 使用数据服务创建API前，您需将数据库或数据仓库添加为DataWorks的数据源，并保障数据服务资源组与您的目标数据源网络连通，以便调用API时DataWorks可成功访问数据源。说明 DataWorks工作空间将集群或...
Iceberg概述
Iceberg是一种开放的数据湖表格式。您可以借助Iceberg快速地在HDFS或者阿里云OSS上构建自己的数据湖存储服务，并借助开源大数据生态的Spark、Flink、Hive和Presto等计算引擎来实现数据湖的分析。核心能力 Apache Iceberg设计初衷是为了解决...
数据源配置常见问题
需要开放您数据库的公网IP，但目前不支持白名单。如果考虑到安全性，可以使用阿里云提供的代理工具连接数据库，具体请参见 如何使用DataV Proxy。在使用数据源时，API、阿里云API网关和Open API这三种类型该如何选择？数据源类型 介绍 在...
数据源配置常见问题
需要开放您数据库的公网IP，但目前不支持白名单。如果考虑到安全性，可以使用阿里云提供的代理工具连接数据库，具体请参见 如何使用DataV Proxy。在使用数据源时，API、阿里云API网关和Open API这三种类型该如何选择？数据源类型 介绍 在...
资产安全概述
动态脱敏白名单 应用于特定的场景下，需要 暂时对一些用户开放真实数据的查询权限，完成特定的业务目标。典型应用场景：数据研发进行问题排查、特定时期（如双十一）公开销售额数据等。资产安全使用流程 管理数据分类、管理数据分级 定义...
资产安全概述
动态脱敏白名单 应用于特定的场景下，需要 暂时对一些用户开放真实数据的查询权限，完成特定的业务目标。典型应用场景：数据研发进行问题排查、特定时期（如双十一）公开销售额数据等。资产安全使用流程 管理数据分类、管理数据分级 定义...
从Amazon RDS SQL Server全量迁移至阿里云
由于Amazon RDS SQL Server未开放增量数据迁移所需的sysadmin角色权限，所以暂不支持增量数据迁移。如果源库中待迁移的表没有主键或唯一约束，且所有字段没有唯一性，可能会导致目标数据库中出现重复数据。如果待迁移数据库名称不符合阿里...
数据扫描和识别
支持扫描的数据源类型如下：结构化数据：RDS、PolarDB、PolarDB-X、MongoDB、OceanBase、自建数据库 非结构化数据：OSS 大数据：TableStore、MaxCompute、ADB-MYSQL、ADB-PG 数据源授权完成后需要多长时间完成扫描？DSC 完成数据源授权后，...
管理数据集
数据集是基于特定数据库和SQL查询生成，并且以二维表呈现的一种数据集合。本文介绍创建、编辑、删除数据集的方法。注意事项 数据分析后续所有的分析工作、仪表盘制作和大屏制作都是基于数据集进行的，因此在进行其他功能前，必须先创建数据...
数据归档至专属存储
本文为您介绍如何将数据归档至专属存储中（存储在 DMS）、将专属存储的数据转存至OSS，以及删除归档至专属存储的数据等操作。前提条件 源数据库类型为：MySQL：RDS MySQL、PolarDB MySQL版、AnalyticDB MySQL 3.0。说明 MySQL数据库账号...
功能发布记录（2022年）
英国（伦敦），美国（硅谷），美国（弗吉尼亚），阿联酋（迪拜）所有DataWorks用户 数据集成概述 DataWorks支持EMR新版数据湖DataLake DataWorks支持基于EMR计算引擎新版数据湖DataLake，实现基于EMR引擎的数据集成、数据建模、数据开发...
数据归档
相关参考 主要参数 RDS MySQL数据归档开放了以下参数，用户可结合实际使用情况修改相关参数。更多信息，请参见 RDS MySQL 8.0开放参数一览表。参数名称 默认值 说明 innodb_oss_ddl_threads 16 该参数为归档数据转换的并发线程数。在达到...
用户价值
数据管理方 资产管理 管理数据资产 数据共享与开放 全面掌控数据资产：通过运营工作台，全面了解数据的来龙去脉，盘点数据资产，了解数据治理进程，管理数据共享。促进数据共享使用：通过数据资产中心，提供数据资产共享开放目录，诠释数据...
原理优势
主要包括如下方面：更加灵活的资源调度 更加丰富的权限开放 更低的使用成本 更加强大的企业级数据库服务 更加灵活的资源调度 您可以在集群内部按照业务实际情况进行资源调度，最大化使用集群的主机资源。在初始创建集群时，提供紧凑分配和...
流程管控
启用内置检查项：数据治理中心 自定义校验逻辑：开放平台 启用内置检查项：数据治理中心 DataWorks的数据治理中心为您内置了多个检查项，您可以根据业务需要选择开启对应的检查项，开启后，后续在涉及到对应操作时即会触发DataWorks的内置...
应用场景
场景四：支持开放主机OS和数据库权限，MyBase 可以开放主机的部分OS权限，使用定制化脚本，详情请参见 使用定制化脚本。场景案例 场景案例一 问题描述：在使用其他云数据库产品时，实例不会持续高负荷运作，资源的利用率较低，成本较高。...
数据服务概述
DataWorks数据服务模块是一个灵活轻量、安全稳定的数据API构建平台，作为数据库和数据应用之间的“桥梁”，DataWorks数据服务旨在为个人、团队和企业提供全面的数据服务和共享能力，帮助用户统一管理面向内外部的API服务。例如，您可以将...
常见问题
云数据库Redis版是否开放了从节点？云数据库Redis版是否支持主从节点的故障切换？云数据库Redis版是否支持全球多活形态？Redis CSRF漏洞分析及云数据库Redis版安全措施介绍 云数据库Redis集群版与原生Redis集群版有什么区别？网络与连接 ...
A100售后支持相关问题
购买数据库审计实例后，您可以通过以下操作配置数据库审计服务：启用数据库审计实例 管理数据库审计实例 登录数据库审计系统 添加数据库实例 部署Agent程序 更多信息，请参见 A100快速入门。如何测试数据库审计网络连通性？数据库审计外网...
生成数据API
数据服务解决从数仓到应用的“最后一公里”，将数据源中的数据表快速生成数据API，在API网关进行统一管理和发布。实现低成本、易上手、安全稳定的数据共享与开放。背景信息 为了将最终分析的结果加速查询后开放出API接口对接三方服务，本次...
应用详情说明
数据源 表示开放搜索中的数据来源。目前支持 MaxCompute（原ODPS）数据源配置、RDS数据源配置（不支持5.2以下，8以上版本，支持8.0）、PolarDB数据源配置 以及 API/SDK数据导入。应用结构 数据表 表示应用的表结构（schema）。索引字段列表...
- 产品推荐
- 这些文档可能帮助您