Tunnel SDK示例（Python）
Tunnel是MaxCompute的数据通道，您可以通过Tunnel向MaxCompute中上传或者下载数据，TunnelSDK是PyODPS的一部分，本文为您介绍使用Python版TunnelSDK上传下载数据的简单示例。注意事项 下文为您介绍简单的上传、下载数据的Python SDK示例，...
建模空间
当您所需要管理多个DataWorks工作空间且需要复用一套数仓规划时，面对跨多个工作空间的复杂数据体系，可以通过设计空间来共享一套数据建模工具，针对整个数据体系进行统一的数仓规划、维度建模及指标定义等工作。本文为您介绍DataWorks建模...
全景视角
您可以根据需求选择合适的视角，高效的进行数据治理工作。背景信息 为提高不同使用场景下的数据治理效率和质量，DataWorks为您提供以下视角：数据管理视角：在数据资产管理、数据安全加固、数据权限管理等数据管理场景下，建议您使用数据...
数据标准
数据是由特定的环境产生的，这些环境因素包括生产者、时间、系统等，从而造成了同一个语义的数据，有多种不同的定义方法，给后期进行数据汇集和整合带来障碍。因此，数据处理的前奏就是数据标准化，数据标准作为一个统一的数据共识，在标准...
AnalyticDB MySQL数仓版（3.0）使用流程
欢迎使用 云原生数据仓库AnalyticDB MySQL版 数仓版（3.0）入门指南。云原生数据仓库AnalyticDB MySQL版（简称ADB，原分析型数据库MySQL版）是云端托管的PB级高并发实时数据仓库，是专注于服务OLAP领域的数据仓库。本指南将指引您完成一次 ...
AnalyticDB MySQL湖仓版（3.0）使用流程
欢迎使用 云原生数据仓库AnalyticDB MySQL版 湖仓版（3.0）入门指南。云原生数据仓库AnalyticDB MySQL版（简称ADB，原分析型数据库MySQL版）是云端托管的PB级高并发实时数据仓库，是专注于服务OLAP领域的数据仓库。本指南将指引您完成一次 ...
数据备份
数据备份周期 设置备份周期，每周最少选择一天进行数据备份。数据备份起始时间 选择数据备份开始的时间段，例如 05:00-06:00。建议设置为业务低峰期。恢复点设置 选择是否开启恢复点（时间点恢复）恢复功能。关闭后将无法按恢复点恢复，请...
敏感数据保护
识别规则会按照配置的识别范围（项目、表）和数据分离的识别方式（字段内容、字段名）自动进行数据的扫描并生成敏感数据的识别结果。自动识别支持定时全量识别+实时增量识别，可以更快速更完整的识别敏感数据。手动打标 针对明确的敏感数据...
敏感数据保护
识别规则会按照配置的识别范围（项目、表）和数据分离的识别方式（字段内容、字段名）自动进行数据的扫描并生成敏感数据的识别结果。自动识别支持定时全量识别+实时增量识别，可以更快速更完整的识别敏感数据。手动打标 针对明确的敏感数据...
湖仓一体
本章节介绍如何通过 云数据库SelectDB 提供的联邦查询技术，对数据湖、数据库、远端文件等外部数据源进行联邦分析。为您提供简单、快速的数据分析体验。概述 云数据库SelectDB 提供多源数据目录功能（Multi-Catalog或Catalog），支持对接...
功能介绍
云原生数据仓库AnalyticDB PostgreSQL版 支持周期性的基础备份与日志备份，可以有效防止数据丢失。功能原理 云原生数据仓库AnalyticDB PostgreSQL版 通过实例的基础备份加日志备份，可以将实例恢复至指定历史时刻，并保证分布式实例状态与...
数据库迁移
可选：数据库迁移完成后，单击 下一步一致性校验，进行数据一致性校验。跳过校验：跳过数据一致性校验。立即开始：在 参数配置 对话框中，设置单表最大差异上限、无主键表单标数据校验上限，单击 确认。定时执行：在 定时设置 对话框中，...
数据集成概述
数据集成是基于Dataphin构建的简单高效的数据同步平台，致力于提供具有强大的数据预处理能力、丰富的异构数据源之间数据高速稳定的同步能力。背景信息 面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量...
数据集成概述
数据集成是基于Dataphin构建的简单高效的数据同步平台，致力于提供具有强大的数据预处理能力、丰富的异构数据源之间数据高速稳定的同步能力。背景信息 面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量...
数据上云工具
您可以根据实际应用场景，选择合适的工具进行数据的上传和下载。阿里云数加产品 MaxCompute客户端（Tunnel通道系列）客户端基于 批量数据通道 的SDK，实现了内置的Tunnel命令，可对数据进行上传和下载，Tunnel命令的使用请参见 Tunnel命令...
数据扫描和识别
支持扫描的数据源类型如下：结构化数据：RDS、PolarDB、PolarDB-X、MongoDB、OceanBase、自建数据库 非结构化数据：OSS 大数据：TableStore、MaxCompute、ADB-MYSQL、ADB-PG 数据源授权完成后需要多长时间完成扫描？DSC 完成数据源授权后，...
数据服务概述
DMS数据服务支持将企业托管在DMS上的数据快速迁移至外部。设计理念 数据服务作为DMS的模块，其基于DMS上受控的数据定义API，与SQL Console中执行SQL时的权限控制、数据脱敏等功能检查保持一致。数据服务基于Serverless架构，您无需关注...
管理敏感数据
如果您需要对RDS实例中的敏感数据进行管控和脱敏，可以使用数据管理DMS提供的敏感数据保护功能。费用 请参见 敏感数据保护功能定价。功能介绍 数据管理DMS的敏感数据管理提供如下功能：提供敏感数据资产大盘，解决企业敏感数据分布的统一纳...
产品简介
DLA Ganos是基于云原生数据湖分析（Data Lake Analytics，DLA）系统设计开发的，面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos打通了阿里云各个存储系统，如...
新用户必读
如果您是首次接触 云原生数据仓库AnalyticDB MySQL版 的用户，建议您先阅读以下部分。服务亮点和定价：产品详情页 提供产品介绍、核心能力和产品定价。数仓版快速入门：引导您完成创建数仓版集群、设置白名单、创建数据库账号、创建数据库...
应用场景
数据传输服务DTS（Data Transmission Service）支持数据迁移、数据订阅和数据实时同步功能，帮助您实现多种典型应用场景。不停机迁移数据库 传输方式：数据迁移 为了保证数据的一致性，传统的迁移过程需要您在迁移数据时停止向源数据库写入...
集成与开发概览
数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。离线集成。更多信息，请参见 离线集成概述。离线集成是一种低代码的数据开发工具，...
OSS数据安全防护最佳实践
DSC 在您完成数据源识别授权后，从您存储在OSS的海量数据中快速发现和定位敏感数据，对敏感数据分类分级并统一展示，同时追踪敏感数据的使用情况，并根据预先定义的安全策略，对数据进行保护和审计，以便您随时了解OSS数据资产的安全状态。...
DLA Lakehouse实时入湖
在 新建工作负载 页面，进行数据源的 基础配置、全量同步配置、增量同步配置、生成目标数据规则配置。说明 当前仅支持RDS数据源和PolarDB数据源。基础配置 的参数说明如下：参数名称 参数说明 名称 工作负载的名称。选择湖仓 工作负载将...
了解数据资源平台用户和角色体系
数据资源平台提供了完善的权限管控机制，支持以租户或工作组为管控粒度，通过对用户授予不同的角色实现全局或工作组内的各组件功能权限管控。本文为您详细介绍租户、工作组粒度下的角色体系。背景信息 数据资源平台功能权限是基于角色的...
基础系列
个人学习 数据库初学者可使用基础系列进行数据库的测试和学习。开发测试 通过云数据库的快速交付能力，随时随地创建和释放资源，大幅提升研发工程效率。购买实例 如何购买基础系列实例请参见：快速创建RDS MySQL实例 快速创建RDS SQL ...
数据查询与分析管控
DataWorks版本 下载数据条数上限（条）基础版 0 标准版 200,000 专业版 2000,000 企业版 5000,000 说明 版本降级时，可下载的数据条数上限值变化如下：如降级前的下载数据条数上限值，超过了降级后的下载数据条数最大值，则可下载的数据条...
Streaming Tunnel SDK示例（Python）
Streaming Tunnel是MaxCompute的流式数据通道，您可以通过Streaming Tunnel向MaxCompute中上传数据，本文为您介绍使用Python版Streaming Tunnel SDK上传数据的简单示例。注意事项 Streaming Tunnel仅支持上传数据，下文为您介绍一个简单的...
新建工作组并添加成员
租户下各工作组数据互相隔离，同一个租户下可以新建多个工作组。...说明 工作组分析员可使用工作组内的数据进行数据分析等操作。在 成员管理 列表查看添加的成员信息。单击左侧导航栏中的 权限列表，查看所有角色的权限。
使用DMS进行数据归档
使用OLTP数据库进行数据归档 较差 优秀 中等 使用对象存储OSS进行数据归档 优秀 较差 较差 使用传统OLAP引擎进行数据归档 较差 优秀 优秀 使用 AnalyticDB PostgreSQL版 Serverless模式进行数据归档 优秀 优秀 优秀 前提条件 已创建 ...
步骤八：验证数据
描述 填写简单描述，例如，入门教程数据验证。选择目录 使用 默认配置。单击 确定。在 代码编写 页面，编写代码并验证数据是否符合预期。编写以下命令后，单击页面上方的 运行，验证 产品表数据集成 是否同步成功。SELECT*FROM dataphin_...
步骤八：验证数据
描述 填写简单描述，例如，入门教程数据验证。选择目录 使用 默认配置。单击 确定。在 代码编写 页面，编写代码并验证数据是否符合预期。编写以下命令后，单击页面上方的 运行，验证 产品表数据集成 是否同步成功。SELECT*FROM dataphin_...
工作组成员管理
工作组分析员：可使用工作组内的数据进行数据分析等操作。元数据读取：可访问工作组内云计算资源的元数据信息。数据读取：可访问工作组内云计算资源的元数据信息和数据信息。数据变更：可访问工作组内云计算资源的元数据信息和数据信息，...
工作组成员管理
工作组分析员：可使用工作组内的数据进行数据分析等操作。元数据读取：可访问工作组内云计算资源的元数据信息。数据读取：可访问工作组内云计算资源的元数据信息和数据信息。数据变更：可访问工作组内云计算资源的元数据信息和数据信息，...
权限管控与隔离
租户隔离 Dataphin支持租户的概念，不同租户之间的数据、任务、成员、权限是完全隔离的，只能通过跨租户发布进行数据和任务的流通。常见的情况有以下两种：两套独立部署的，物理隔离的Dataphin。如两家完全不同的企业之间的Dataphin，或者...
安装及管理Python三方包
本文将为您介绍如何管理Python三方包和安装Python Module。权限说明 仅支持 超级管理员、系统管理员 安装、升级、删除Python三方包。Python Module入口 在Dataphin首页，单击顶部菜单栏 管理中心。按照下图操作指引，进入Python Module页面...
安装及管理Python三方包
本文将为您介绍如何管理Python三方包和安装Python Module。权限说明 仅支持 超级管理员、系统管理员 安装、升级、删除Python三方包。Python Module入口 在Dataphin首页，单击顶部菜单栏 管理中心。按照下图操作指引，进入Python Module页面...
配置Python开发环境
MaxCompute Studio支持您在IntelliJ IDEA中完成Python开发，例如UDF和PyODPS脚本。本文为您介绍如何配置Python开发环境。安装PyODPS 您需要在本地安装PyODPS。PyODPS是MaxCompute的Python SDK，安装的操作详情请参见 安装PyODPS。运行...
登录数据库
您需要登录数据库后才能对数据库内的数据进行管理，本教程以DMS为例介绍如何登录数据库。前提条件 已根据快速入门，完成了 创建初始账号。操作步骤 登录 云原生数据仓库AnalyticDB PostgreSQL版控制台。在控制台左上角，选择实例所在地域。...
引擎功能
数据查询 支持通过SQL进行数据查询，兼容基于OpenTSDB协议的查询API等方式进行数据查询。用户也可以通过产品控制台的数据查询功能进行数据分组、降采样、空间聚合等可视化数据查询展现。数据管理 数据库管理 时序数据的存储以Database为...
- 产品推荐
- 这些文档可能帮助您