大数据实验平台账号-大数据实验平台账号文档介绍内容-阿里云

客户案例

价值体现从大数据平台上云整体“降本增效”的方案快速切入，迁移到大数据MaxCompute、实时计算、DataWorks后，部分任务有10倍以上的性能提升，存储从自建Hadoop 3PB降到900T，利用Flink实时数据处理能力，将宝宝树现有的场景实时化（...

通用数据开发

说明上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的数据，存储在业务系统所对应的数据库中，包括MySQL、Oracle和RDS等类型。数据收集与存储：您需要同步...

购买及登录数据资源平台

背景信息数据资源平台账号登录体系与阿里云保持一致。购买数据资源平台在数据资源平台购买页面，选择购买信息后，单击立即购买。具体操作，请参见购买指引。在弹出的确认订单页面，勾选数据资源平台服务协议，单击去支付。等待开通...

准备工作

企业数据智能平台账号登录体系与阿里云保持一致，统一采用阿里云账号或RAM用户的方式登录，具体操作，请参见 RAM。说明阿里云账号（即主账号）是阿里云资源的归属及使用计量计费的基本主体，负责生成本企业组织下的RAM用户，并对RAM用户...

创建阿里云账号

数据资源平台账号登录体系与阿里云保持一致，统一采用主账号或子账号的方式登录，具体操作，请参见 RAM。说明阿里云账号（即主账号）是阿里云资源的归属及使用计量计费的基本主体，负责生成本企业组织下的子账号，并对子账号进行管理、...

核心能力

数据资源平台提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...

快速体验

DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...

什么是DataWorks

DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与...

权限列表

前提条件使用权限账号登录数据资源平台。查看权限列表登录数据资源平台控制台。在页面右上角，单击图标，选择系统设置。在页面左侧导航栏，单击权限列表。在权限列表页面，查看功能权限和数据权限。在功能权限页签下，查看各...

内置检测模型说明

数据下载量异常 账号数据下载量异常可能是由于账号访问权限被外部攻击者获取，或者员工恶意备份数据。下载非常用敏感库（IP维度）IP访问非历史常用库可能是由于账号访问权限被外部攻击者获取，并导致数据泄露。下载敏感数据的IP数量过多 ...

概述

EMR数据开发于2022年2月21日停止功能更新，2023年9月30日停止全面支持。如果您在2022年2月21日21点前未使用过数据开发功能，推荐您通过EMR Workflow进行...您也可以迁移到大数据开发治理平台DataWorks，详情请参见 EMR数据开发停止更新公告。

需求分析

本实验提供数据仅作为阿里云大数据开发治理平台DataWorks数据应用实操使用，所有数据均为人工Mock数据。业务背景为了更好的制定企业经营策略，现需要从用户网站行为中获取网站用户群体基本画像数据，例如，用户群体地理属性、社会属性等，...

绑定或解绑数据库账号

例如，在数仓版（3.0）弹性模式集群版（新版）集群中数据库账号A、B使日常进行一些简单查询，数据库账号C会进行数据量较大的复杂查询分析，那么这种情况下您可以将数据库账号A、B绑定查询类型为 Interactive 的资源组 source_a，将数据库...

企业版账号管理

参数说明数据库账号数据库账号的名称，设置规则如下。名称唯一。由小写字母、数字或下划线组成。以小写字母开头，以小写字母或数字结尾。长度为2~64个字符。账号类型数据库账号类型，取值如下：高权限账号普通账号密码数据库账号...

社区兼容版账号管理

20.8及以上版本参数说明数据库账号数据库账号的名称，设置规则如下。名称唯一。由小写字母、数字或下划线组成。以小写字母开头，以小写字母或数字结尾。长度为2~64个字符。账号类型数据库账号类型，取值如下：高权限账号普通账号 ...

创建账号

参数说明示例数据库账号数据库账号的名称，设置规则如下。名称唯一。由小写字母、数字或下划线组成。以小写字母开头，以小写字母或数字结尾。长度为2~64个字符。test 账号类型数据库账号类型，取值如下：高权限账号普通账号高权限...

产品服务等级协议

1.3服务不可用分钟数：当某一分钟内，客户所有试图与指定区域的数据资源平台实例建立连接的连续尝试均失败，则视为该分钟内该账号该区域的数据资源平台实例服务不可用。在一个服务周期内同一区域内数据资源平台实例不可用分钟数之和即服务...

账号类型

数据库账号数据库数据库账号在权限范围内用于对数据库进行操作，例如创建/删除数据库、连接数据库、创建/删除表、创建/删除视图等。数据库账号包括：高权限账号普通账号服务账号 AnalyticDB MySQL 集群当您在使用 AnalyticDB MySQL ...

通过RAM角色授权模式配置数据源

因此，云账号负责人可以为大数据团队创建自定义角色 BigDataOssRole，并限制可以使用角色的人员为大数据团队的相关人员，实现团队间的权限管控。创建自定义角色。本案例示例创建可信实体为阿里云账号、角色名称为 BigDataOssRole 的自定义...

DescribeAccounts-查询账号信息

查询指定云数据库ClickHouse集群的数据库账号信息。调试您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试授权信息下表是API对应的授权信息，可以在RAM权限...

DataWorks on EMR数据安全方案

在大数据领域，阿里云为企业用户提供了一整套数据安全方案，包含用户认证、数据权限、大数据作业管理体系等。本文以联合使用DataWorks与EMR为例，为您介绍DataWorks on EMR场景下的数据安全方案。背景信息 DataWorks on EMR目前支持LDAP...

入门概述

快速使用说明准备工作：在使用数据资源平台前，需要完成的准备工作，具体操作，请参见创建阿里云账号和购买及登录数据资源平台。配置租户角色：在系统设置模块中为本账号配置租户角色，具体操作，请参见配置租户角色。新建工作组：在...

解决方案

数据资源平台中的数据标准、数据模型、数据加工场景、数据服务API、云计算资源配置等资产，经过验证最终可沉淀为一个特定的解决方案。支持通过不同的创建方式，灵活的选择解决方案中包含的内容。依托数据资源平台中管理的大量元数据，确保...

连接到数据库

数据库账号数据库的授权账号名称。数据库密码数据库账号名对应的密码。说明您可以选中记住密码，方便之后再次登录时，无需输入对应的数据库账号和密码即可自动登录。管控模式可选择自由操作、稳定变更或安全协同。说明首次通过DMS...

功能简介

数据资源平台中的数据标准、数据模型、数据加工场景、数据服务API、云计算资源配置等资产，经过验证最终可沉淀为一个特定的解决方案。支持通过不同的创建方式，灵活的选择解决方案中包含的内容。依托数据资源平台中管理的大量元数据，确保...

连接集群

cc-bp16qwvp7hy8i*数据库账号数据库的登录账号。test 数据库密码数据库账号对应的密码。123456Aa 记住密码勾选记住密码，下次登录此云数据库ClickHouse 集群时，无需重复输入账号密码即可自动登录。勾选记住密码说明首次通过DMS登录...

创建数据源

数据库账号数据库用户名：在租户中创建的账号（MySQL 模式下，该账户必须具有访问默认数据库的权限）。数据库密码：在租户中创建的账号的密码。单击数据库密码框后的测试连接按钮，测试是否能够连接到目标数据库。环境用户根据需求选择...

通过DMS连接ClickHouse

数据库账号数据库的登录账号。数据库密码数据库账号对应的密码。记住密码勾选记住密码，下次登录此云数据库ClickHouse 集群时，无需重复输入账号密码即可自动登录。说明首次通过DMS登录云数据库ClickHouse 集群时，管控模式默认为 ...

DMS数据可视化

数据库账号数据库的登录账号。数据库密码数据库账号对应的密码。记住密码勾选记住密码，下次登录此云数据库 SelectDB 版实例时，无需重复输入账号密码即可自动登录。管控模式支持如下管控模式：自由操作稳定变更安全协同详细信息...

数据标准

数据是由特定的环境产生的，这些环境因素包括生产者、时间、系统等，从而造成了同一个语义的数据，有多种不同的定义方法，给后期进行数据汇集和整合带来障碍。因此，数据处理的前奏就是数据标准化，数据标准作为一个统一的数据共识，在标准...

注册EMR集群至DataWorks

背景信息开源大数据开发平台 E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理数据。EMR还...

PolarDB MySQL版迁移至ClickHouse集群

数据传输服务DTS（Data Transmission Service）支持将 PolarDB MySQL版集群迁移至ClickHouse集群，帮助您实现数据地流转，将企业数据集中分析。前提条件已创建20.8及以上版本的目标ClickHouse集群，详情请参见新建集群。说明 ClickHouse...

PolarDB MySQL版同步至ClickHouse集群

数据传输服务DTS（Data Transmission Service）支持将 PolarDB MySQL版集群同步至ClickHouse集群，帮助您轻松实现数据的流转，将企业数据集中分析。前提条件已创建20.8及以上版本的目标ClickHouse集群，详情请参见新建集群。说明 ...

功能特性

产品优势跨账号备份将数据库从账号A备份到账号B，可用于数据迁移、跨账号数据共享等场景。跨阿里云账号备份恢复数据操作审计监控并记录阿里云账号下备份恢复任务的操作审计记录。操作审计库表恢复指定恢复部分库表数据，无需恢复全部...

限制说明

企业账号中心功能限制说明。企业账号中心对各管理内容限制如下：分类限制数量提升方式说明集团企业 1 无关联企业有且只有1个集团企业组织目录最大层级 5 无组织目录最大层级限制企业组织节点数量 1000 无企业组织节点数量最大...

准备环境

为保证您可以顺利完成本次实验，请您首先确保自己云账号已开通大数据计算服务MaxCompute、数据工场DataWorks和人工智能平台 PAI。前提条件注册阿里云账号，详情请参见注册阿里云账号。实名认证，详情请参见个人实名认证背景信息本次...

概览

为了更好地指导您使用数据管理DMS（Data Management），DMS推出解决方案系列文档，旨在通过最佳实践（Step by Step）的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 DMS为在线流程化系统，可统一管理企业内...

配置资源组与网络连通

场景二：数据库与DataWorks工作空间同阿里云主账号、不同的地域场景三：数据库与DataWorks工作空间使用不同阿里云主账号数据源不在阿里云 IDC数据源非阿里云的云数据库场景四：数据库在IDC 通过公网访问数据源-独享数据集成资源组有...

PolarDB MySQL版迁移至Kafka

数据库账号填入源 PolarDB MySQL版实例的数据库账号，权限要求请参见数据库账号的权限要求。数据库密码填入该数据库账号对应的密码。连接方式请根据实际情况选择。更多关于SSL加密功能的信息，请参见设置SSL加密。目标库信息选择已...

大数据实验平台账号

新品推荐