E-MapReduce本地盘实例大规模数据集测试
本文介绍如何使用阿里云E-MapReduce搭建本地盘机型集群节点，并进行大数据基准性能测试。应用范围 需要使用阿里云E-MapReduce+本地盘进行大数据业务前进行性能测试的用户。需要将线下自建大数据集群迁移到阿里云云上E-MapReduce+本地盘进行...
技术架构选型
本教程中使用阿里云大数据产品Dataphin配合MaxCompute，完成整体的数据建模和研发流程。完整的技术架构如下图所示。其中，Dataphin的数据集成及同步负责完成源业务系统数据引入。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
DataWorks交流钉钉群
DataWorks作为阿里云大数据平台操作系统，对接各种大数据计算引擎，以all in one box的方式提供专业高效、安全可靠的全域智能大数据平台，高效率完成数据全链路研发流程，建设企业数据治理体系，同时提供优质高效的交流服务，本文为您介绍...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的...
最佳实践概览
场景 文档链接 Elasticsearch迁移 迁移方案选取指南 阿里云Elasticsearch间数据迁移 通过reindex迁移数据 基于reindex实现低版本多type数据迁移 自建Elasticsearch数据迁移 通过OSS将自建Elasticsearch数据迁移至阿里云 通过阿里云Logstash...
什么是阿里云Cloudera CDP
企业数据云平台Cloudera Data Platform（简称阿里云CDP），是阿里云和Cloudera联合打造的阿里云上的大数据平台。Cloudera CDP企业数据云...完全节省您自行部署集群大数据软件的成本。基于阿里云部署的CDP白皮书 基于阿里云部署的CDP白皮书.pdf
DataWorks on EMR数据安全方案
在大数据领域，阿里云为企业用户提供了一整套数据安全方案，包含用户认证、数据权限、大数据作业管理体系等。本文以联合使用DataWorks与EMR为例，为您介绍DataWorks on EMR场景下的数据安全方案。背景信息 DataWorks on EMR目前支持LDAP...
数据迁移方案概览
云数据库PolarDB提供了多种数据迁移方案，可满足不同上云、迁云的业务需求，使您可以在不影响业务的情况下平滑将数据库迁移至阿里云云数据库PolarDB上面。通过使用阿里云 数据传输服务（DTS），您可以实现PolarDB的结构迁移、全量迁移等。...
如何迁移到DBFS？
本文档主要为您说明在使用阿里云数据库存储DBFS时，如何方便的将数据库迁移到DBFS上。一般存在以下几种常用的方式：主备同步：搭建主备库，通过binary log同步数据到自建于DBFS上的数据库。DTS：使用阿里云产品DTS，将数据迁移到自建于DBFS...
数据迁移方案概览
RDS提供了多种数据迁移方案，可满足不同上云或迁云的业务需求，使您可以在不影响业务的情况下平滑将数据库迁移至阿里云云数据库RDS上面。通过使用阿里云 数据传输服务（DTS），您可以实现SQL Server数据库的结构迁移和全量迁移。下表列出了...
快速体验
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
什么是EMR on ACK
阿里云E-MapReduce（简称EMR）on ACK提供了全新构建大数据平台的方式。您可以将开源大数据服务部署在阿里云容器服务Kubernetes版（ACK）之上，利用ACK在服务部署和容器应用管理的优势，减少对底层集群资源的运维投入，以便于您可以更加专注...
JindoData版本说明
JindoData是阿里云开源大数据团队自研的数据湖存储加速套件，面向大数据和AI生态，为阿里云和业界主要数据湖存储系统提供全方位访问加速解决方案。本文为您介绍JindoData各版本支持的功能。背景信息 JindoData是原阿里云EMR SmartData组件...
创建阿里云账号
在阿里云控制台页面，鼠标悬停至右上方的用户图像，单击 AccessKey管理。在 安全提示 对话框中，选择 继续使用AccessKey，为主账号创建AccessKey。如果选择 开始使用子用户AccessKey，则系统进入创建子账号页面，您可以为子账号创建...
准备环境
实名认证，详情请参见 个人实名认证 背景信息 本次实验涉及的阿里云产品如下：大数据计算服务 MaxCompute 数据工场 DataWorks 人工智能平台 PAI MaxCompute DataWorks PAI 开通大数据计算服务MaxCompute 说明 如果您已经开通MaxCompute，请...
ETL工作流快速体验
案例提供的数据仅用于阿里云大数据开发治理平台DataWorks数据应用体验。仅 空间管理员 角色可导入ETL模板至目标工作空间。如需给账号授予空间管理员角色，请参见 空间级模块权限管控。导入ETL工作流模板 您可以将DataWorks ETL工作流模板...
快速入门
本文介绍大数据专家服务的购买方式。价格 版本定价说明：点击查看价格。操作步骤 第一步：进入阿里云官网，打开 大数据专家服务 产品详情。第二步：点击大数据专家服务产品详情页中的“咨询购买”接入钉群与专家服务同学沟通场景需求。第三...
将云消息队列 Kafka 版的数据迁移至MaxCompute
本文介绍如何使用DataWorks数据同步功能，将 云消息队列 Kafka 版 集群上的数据迁移至阿里云大数据计算服务MaxCompute，方便您对离线数据进行分析加工。前提条件 在开始本教程前，确保您在同一地域中已完成以下操作：云消息队列 Kafka 版 ...
相关的云服务
DataWorks作为阿里云一站式大数据开发与治理平台，通常会与计算引擎产品联合使用，此外使用DataWorks进行数据集成时通常联合进行数据传输的数据源产品一起使用。本文为您介绍典型场景下，使用DataWorks时通常会使用到的其他云产品。计算...
SmartData常见问题
JindoFS是阿里云开源大数据E-MapReduce产品提供的一套Hadoop文件系统，主要对Hadoop和Spark大数据生态系统使用阿里云OSS提供多层次的封装支持和优化。基础功能提供适配OSS和支持访问，您可以直接使用JindoFS SDK；标准功能针对OSS提供分布...
服务等级说明
服务等级说明 数据总线服务等级协议 本服务等级协议（Service Level Agreement，以下简称“SLA”）规定了阿里云向客户提供的数据总线（简称“数据总线”）的服务可用性等级指标及赔偿方案。1.定义 1.1 服务周期 一个服务周期为一个自然月。...
客户案例
MaxCompute已被广泛应用于各大领域处理云上大数据，帮助众多企业解决了海量数据分析问题，同时降低企业运维成本，企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息，请参见 行业客户案例...
发送出去的邮件接收方重复收取
多数情况下表示发送过程正常并无重复投递，在已发送文件夹查看邮件投递状态的方法，可参考如下图所示：已发送文件夹中，所查询的邮件如并无重复投递，接收方收取邮件重复的状态下，可参考 阿里邮箱为什么客户端软件出现重复收取邮件的情况 ...
Tair（Redis企业版）简介
阿里云数据库Redis企业版（又称阿里云Tair），是基于阿里集团内部使用的Tair产品研发的云上托管企业级内存数据库，从2009年开始正式承载阿里集团业务，历经天猫双十一、优酷春晚、菜鸟、高德等业务场景的磨练，是一款真正的企业级内存数据...
本地邮件数据迁移Outlook+IMAP
本文旨在对某些企业原邮箱数据只保存在本地的用户，通过Outlook客户端配置IMAP模式反传本地邮件数据到阿里邮箱的操作说明。顺序：步骤：说明 大部分版本的Outlook已不支持同时配置多个相同地址的账号，即便服务器地址不一致。可以通过给...
便宜易用
即开即用 您无需购置数据库服务器硬件或软件，节省大量成本。开始使用RDS，只需通过 阿里云控制台 或者 API 创建指定规格的RDS实例，在数分钟内即可生成RDS实例。透明兼容 RDS与原生数据库引擎的使用方法一致，您无需二次学习，上手即用。...
从Amazon RDS for PostgreSQL全量迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将Amazon RDS for PostgreSQL全量迁移至阿里云RDS PostgreSQL。前提条件 Amazon RDS for PostgreSQL的数据库版本为9.4或以上版本。为保障DTS能够通过公网连接至Amazon RDS ...
无法发送邮件的排查方法
4、用客户端发邮件无法发送，请检查客户端设置，可参见 第三方邮件客户端登录阿里邮箱时POP3和IMAP协议的设置方法，根据不同的客户端，进行相应的配置检查。5、如发送邮件后收到退信邮件，在收到系统退信邮件后，可先打开查看系统退信的...
从Amazon RDS for PostgreSQL增量迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将Amazon RDS for PostgreSQL迁移至阿里云RDS PostgreSQL。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，...
阿里云数据源MySQL
添加MySQL数据源用于连通阿里云MySQL数据库与Quick BI，连接成功后，您可以在Quick BI上进行数据的分析与展示。Quick BI支持以公网或阿里云VPC的方式连接阿里云MySQL，本文为您介绍如何添加阿里云MySQL数据源。前提条件 已创建阿里云MySQL...
数据导入与迁移
HBase增强版支持从阿里云RDS，MySQL，不同HBase版本（含阿里云HBase和自建HBase集群）导入数据，并进行实时的增量同步，也支持将数据迁移到不同版本的HBase中。数据的导入和迁移，都是基于LTS服务实现。RDS增量数据同步 通过BDS数据同步...
快速入门
如果您初次使用阿里云关系型数据库RDS，请参见快速入门系列文档，帮助您快速上手RDS。MySQL快速入门 SQL Server快速入门 PostgreSQL快速入门 MariaDB快速入门 数据库引擎 以下是对四种数据库引擎的介绍：云数据库RDS MySQL MySQL是全球受...
数据源配置常见问题
什么情况下DataV不能直接使用API数据源，只能使用阿里云API网关数据源？API的调用方式多种多样，DataV无法直接调用所有的API，但可将这些API通过阿里云API网关进行托管，DataV对接阿里云API网关即可调用API。您可以根据实际情况进行选择...
数据源配置常见问题
什么情况下DataV不能直接使用API数据源，只能使用阿里云API网关数据源？API的调用方式多种多样，DataV无法直接调用所有的API，但可将这些API通过阿里云API网关进行托管，DataV对接阿里云API网关即可调用API。您可以根据实际情况进行选择...
配置资源组与网络连通
在数据同步任务配置前，您需要确保用于执行同步任务的独享数据集成资源组与您将要同步的数据来源端与目的端数据库的网络连通性，您可以根据数据库所在网络环境，选择合适的网络解决方案来实现网络连通。本文为您介绍数据库在不同网络环境中...
使用OpenAPI
本文为您介绍使用 云原生数据仓库AnalyticDB PostgreSQL版 OpenAPI的基本信息及注意事项。关于使用阿里云OpenAPI的详细介绍，请参见 使用OpenAPI。基本信息 版本说明 版本号 说明 2016-05-03 AnalyticDB PostgreSQL版 实例使用该版本号调用...
从Amazon RDS for PostgreSQL全量迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将Amazon RDS for PostgreSQL全量迁移至阿里云RDS PostgreSQL。前提条件 Amazon RDS for PostgreSQL的数据库版本为9.4或以上版本。为保障DTS能够通过公网连接至Amazon RDS ...
使用OpenAPI
本文为您介绍使用 云原生数据仓库AnalyticDB MySQL版 OpenAPI的基本信息及注意事项。关于使用阿里云OpenAPI的详细介绍，请参见 使用OpenAPI。基本信息 版本说明 版本号 说明 2019-03-15 数仓版（3.0）集群使用该版本号调用API。2021-12-01 ...
- 产品推荐
- 这些文档可能帮助您