创建MaxCompute数据源
数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供MaxCompute任务的开发与调度能力，若您需要基于该MaxCompute数据源进行MaxCompute任务开发，或周期性调度MaxCompute相关...
API概览
我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可通过签名机制进行自签名对接。由于自签名细节非常复杂，需花费 5个工作日左右。因此建议加入...
基本概念
术语 说明 专有网络（VPC）专有网络VPC是您基于阿里云创建的自定义私有网络，不同的专有网络之间逻辑上彻底隔离。您可以在自己创建的专有网络内创建和管理云资源，例如云服务器ECS（Elastic Compute Service）、负载均衡SLB（Server Load ...
扩展程序概述
产品能力 DataWorks作为阿里云一站式大数据开发与治理平台，在各项能力支持上预设了很多拓展点，例如，在标准模式下，简略来看，节点创建后完成代码开发后，需先提交到开发环境中进行验证，完成后再正式发布到生产环境中，后续每天根据调度...
创建CDH Spark节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云CDH集群，并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将...
ClickHouse SQL
已开通独享调度资源组，并且独享调度资源组需要绑定ClickHouse集群所在的VPC专有网络，详情请参见 新增和使用独享调度资源组。说明 仅支持使用独享调度资源组运行ClickHouse SQL节点任务。步骤一：创建 ClickHouse SQL节点 进入数据开发...
创建CDH Hive节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云CDH集群，并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将...
创建CDH Presto节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云CDH集群，并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将...
创建EMR Presto节点
Presto（即PrestoDB）是一款灵活、可扩展的分布式SQL查询引擎，支持使用标准的SQL查询语言进行大数据的交互式分析查询（Presto概述），DataWorks为您提供EMR Presto节点，便于您在DataWorks上进行Presto任务的开发和周期性调度。...
系统权限申请与使用说明
移动开发平台 mPaaS 不会默认开启这些权限，仅在您主动确认开启的情况下，移动开发平台 mPaaS 才有可能通过这些权限收集您的信息。重要 移动开发平台 mPaaS 获取具体某一项权限并不代表移动开发平台 mPaaS 必然会收集您的信息；即使您已经...
什么是专有网络
专有网络是您专有的云上私有网络。您可以完全掌控自己的专有网络，例如选择IP地址范围、配置路由表和网关等，您可以在自己定义的专有网络中使用阿里云资源，如云服务器ECS（Elastic Compute Service）、云数据库RDS（Relational Database ...
DataWorks On CDP/CDH使用说明
新增和使用独享调度资源组 二、开发环境准备 您需先在DataWorks工作空间注册 CDP或CDH 集群，才可在数据开发（DataStudio）进行数据开发工作，并以工作空间为单位管理空间成员，以便进行协同开发。类别 描述 相关文档 数据同步环境准备 ...
创建CDH MR节点
在DataWorks任务开发中，您可以通过创建CDH MR（MapReduce）节点处理超大规模的数据集。本文为您介绍如何在DataWorks中创建并使用CDH MR节点。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务流程对不同...
准备工作：获取CDH或CDP集群信息并配置网络连通
DataWorks提供了与CDH（Cloudera’s Distribution Including Apache Hadoop，以下简称CDH）和CDP（Cloudera Data Platform，以下简称CDP）集群对接的能力，您可在DataWorks中注册CDH及CDP集群，进行任务开发、调度、数据地图（元数据管理）...
Data Lake Analytics节点
操作步骤 进入 数据开发 页面。登录 DataWorks控制台。在左侧导航栏，单击 工作空间列表。选择工作空间所在地域后，单击相应工作空间后的 快速进入>数据开发。鼠标悬停至 图标，单击 新建节点>自定义>Data Lake Analytics。您也可以打开...
DataWorks On EMR使用说明
新增和使用独享调度资源组 二、开发环境准备 您需先在DataWorks工作空间注册EMR集群，才可在数据开发（DataStudio）进行数据开发工作，并以工作空间为单位管理空间成员以便进行协同开发。类别 描述 相关文档 注册EMR集群 基于DataWorks进行...
预置小程序包
实现动态更新 在推出新版本或紧急发布时，可以在小程序 IDE 中进行迭代开发，通过 mPaaS 控制台发布，客户端中集成的小程序 SDK 会自动将小程序更新到最新的版本。这种发布无需通过应用商店审核，可以让用户及早接收到更新。前提条件 您已...
DataWorks On MaxCompute使用说明
节点代码定义：MaxCompute语法 创建并使用MaxCompute表 开发ODPS SQL任务 引用SQL组件 开发ODPS Spark任务 开发PyODPS 2任务 开发PyODPS 3任务 开发ODPS Script任务 开发ODPS MR任务 创建并使用MaxCompute资源 创建并使用自定义函数 您可...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
创建EMR Shell节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云EMR集群，并注册EMR集群至DataWorks。创建EMR相关节点并开发EMR任务前，您需要先将...
移动分析简介
组件特点 极简接入：引入移动分析组件便可自动搜集用户行为日志、网络日志、异常日志，简单方便。全面分析：具备用户行为、终端问题、流量、电量、通讯链路、性能等多个目标的分析角度。多维度展现：可以从终端类型、终端版本、地域、网络...
容器数据库
容器数据库 概要介绍 WordPress 是比较流行的建站平台,这个案例就是体验在云开发平台下部署WordPress的过程，超酷！业务功能介绍 该方案部署WordPress，然后通过WordPress的建站平台能力，建立自己的站点。应用架构说明 WordPress需要的...
产品架构
本篇为您介绍阿里云自动驾驶云开发平台整体架构。阿里云自动驾驶云开发平台由上层工具链和开放平台原子能力构成。开放平台供应数据、仿真、车云协同采集等在云端自动驾驶研发体系需要的原子能力：工具链产品提供自动驾驶云上数据处理、云...
产品计费
运行环境 3个（预览、开发、生产）/应用 3个（预览、开发、生产）/应用 3个（预览、开发、生产）/应用 3个（预览、开发、生产）/应用 3个（预览、开发、生产）/应用 应用数扩展-√页面搭建√数据建模√前后端逻辑编排√工作流编排√应用...
产品优势
DataWorks具有强大的基础能力，可以为您大幅...支持复杂网络环境、常见数据源的数据同步上云以及实时、历史数据的批量与增量同步。在数据源性能不受限情况下，让您的同步速度达到万兆。支持单用户千万级别的复杂任务调度，让数据加工更流畅。
创建EMR Spark节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云EMR集群，并注册EMR集群至DataWorks。创建EMR相关节点并开发EMR任务前，您需要先将...
创建CDH Impala节点
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。右键单击某个业务流程，选择 新建节点>CDH>CDH Impala。说明 鼠标悬停至顶部 新增 按钮，根据界面...
DataWorks模块使用说明
使用流程概览：参考文档：DataWorks数据建模 子模块：数据开发（DataStudio）功能说明：数据开发（DataStudio）是一站式大数据开发平台，支持在线开发MaxCompute、EMR、Hologres、CDP、ADB等多种大数据引擎的数据处理任务。它集成了强大的...
开发小助手的功能
开发小助手提供的功能可分为三类：mPaaS 工具、诊断工具、常用工具。mPaaS 工具 mPaaS 工具类包含 离线包中心、环境切换、启动速度 和 埋点日志 四个功能。说明：mPaaS 工具类功能要求您将开发工程接入 mPaaS。离线包中心 在离线包中心，您...
基本概念
产品名词解释 名词 描述 IoT Studio 物联网应用开发（IoT Studio）是阿里云物联网平台的一部分，提供了Web可视化开发、移动可视化开发、业务逻辑开发与物联网数据分析等一系列便捷的物联网开发工具。Web可视化开发 IoT Studio提供的开发...
数据集成：全领域数据汇聚
DataWorks的数据集成功能模块是稳定高效、弹性伸缩的数据同步平台，致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力。功能概述 DataWorks数据集成支持离线同步、实时同步，以及离线和实时一体化的全增量同步...
移动性能监控简介
移动性能监控（Application Performance Management，APM）是移动开发平台（mPaaS）提供的一款集移动应用性能数据采集、分析、监控于一体的应用性能运维产品，支持实时检测、分析并可视化展示应用各项性能指标统计数据。通过对移动客户端、...
产品特点
本文为您介绍阿里云自动驾驶开发平台产品的核心优势。开放灵活 不绑定车上平台提供商，可适配用户任何的车上系统输出的数据格式 不绑定算法供应商，用户可自行上传预标注、数据预处理、格式转换等算法在平台上运行 不绑定工具链内各模块，...
热修复分析
指标说明 热修复分析相关指标说明见下表：指标 说明 RPC 开始数 通过网络发送下载补丁文件的 RPC 请求的总次数。RPC 成功数 成功发送下载补丁文件的 RPC 请求的次数。热修复开始数 所有设备加载补丁的次数。热修复成功数 所有设备成功加载...
阶段一：基础防护建设
在该阶段，DataWorks为您提供了数据分类分级、规范数据开发流程、企业级身份认证、开源身份隔离等多个场景的最佳实践，帮助企业做好数据安全治理的相关基础防护工作。场景一：数据分级分类 无论在任何行业，数据分级分类都是监管首要检查的...
环境准备
说明 DataWorks的工作空间分为 简单模式 和 标准模式：简单模式：指一个DataWorks工作空间对应一个引擎项目，无法设置开发和生产环境，只能进行简单的数据开发，无法对数据开发流程以及表权限进行强控制。标准模式：指一个DataWorks工作...
如何排查 iOS 推送问题
开发者在应用的开发和发布阶段，可能会遭遇消息推送失败的问题。由于 mPaaS 平台集成了不同渠道的推送功能，当遇到问题时，建议通过控制台进行消息推送的测试。如果消息状态是 Acked，则表示 mPaaS MPS 服务端后台已经把消息推送请求发送到...
DataWorks on EMR Serverless StarRocks最佳实践
DataWorks支持StarRocks数据源，通过数据源对接EMR Serverless StarRocks，可实现EMR Serverless StarRocks的数据集成、开发、分析、数据服务等功能。本文为您介绍EMR Serverless StarRocks在DataWorks上的操作流程。背景信息 了解EMR ...
TestNetworkConnection
调用TestNetworkConnection接口，测试目标数据源与所使用资源组的网络连通性。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选...
注册CDH或CDP集群至DataWorks
DataWorks提供了与CDH（Cloudera’s Distribution Including Apache Hadoop，以下简称CDH）和CDP（Cloudera Data Platform，以下简称CDP）集群对接的能力，您可在DataWorks中注册CDH及CDP集群，进行任务开发、调度、数据地图（元数据管理）...
- 产品推荐
- 这些文档可能帮助您