对接使用CDH与CDP
以下简称 CDH）与CDP（Cloudera Data Platform，以下简称CDP）集群对接的能力，在保留CDH集群或CDP集群作为存储和计算引擎的前提下，您可以使用DataWorks的任务开发、调度、数据地图（元数据管理）和数据质量等一系列的数据开发和治理功能...
什么是加速上云连接服务
基本概念 术语 说明 ENA接入点 ENA提供的，分布于全国各主要城市的网络接入点。ENA接入线路 ENA可提供本地和长途的接入线路，取决于客户企业IDC/企业内网是否与ENA接入点所处同一个城市。ENA虚拟连接 ENA通过软件定义网络（Software-...
DataWorks节点合集
DataWorks集成的引擎 DataWorks对引擎能力的封装 MaxCompute 开发ODPS SQL任务 开发ODPS Spark任务 开发PyODPS 2任务 开发PyODPS 3任务 开发ODPS Script任务 开发ODPS MR任务 引用SQL组件 E-MapReduce EMR Presto节点 EMR Hive节点 EMR MR...
测试分析方案报告
项目整体分析 功能性需求测试分析 术语表 下表将为您介绍产品需求文档中的术语并给出定义，避免由于对术语理解不一致而导致漏测或错误。名称 说明 PRD、指标需求清单与测试功能对应列表 详细描述数据测试指标需求。指标名称 字段来源 业务...
URL 列表分析
URL 列表支持从失败率、平均下载速度、总请求用时、首包用时、传输用时五个维度展示 Top 100 的资源请求 URL 及其网络指标监控数据，包括总请求用时、请求数、独立 IP 数、DNS 用时、TCP 用时、SSL 用时、发送用时、平均下载速度等。...
创建EMR Hive节点
您可以创建EMR（E-MapReduce）HIVE节点，通过类SQL语句协助读写、管理存储在分布式存储系统上的大数据集的数据仓库，完成海量日志数据的分析和开发工作。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务...
创建EMR Impala节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云EMR集群，并注册EMR集群至DataWorks。创建EMR相关节点并开发EMR任务前，您需要先将...
创建ClickHouse数据源
后续操作 数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供ClickHouse任务的开发与调度能力，若您需要基于该ClickHouse数据源进行ClickHouse任务开发，或周期性调度...
基础概念
表：术语表 术语 概念 TPP 个性化算法开发平台（The Personalization Platform，简称），面向算法和工程同学，支持召回、在线预测等业务编排的开发平台，专注于推荐、搜索、广告行业。提供成熟的工程框架，帮助算法从资源管理、运维中解决...
术语解释
性能分析服务相关术语的解释。术语 说明 冷启动 指启动一个全新的移动应用进程。热启动 指进程仍在后台运行的移动应用，被重新唤醒。品牌 指设备的品牌。机型 指设备的型号。运营商 指设备所属的网络服务供应商。渠道 指在SDK中配置的应用...
创建EMR Spark SQL节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云EMR集群，并注册EMR集群至DataWroks。创建EMR相关节点并开发EMR任务前，您需要先将...
创建Hologres数据源
数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供Hologres任务的开发与调度能力，若您需要基于该Hologres数据源进行Hologres任务开发，或周期性调度Hologres相关任务，需先...
创建AnalyticDB for MySQL3.0数据源
若您要使用DataWorks进行AnalyticDB for MySQL3.0任务的开发、管理，需先将您的AnalyticDB for MySQL3.0实例创建为DataWorks的AnalyticDB for MySQL3.0数据源。创建完成后，可在DataWorks的各功能模块使用该数据源连接AnalyticDB for MySQL...
创建AnalyticDB for PostgreSQL数据源
若您要使用DataWorks进行AnalyticDB for PostgreSQL任务的开发、管理，需先将您的AnalyticDB for PostgreSQL实例创建为DataWorks的AnalyticDB for PostgreSQL数据源。创建完成后，可在DataWorks的各功能模块使用该数据源连接AnalyticDB for...
创建MaxCompute数据源
数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供MaxCompute任务的开发与调度能力，若您需要基于该MaxCompute数据源进行MaxCompute任务开发，或周期性调度MaxCompute相关...
API概览
我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可通过签名机制进行自签名对接。由于自签名细节非常复杂，需花费 5个工作日左右。因此建议加入...
创建CDH Hive节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云CDH集群，并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将...
基础术语
中文 英文 说明 工作空间 Workspace 一个工作空间的本质是指“网络互通、安全策略一致、访问延时极小”的一组资源。您可以通过环境方便地将资源进行分组管理，例如：根据不同的研发交付需求，将环境划分为开发环境、测试环境、生产环境等。...
创建CDH Spark节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云CDH集群，并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将...
创建CDH Presto节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云CDH集群，并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将...
创建EMR Presto节点
Presto（即PrestoDB）是一款灵活、可扩展的分布式SQL查询引擎，支持使用标准的SQL查询语言进行大数据的交互式分析查询（Presto概述），DataWorks为您提供EMR Presto节点，便于您在DataWorks上进行Presto任务的开发和周期性调度。...
扩展程序概述
产品能力 DataWorks作为阿里云一站式大数据开发与治理平台，在各项能力支持上预设了很多拓展点，例如，在标准模式下，简略来看，节点创建后完成代码开发后，需先提交到开发环境中进行验证，完成后再正式发布到生产环境中，后续每天根据调度...
ClickHouse SQL
已开通独享调度资源组，并且独享调度资源组需要绑定ClickHouse集群所在的VPC专有网络，详情请参见 新增和使用独享调度资源组。说明 仅支持使用独享调度资源组运行ClickHouse SQL节点任务。步骤一：创建 ClickHouse SQL节点 进入数据开发...
开发小助手的功能
开发小助手提供的功能可分为三类：mPaaS 工具、诊断工具、常用工具。mPaaS 工具 mPaaS 工具类包含 离线包中心、环境切换、启动速度 和 埋点日志 四个功能。说明：mPaaS 工具类功能要求您将开发工程接入 mPaaS。离线包中心 在离线包中心，您...
DataWorks On CDP/CDH使用说明
新增和使用独享调度资源组 二、开发环境准备 您需先在DataWorks工作空间注册 CDP或CDH 集群，才可在数据开发（DataStudio）进行数据开发工作，并以工作空间为单位管理空间成员，以便进行协同开发。类别 描述 相关文档 数据同步环境准备 ...
创建CDH MR节点
在DataWorks任务开发中，您可以通过创建CDH MR（MapReduce）节点处理超大规模的数据集。本文为您介绍如何在DataWorks中创建并使用CDH MR节点。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务流程对不同...
系统权限申请与使用说明
移动开发平台 mPaaS 不会默认开启这些权限，仅在您主动确认开启的情况下，移动开发平台 mPaaS 才有可能通过这些权限收集您的信息。重要 移动开发平台 mPaaS 获取具体某一项权限并不代表移动开发平台 mPaaS 必然会收集您的信息；即使您已经...
产品概述
术语定义 金融级人脸检测相关术语定义如下表所示。术语 说明 认证场景 您的用户通过应用页面进行认证的具体情境，例如：登录认证、支付认证等。应用服务端 您开发的应用的服务器端。应用服务端用以实现应用的各种逻辑。应用客户端 您开发的...
基本概念
本术语表按拼音首字母对术语进行排序。埋点 埋点指针对特定用户行为或事件进行捕获、处理和上报的相关技术及其实施过程。在应用中收集一些信息，用来跟踪应用使用的状况，后续用来进一步优化产品或是为运营提供数据支撑，包括访问数、访客...
术语
本文介绍 云原生数据库PolarDB 使用过程中遇到的术语。地域（Region）数据中心所在的地理位置。可用区（Zone）可用区是指在某一地域内，具有独立电力和网络的物理区域。同一可用区内实例之间的网络延时更小。集群（Cluster）PolarDB 采用多...
创建EMR Kyuubi节点
DataWorks的EMR Kyuubi节点可进行Kyuubi任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用EMR Kyuubi节点进行任务开发的主要流程。背景信息 Apache Kyuubi是一个分布式和多租户网关，为数据湖查询引擎（例如Spark、...
DataWorks On EMR使用说明
新增和使用独享调度资源组 二、开发环境准备 您需先在DataWorks工作空间注册EMR集群，才可在数据开发（DataStudio）进行数据开发工作，并以工作空间为单位管理空间成员以便进行协同开发。类别 描述 相关文档 注册EMR集群 基于DataWorks进行...
术语表
本文介绍云原生分布式关系型数据库PolarDB-X使用过程中遇到的术语。控制台术语 名词 描述 地域 数据中心所在的地理位置。可用区 可用区是指在某一地域内，具有独立电力和网络的物理区域。同一可用区内实例之间的网络延时更小。集群（实例）...
什么是专有网络
专有网络是您专有的云上私有网络。您可以完全掌控自己的专有网络，例如选择IP地址范围、配置路由表和网关等，您可以在自己定义的专有网络中使用阿里云资源，如云服务器ECS（Elastic Compute Service）、云数据库RDS（Relational Database ...
基础术语
术语 说明 应用 泛指用于组成业务系统的应用，可以为单体应用也可以为基于分布式框架构成的微服务应用。应用拓扑 拓扑是对应用间调用关系和依赖关系的可视化展示。SOFATracer SOFATracer 是一个用于分布式系统调用跟踪的组件，通过统一的 ...
准备工作：获取CDH或CDP集群信息并配置网络连通
DataWorks提供了与CDH（Cloudera’s Distribution Including Apache Hadoop，以下简称CDH）和CDP（Cloudera Data Platform，以下简称CDP）集群对接的能力，您可在DataWorks中注册CDH及CDP集群，进行任务开发、调度、数据地图（元数据管理）...
DataWorks On MaxCompute使用说明
节点代码定义：MaxCompute语法 创建并使用MaxCompute表 开发ODPS SQL任务 引用SQL组件 开发ODPS Spark任务 开发PyODPS 2任务 开发PyODPS 3任务 开发ODPS Script任务 开发ODPS MR任务 创建并使用MaxCompute资源 创建并使用自定义函数 您可...
术语解释
本文介绍文档中出现的术语解释。术语 解释 适用场景 JAVA CRASH 发生在Java代码层的崩溃。Android端崩溃 NATIVE CRASH 发生在Native代码（C/C++）层的崩溃。Android端崩溃 Abort 未能通过进程退出信号量捕捉到的App非正常退出。iOS端崩溃 ...
Data Lake Analytics节点
操作步骤 进入 数据开发 页面。登录 DataWorks控制台。在左侧导航栏，单击 工作空间列表。选择工作空间所在地域后，单击相应工作空间后的 快速进入>数据开发。鼠标悬停至 图标，单击 新建节点>自定义>Data Lake Analytics。您也可以打开...
基础术语
术语 说明 TEE TEE（Trusted Execution Environment）可信执行环境是 Intel SGX 处理器内存中的一个与外界完全隔离的安全执行环境，可以保证其中执行代码和用户数据的安全性、机密性和完整性。MYVM MYVM 是蚂蚁区块链自研的 WASM 虚拟机。...
- 产品推荐
- 这些文档可能帮助您