创建SSH数据源

后续操作 数据源创建完成后,您可根据需要执行如下操作:计算任务开发与调度:DataWorks的数据开发与运维中心模块,为您提供SSH任务的开发与调度能力,您可通过在SSH节点指定具体的SSH数据源的方式远程连接该数据源配置的主机,将 SSH节点 ...

创建EMR Spark SQL节点

您可以通过创建EMR(E-MapReduce)Spark SQL节点,实现分布SQL查询引擎处理结构化数据,提高作业的执行效率。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,...

创建CDH Hive节点

数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。已创建阿里云CDH集群,并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前,您需要先将...

创建CDH Presto节点

该节点提供了分布SQL查询引擎,进一步增强了CDH环境的数据分析能力。本文为您介绍如何创建和使用CDH Presto节点。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作...

创建Hologres数据源

数据源创建完成后,您可根据需要执行如下操作:计算任务开发与调度:DataWorks的数据开发与运维中心模块,为您提供Hologres任务的开发与调度能力,若您需要基于该Hologres数据源进行Hologres任务开发,或周期性调度Hologres相关任务,需先...

创建AnalyticDB for MySQL3.0数据源

若您要使用DataWorks进行AnalyticDB for MySQL3.0任务的开发、管理,需先将您的AnalyticDB for MySQL3.0实例创建为DataWorks的AnalyticDB for MySQL3.0数据源。创建完成后,可在DataWorks的各功能模块使用该数据源连接AnalyticDB for MySQL...

创建EMR Presto节点

Presto(即PrestoDB)是一款灵活、可扩展的分布SQL查询引擎,支持使用标准的SQL查询语言进行大数据的交互分析查询(Presto概述),DataWorks为您提供EMR Presto节点,便于您在DataWorks上进行Presto任务的开发和周期性调度。...

创建AnalyticDB for PostgreSQL数据源

若您要使用DataWorks进行AnalyticDB for PostgreSQL任务的开发、管理,需先将您的AnalyticDB for PostgreSQL实例创建为DataWorks的AnalyticDB for PostgreSQL数据源。创建完成后,可在DataWorks的各功能模块使用该数据源连接AnalyticDB for...

ClickHouse SQL

ClickHouse SQL可实现分布SQL查询及处理结构化数据,提高作业的执行效率。DataWorks的ClickHouse SQL节点可进行ClickHouse SQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用ClickHouse SQL节点进行任务开发的主要...

创建CDH Spark节点

数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。已创建阿里云CDH集群,并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前,您需要先将...

扩展程序概述

产品能力 DataWorks作为阿里云一站大数据开发与治理平台,在各项能力支持上预设了很多拓展点,例如,在标准模式下,简略来看,节点创建后完成代码开发后,需先提交到开发环境中进行验证,完成后再正式发布到生产环境中,后续每天根据调度...

创建CDH MR节点

在DataWorks任务开发中,您可以通过创建CDH MR(MapReduce)节点处理超大规模的数据集。本文为您介绍如何在DataWorks中创建并使用CDH MR节点。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于业务流程对不同...

创建MaxCompute数据源

数据源创建完成后,您可根据需要执行如下操作:计算任务开发与调度:DataWorks的数据开发与运维中心模块,为您提供MaxCompute任务的开发与调度能力,若您需要基于该MaxCompute数据源进行MaxCompute任务开发,或周期性调度MaxCompute相关...

DataWorks On CDP/CDH使用说明

新增和使用独享调度资源组 二、开发环境准备 您需先在DataWorks工作空间注册 CDP或CDH 集群,才可在数据开发(DataStudio)进行数据开发工作,并以工作空间为单位管理空间成员,以便进行协同开发。类别 描述 相关文档 数据同步环境准备 ...

创建EMR Kyuubi节点

DataWorks的EMR Kyuubi节点可进行Kyuubi任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用EMR Kyuubi节点进行任务开发的主要流程。背景信息 Apache Kyuubi是一个分布和多租户网关,为数据湖查询引擎(例如Spark、...

Data Lake Analytics节点

操作步骤 进入 数据开发 页面。登录 DataWorks控制台。在左侧导航栏,单击 工作空间列表。选择工作空间所在地域后,单击相应工作空间后的 快速进入>数据开发。鼠标悬停至 图标,单击 新建节点>自定义>Data Lake Analytics。您也可以打开...

系统权限申请与使用说明

帮助您实现分享「复制链接」等基于剪贴板的相关功能 Contacts 通讯录权限 访问联系人并格式化和本地化联系人信息 用于帮助您实现推荐好友等功能 Device 设备信息 获取设备信息 获取网络类型、生成设备标识参数、用于闪退大盘详情的设备判断...

DataWorks On EMR使用说明

数据建模 数据开发 数据开发(DataStudio)是一站大数据开发平台,支持在线开发EMR数据处理任务。它集成了强大的任务调度能力,能够支持千万级的任务混合编排和调度。此外,还提供了一套任务发布的管控流程,保障任务产出的稳定性。节点...

准备工作:获取CDH或CDP集群信息并配置网络连通

DataWorks提供了与CDH(Cloudera’s Distribution Including Apache Hadoop,以下简称CDH)和CDP(Cloudera Data Platform,以下简称CDP)集群对接的能力,您可在DataWorks中注册CDH及CDP集群,进行任务开发、调度、数据地图(元数据管理)...

DataWorks On MaxCompute使用说明

节点代码定义:MaxCompute语法 创建并使用MaxCompute表 开发ODPS SQL任务 引用SQL组件 开发ODPS Spark任务 开发PyODPS 2任务 开发PyODPS 3任务 开发ODPS Script任务 开发ODPS MR任务 创建并使用MaxCompute资源 创建并使用自定义函数 您可...

使用阿里云OpenAPI

阿里云 OpenAPI 开发者门户是一款集 OpenAPI 智能搜索、OpenAPI 文档、OpenAPI 在线调试、SDK 获取、CodeSample、调用出错诊断、调用统计为一体的产品。此外,您还可以在OpenAPI Explorer 查看自动生成相应 API 的 SDK 调用示例,帮助您...

创建CDH Impala节点

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。右键单击某个业务流程,选择 新建节点>CDH>CDH Impala。说明 鼠标悬停至顶部 新增 按钮,根据界面...

开发小助手的功能

开发小助手提供的功能可分为三类:mPaaS 工具、诊断工具、常用工具。mPaaS 工具 mPaaS 工具类包含 离线包中心、环境切换、启动速度 和 埋点日志 四个功能。说明:mPaaS 工具类功能要求您将开发工程接入 mPaaS。离线包中心 在离线包中心,您...

创建EMR Shell节点

数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。已创建阿里云EMR集群,并注册EMR集群至DataWorks。创建EMR相关节点并开发EMR任务前,您需要先将...

如何排查 iOS 推送问题

开发者在应用的开发和发布阶段,可能会遭遇消息推送失败的问题。由于 mPaaS 平台集成了不同渠道的推送功能,当遇到问题时,建议通过控制台进行消息推送的测试。如果消息状态是 Acked,则表示 mPaaS MPS 服务端后台已经把消息推送请求发送到...

组件化接入方式下的环境配置

在进行客户端开发之前,您首先需要配置开发环境:配置 Windows 开发环境 配置 macOS 开发环境 配置 Linux 开发环境 配置 Windows 开发环境 参考以下说明配置 Windows 开发环境。配置 Java 8 环境 mPaaS 框架只支持 JDK 8 及以上版本。下载...

创建EMR Spark节点

数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。已创建阿里云EMR集群,并注册EMR集群至DataWorks。创建EMR相关节点并开发EMR任务前,您需要先将...

基本概念

产品名词解释 名词 描述 IoT Studio 物联网应用开发(IoT Studio)是阿里云物联网平台的一部分,提供了Web可视化开发、移动可视化开发、业务逻辑开发与物联网数据分析等一系列便捷的物联网开发工具。Web可视化开发 IoT Studio提供的开发...

产品优势

学习成本低 非技术人员1~2小时即可掌握完整的数据开发、治理流程,告别传统命令行,节省巨大的学习成本。让您可以在同一DAG图中,构建异构计算引擎形成混编任务流(数据同步+SQL+MR+MaxCompute Spark+实时计算+ML),无需分别维护各技术栈...

mPaaS 10.2.3 升级指南

安全保障 基于 mPaaS 框架开发 App 时,使用 H5 容器/小程序的 App 会较多使用 JSAPI,建议在打开 URL 时以及使用 JSAPI 时对 URL 进行校验,确保是 App 业务内的 URL 才能进行加载打开或限制 URL 的 JSAPI 调用范围和权限,以防因为未鉴权...

引擎与数据权限管控概述

开发环境的MaxCompute引擎权限:空间级预设角色默认有部分开发环境的MaxCompute引擎权限,即空间级预设角色的用户可直接访问开发环境下MaxCompute表。生产环境的MaxCompute引擎权限:空间级预设角色没有生产环境的MaxCompute引擎权限,如果...

mPaaS 适配 WKWebView

同时苹果在 2019 年 12 月 23 日宣布,App Store 从 2020 年 4 月起不再接受使用 UIWebView 开发的新 App,从 2020 年 12 月起不再接受使用 UIWebview 开发的已有 App 的更新。针对此情况,mPaaS 对 WKWebView 进行了适配,支持您从 ...

注册CDH或CDP集群至DataWorks

DataWorks提供了与CDH(Cloudera’s Distribution Including Apache Hadoop,以下简称CDH)和CDP(Cloudera Data Platform,以下简称CDP)集群对接的能力,您可在DataWorks中注册CDH及CDP集群,进行任务开发、调度、数据地图(元数据管理)...

环境准备

说明 DataWorks的工作空间分为 简单模式 和 标准模式:简单模式:指一个DataWorks工作空间对应一个引擎项目,无法设置开发和生产环境,只能进行简单的数据开发,无法对数据开发流程以及表权限进行强控制。标准模式:指一个DataWorks工作...

查看治理方案模板

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击顶部菜单栏左侧的 图标,选择 全部产品>数据治理>数据治理中心。单击顶部菜单栏的 配置管理,...

IPsec-VPN操作指南

建立IPsec-VPN连接时,绑定不同的资源可以实现不同的网络连接场景,请根据您的场景查看对应的帮助文档。建立IPsec-VPN连接 绑定VPN网关 IPsec连接绑定VPN网关可以实现企业本地数据中心或企业办公网络直接访问VPC内的资源。请查看以下文档,...

独享资源组模式

网络设置 独享资源组部署在DataWorks托管的专有网络(VPC)中,如果需要与您自己的专有网络连通,需要进行专有网络绑定操作。单击相应资源后的 网络设置,即可进入 专有网络绑定 页面。绑定前,请首先进行RAM授权,让DataWorks拥有访问您的...

任务管理器-WEB服务

1.概要 该解决方案旨在帮助您通过 云开发平台 构建服务形态的Serverless后端服务,主要传达了几个知识点:微服务注册与服务发现的集成使用;把一个微服务架构的系统在云开发平台上部署运行起来;日常、预发、正式环境的数据库使用配置;1.1...

独享资源组

独享资源组使用场景 独享调度资源组使用场景 独享数据集成资源组使用场景 独享资源组网络配置 独享资源组访问VPC环境下数据的前提条件是什么?如何查看数据源的网络环境?添加独享资源组白名单 独享资源组商业化行为 如何对资源组进行续费...

PDF

PDF组件可通过配置URL地址,将站点外的内容纳入到页面中。本文介绍PDF组件的详细配置方法。步骤一:添加组件 创建移动应用。具体操作,请参见 创建移动应用。在移动应用编辑器中,单击最左侧的 组件 图标。(可选)添加分栏组件,进行应用...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
大数据开发治理平台 DataWorks 文件存储NAS 移动开发平台 mPaaS 物联网平台 云解析DNS 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用