代码评审

DataWorks的强制代码评审为工作空间维度开启,开启后,开发人员提交的节点代码必须通过评审人员的审核才可发布。同时,您可指定代码评审的基线范围(即对哪类基线任务进行评审),把控高优先级任务的代码质量,防止任务运行失败阻塞其他...

DataWorks V3.0

DataWorks V3.0全新推出一站式OLAP开发平台Holo Studio,为您提供标准化、无门槛的开发管理服务和一站式实时数仓构建服务,以及高效、便捷的开发服务,提升开发效率。详情请参见 什么是实时数仓Hologres。图计算服务:图计算服务(Graph ...

对接使用CDH与CDP

以下简称 CDH)与CDP(Cloudera Data Platform,以下简称CDP)集群对接的能力,在保留CDH集群或CDP集群作为存储和计算引擎的前提下,您可以使用DataWorks的任务开发、调度、数据地图(元数据管理)和数据质量等一系列的数据开发和治理功能...

场景:工作空间模式升级(简单模式升级标准模式)

若您当前使用的是简单模式工作空间,但希望将开发与生产环境隔离,可将简单模式工作空间升级为标准模式工作空间。本文为您介绍如何升级工作空间模式。操作须知 升级工作空间模式前,您需先了解以下内容:了解简单模式与标准模式工作空间的...

创建业务流程

DataWorks的 业务流程 开发结构满足根据业务视角来组织数据开发任务的需求,也提供了 周期业务流程 和 手动业务流程 两种,以满足需要周期性调度和无需周期性调度手动触发运行的场景。本文为您介绍如何创建、设计、提交和查看业务流程,...

数据开发:开发者

本文以使用MaxCompute数据源,在DataWorks上运行MaxCompute作业任务为例,为您介绍开发人员如何使用数据开发(DataStudio)创建一个周期调度任务,帮助您快速了解数据开发(DataStudio)模块的基本使用。前提条件 已完成开发前的环境准备,...

表管理

说明 仅标准模式工作空间的表区分 开发环境 和 生产环境,简单模式工作空间的表仅包括 生产环境。默认展示5000张数据表,建议您使用搜索功能查找表。目前仅MaxCompute、Hologres引擎支持 按引擎元数据查看 展示目标表,其余引擎(例如,EMR...

入门概述

本模块将指引您快速完成一个完整的数据开发和运维操作。说明 如果您是第一次使用DataWorks,请确认已经根据 准备工作 模块的操作,准备好账号和工作空间角色等内容后,登录DataWorks控制台,单击相应工作空间后的 进入数据开发,即可进行...

配置do-while节点

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。创建do-while节点。在 数据开发 页面,鼠标悬停至 图标,单击 新建节点>通用>do-while。您也可以...

创建Hologres外部表

简单模式与标准模式工作空间介绍,详情请参见 必读:简单模式和标准模式的区别。操作 描述 从开发环境加载 用于从开发环境加载开发表的相关信息,并显示至当前页面。说明 仅当表已被提交至开发环境后,才可执行该操作。执行该操作后,开发...

创建ClickHouse数据源

后续操作 数据源创建完成后,您可根据需要执行如下操作:计算任务开发与调度:DataWorks的数据开发与运维中心模块,为您提供ClickHouse任务的开发与调度能力,若您需要基于该ClickHouse数据源进行ClickHouse任务开发,或周期性调度...

创建Hologres内部表

简单模式与标准模式工作空间介绍,详情请参见 必读:简单模式和标准模式的区别。操作 描述 从开发环境加载 用于从开发环境加载开发表的相关信息,并显示至当前页面。说明 仅当表已被提交至开发环境后,才可执行该操作。执行该操作后,开发...

创建Hologres数据源

数据源创建完成后,您可根据需要执行如下操作:计算任务开发与调度:DataWorks的数据开发与运维中心模块,为您提供Hologres任务的开发与调度能力,若您需要基于该Hologres数据源进行Hologres任务开发,或周期性调度Hologres相关任务,需先...

创建AnalyticDB for MySQL3.0数据源

若您要使用DataWorks进行AnalyticDB for MySQL3.0任务的开发、管理,需先将您的AnalyticDB for MySQL3.0实例创建为DataWorks的AnalyticDB for MySQL3.0数据源。创建完成后,可在DataWorks的各功能模块使用该数据源连接AnalyticDB for MySQL...

创建AnalyticDB for PostgreSQL数据源

若您要使用DataWorks进行AnalyticDB for PostgreSQL任务的开发、管理,需先将您的AnalyticDB for PostgreSQL实例创建为DataWorks的AnalyticDB for PostgreSQL数据源。创建完成后,可在DataWorks的各功能模块使用该数据源连接AnalyticDB for...

注册CDH或CDP集群至DataWorks

DataWorks提供了与CDH(Cloudera’s Distribution Including Apache Hadoop,以下简称CDH)和CDP(Cloudera Data Platform,以下简称CDP)集群对接的能力,您可在DataWorks中注册CDH及CDP集群,进行任务开发、调度、数据地图(元数据管理)...

入门实践

本文以实现构建数据标准来设计数据模型,并通过规范化的流程,下发模型至计算引擎为例,为您介绍DataWorks数据建模的流程。前提条件 如果您使用的是阿里云主账号,请下载建模工具。如果您使用的是RAM用户,请完成授权并下载建模工具。详情...

产品概述

该地址算法服务能解决一地多名,地址解析,地址真伪辨别等多种问题,为企业,政府机关以及开发者提供地址数据清洗,地址标准化能力,使地址数据更好的为业务提供支持。产品名 产品形态 计费方式 应用场景 地址标准化接口服务 算法API 后...

服务条款

欢迎您申请试用云开发平台服务 在您申请试用阿里云云开发平台服务之前,请您仔细阅读 www.aliyun.com 网站上公布的相关规范、规则和使用流程以及阿里云云开发平台免费试用服务协议的全部内容,特别是免除或者限制责任的条款、争议解决和...

什么是地址标准

该地址算法服务能解决一地多名,地址识别,地址真伪辨别等多种问题,为企业,政府机关以及开发者提供地址数据清洗,地址标准化能力,使地址数据更好的为业务提供支持。产品优势 准确率高:持续优化迭代,算法准确率高 超强性能:稳定承载...

应用场景

客户体验创新 10min快速搭建一云多端应用,应用开发效率提升10倍以上。以客户和员工的每个业务触点应用的体验作为抓手,利用低代码平台魔笔快速的支撑应用创新,通过应用扩展和迭代提升客户和员工对于企业的满意度。业务流程自动化 快速...

费用与账单

阿里云不排除日后收取费用的可能,届时阿里云将提前10个自然日通过在网站内合适版面发布公告或发送站内通知等方式公布收费政策及规范。如您仍使用云开发平台服务的,应按届时有效的收费政策付费并应遵守届时阿里云公布的有效的服务条款。如...

规划工作空间

开发周期长,运维链路长,标准模式下上层任务正式发布前需要修改代码。架构稳定性★人员灵活性★业务复杂度★数据安全★可运维性★数据共享★以上三种划分模式可以混合使用,以综合各自优点。一种常用的混合策略是整体按数仓层次划分,但各...

查看公共表

说明 标准模式工作空间下,公共表包括 开发环境 和 生产环境。简单模式工作空间下,公共表仅包括 生产环境。蓝色表示当前环境。表名 相应工作空间下表的名称。列信息 查看当前表的字段数量、字段类型及描述。分区信息 查看当前表的分区信息...

创建并使用AnalyticDB for PostgreSQL节点

DataWorks的AnalyticDB for PostgreSQL节点可进行AnalyticDB for PostgreSQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用AnalyticDB for PostgreSQL节点进行任务开发的主要流程。前提条件 已购买DataWorks标准版及...

数据开发功能索引

本文为您介绍DataWorks数据开发(DataStudio)界面的整体布局,以及进行开发操作的主界面(业务流程和节点)中各组件、按钮的功能作用,方便您快速了解及使用数据开发模块。进入数据开发 登录 DataWorks控制台,单击左侧导航栏的 数据建模...

RunSmokeTest

简单模式的工作空间无开发环境,详情请参见 简单模式和标准模式的工作空间。Bizdate String 是 2020-05-26 00:00:00 业务日期。Name String 是 xm_create_test 工作流的名称。NodeId Long 是 1234 节点的ID。您可以调用 ListNodes 接口获取...

扩展程序概述

产品能力 DataWorks作为阿里云一站式大数据开发与治理平台,在各项能力支持上预设了很多拓展点,例如,在标准模式下,简略来看,节点创建后完成代码开发后,需先提交到开发环境中进行验证,完成后再正式发布到生产环境中,后续每天根据调度...

快速体验

技术选型 数据建模:大数据开发治理平台 DataWorks数据建模(可选),标准版及以上版本可使用,需要单独购买。原始数据存储:云数据库 RDS MySQL(必选),本实验中DataWorks为您提供了阿里云RDS MySQL用于测试,包含了测试数据,无需您...

上传数据

标准模式下,在 表管理 页面中,对开发表右键上传数据。上传数据 当前仅支持上传本地数据至MaxCompute表。参考上述步骤,进入上传数据入口后,单击 导入数据。在弹出的 数据导入向导 页面中,确认数据导入的表,选择分区并检测分区是否存在...

管理数据源权限

从简单模式工作空间分享至标准模式工作空间:数据源在标准模式工作空间下变为两个,分别对应开发环境和生产环境,且内容一致。从标准模式工作空间分享至标准模式工作空间:不同环境的数据源,分享后在目标工作空间内,仍然对应各自的环境。...

交通云控平台开发者协议

阿里云有权根据实际需要修改和变更收费服务的收费标准、收费方式,阿里云也可能会对曾经免费的服务开始收费。前述修改、变更或开始收费前,阿里云将在开放平台相应页面进行通知或公告。如果开发者不同意上述修改、变更或付费内容,则应停止...

配置任务调度

如果您使用的是 标准模式 的工作空间,提交成功后,开发环境便有了该同步任务,如果需要将其发布至 生产环境 进行 周期性调度,请单击左上角的 任务发布。在此界面将同步任务发布至生产环境。具体操作请参见 发布任务。同步任务只有提交至...

编辑标准功能

平台为每个品类创建了默认的标准功能,且支持对标准功能进行编辑,包括新增、修改和删除标准功能。前提条件 已创建项目,详见 创建项目。已创建产品,详见 创建产品。背景信息 在创建产品后,平台会默认为该品类的产品添加含有 推荐 标识的...

受众与核心能力

产品定位 DataWorks致力于为数据开发者、数据分析师、数据资产管理者,打造一个具备开放自主开发与全栈数据研发能力的一站式、标准化、可视化、透明化的智能大数据全生命周期云研发平台。DataWorks赋予用户仅通过单一平台,即可实现数据...

MySQL节点

您可以通过创建MySQL节点,直接使用SQL语句对目标MySQL数据源进行数据开发。本文为您介绍如何创建并使用MySQL节点。前提条件 MySQL节点仅支持使用独享调度资源组,独享调度资源组的使用请参考文档:新增和使用独享调度资源组。已通过连接串...

创建EMR表

如果您使用的是标准模式的工作空间,请先提交表至开发环境,再提交表至生产环境。重要 提交时,您需要选择提交表时所用的调度资源组,当使用独享调度资源组提交表时,DataWorks平台将下发对应新建表的任务到引擎侧执行,并打印执行过程的...

创建并管理数据源

标准模式工作空间中,任务在不同环境执行时所访问的数据源如下:在数据开发(DataStudio)模块与开发环境运维中心执行,默认访问开发环境的数据源。在生产环境运维中心执行,默认访问生产环境的数据源。说明 配置数据源时,请确认开发环境...

DataWorks On Hologres使用说明

创建Hologres数据源 开发前准备:绑定数据源或集群 协同开发环境准备 为保障RAM用户以工作空间为单位进行协同开发,您需执行如下操作:需将进行协同开发的RAM用户添加为当前工作空间的成员,并授予其开发角色。将工作空间成员添加至...

DataWorks V2.0

一个 DataWorks工作空间对应两个MaxCompute项目,分别是开发环境和生产环境,详情请参见 简单模式和标准模式的区别。隔离风险,进一步保障生产环境代码的稳定性。数据开发 任务开发 整体功能 进行单任务、工作流的代码编写、周期调度配置,...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
商标服务 地址标准化 移动开发平台 mPaaS 云解析DNS 域名 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用