创建并使用MaxCompute表
DataWorks标准模式工作空间下，开发环境默认使用 任务执行者 个人身份执行任务，生产调度环境默认使用某云账号执行任务，即调度访问身份。详情请参见 绑定MaxCompute引擎。代码示例 开发环境（数据开发、开发环境运维中心）执行代码 生产...
用户授权与管理
使用数据建模DATABLAU功能时，在进行定义标准、数据建模、数据开发、部署运维等不同任务时，通常需不同角色的用户进行操作，对应用户需获取相应的权限。本文为您介绍制定标准、数据建模并应用部署过程中推荐的用户角色权限规划与授权操作...
下线节点
如何恢复已下线节点 报错：请先在发布中心把文件${filename}发布到生产环境或在发布中心取消发布 报错：节点存在子节点，导致任务删除或下线失败 如何下线节点 如果您使用的是标准模式工作空间，则开发环境和生产环境隔离，在DataWorks的...
代码评审
DataWorks的强制代码评审为工作空间维度开启，开启后，开发人员提交的节点代码必须通过评审人员的审核才可发布。同时，您可指定代码评审的基线范围（即对哪类基线任务进行评审），把控高优先级任务的代码质量，防止任务运行失败阻塞其他...
新建数据库
说明 当前标准版的工作空间分开发环境和生产环境，以保证数据的安全性。但是由于当前HoloStudio未上线环境切换功能，建议开发和生产绑定同一个DB，否则HoloStudio将无法查询生产环境的数据。环境 配置项 说明 备注 标题 实例显示名称 ...
DataWorks V3.0
DataWorks V3.0全新推出一站式OLAP开发平台Holo Studio，为您提供标准化、无门槛的开发管理服务和一站式实时数仓构建服务，以及高效、便捷的开发服务，提升开发效率。详情请参见 什么是实时数仓Hologres。图计算服务：图计算服务（Graph ...
对接使用CDH与CDP
以下简称 CDH）与CDP（Cloudera Data Platform，以下简称CDP）集群对接的能力，在保留CDH集群或CDP集群作为存储和计算引擎的前提下，您可以使用DataWorks的任务开发、调度、数据地图（元数据管理）和数据质量等一系列的数据开发和治理功能...
场景：工作空间模式升级（简单模式升级标准模式）
若您当前使用的是简单模式工作空间，但希望将开发与生产环境隔离，可将简单模式工作空间升级为标准模式工作空间。本文为您介绍如何升级工作空间模式。操作须知 升级工作空间模式前，您需先了解以下内容：了解简单模式与标准模式工作空间的...
创建业务流程
DataWorks的 业务流程 开发结构满足根据业务视角来组织数据开发任务的需求，也提供了 周期业务流程 和 手动业务流程 两种，以满足需要周期性调度和无需周期性调度手动触发运行的场景。本文为您介绍如何创建、设计、提交和查看业务流程，...
数据开发：开发者
本文以使用MaxCompute数据源，在DataWorks上运行MaxCompute作业任务为例，为您介绍开发人员如何使用数据开发（DataStudio）创建一个周期调度任务，帮助您快速了解数据开发（DataStudio）模块的基本使用。前提条件 已完成开发前的环境准备，...
表管理
说明 仅标准模式工作空间的表区分 开发环境 和 生产环境，简单模式工作空间的表仅包括 生产环境。默认展示5000张数据表，建议您使用搜索功能查找表。目前仅MaxCompute、Hologres引擎支持 按引擎元数据查看 展示目标表，其余引擎（例如，EMR...
配置do-while节点
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。创建do-while节点。在 数据开发 页面，鼠标悬停至 图标，单击 新建节点>通用>do-while。您也可以...
入门概述
本模块将指引您快速完成一个完整的数据开发和运维操作。说明 如果您是第一次使用DataWorks，请确认已经根据 准备工作 模块的操作，准备好账号和工作空间角色等内容后，登录DataWorks控制台，单击相应工作空间后的 进入数据开发，即可进行...
创建Hologres外部表
简单模式与标准模式工作空间介绍，详情请参见 必读：简单模式和标准模式的区别。操作 描述 从开发环境加载 用于从开发环境加载开发表的相关信息，并显示至当前页面。说明 仅当表已被提交至开发环境后，才可执行该操作。执行该操作后，开发...
创建ClickHouse数据源
后续操作 数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供ClickHouse任务的开发与调度能力，若您需要基于该ClickHouse数据源进行ClickHouse任务开发，或周期性调度...
创建Hologres内部表
简单模式与标准模式工作空间介绍，详情请参见 必读：简单模式和标准模式的区别。操作 描述 从开发环境加载 用于从开发环境加载开发表的相关信息，并显示至当前页面。说明 仅当表已被提交至开发环境后，才可执行该操作。执行该操作后，开发...
创建Hologres数据源
数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供Hologres任务的开发与调度能力，若您需要基于该Hologres数据源进行Hologres任务开发，或周期性调度Hologres相关任务，需先...
创建AnalyticDB for MySQL3.0数据源
若您要使用DataWorks进行AnalyticDB for MySQL3.0任务的开发、管理，需先将您的AnalyticDB for MySQL3.0实例创建为DataWorks的AnalyticDB for MySQL3.0数据源。创建完成后，可在DataWorks的各功能模块使用该数据源连接AnalyticDB for MySQL...
创建AnalyticDB for PostgreSQL数据源
若您要使用DataWorks进行AnalyticDB for PostgreSQL任务的开发、管理，需先将您的AnalyticDB for PostgreSQL实例创建为DataWorks的AnalyticDB for PostgreSQL数据源。创建完成后，可在DataWorks的各功能模块使用该数据源连接AnalyticDB for...
注册CDH或CDP集群至DataWorks
DataWorks提供了与CDH（Cloudera’s Distribution Including Apache Hadoop，以下简称CDH）和CDP（Cloudera Data Platform，以下简称CDP）集群对接的能力，您可在DataWorks中注册CDH及CDP集群，进行任务开发、调度、数据地图（元数据管理）...
产品概述
该地址算法服务能解决一地多名，地址解析，地址真伪辨别等多种问题，为企业，政府机关以及开发者提供地址数据清洗，地址标准化能力，使地址数据更好的为业务提供支持。产品名 产品形态 计费方式 应用场景 地址标准化接口服务 算法API 后...
什么是地址标准化
该地址算法服务能解决一地多名，地址识别，地址真伪辨别等多种问题，为企业，政府机关以及开发者提供地址数据清洗，地址标准化能力，使地址数据更好的为业务提供支持。产品优势 准确率高：持续优化迭代，算法准确率高 超强性能：稳定承载...
应用场景
可通过低代码平台对已有SaaS的数据和接口集成，通过可视化的方式搭建新的业务SaaS，增强企业已有SaaS能力，满足企业100%定制化需求，同时基于低代码统一标准的可视化语言体系，同步降低开发人员更替导致的应用维护成本。研发流程标准化 ...
规划工作空间
开发周期长，运维链路长，标准模式下上层任务正式发布前需要修改代码。架构稳定性★人员灵活性★业务复杂度★数据安全★可运维性★数据共享★以上三种划分模式可以混合使用，以综合各自优点。一种常用的混合策略是整体按数仓层次划分，但各...
查看公共表
说明 标准模式工作空间下，公共表包括 开发环境 和 生产环境。简单模式工作空间下，公共表仅包括 生产环境。蓝色表示当前环境。表名 相应工作空间下表的名称。列信息 查看当前表的字段数量、字段类型及描述。分区信息 查看当前表的分区信息...
入门实践
基于DataWorks的数据建模流程如下：空间管理员角色创建数据标准 模型设计师角色创建数据模型 模型设计师角色修改数据模型 模型设计师角色保存模型至模型库 开发角色提交模型至开发环境计算引擎 运维、部署或空间管理员角色发布模型至生产...
RunSmokeTest
简单模式的工作空间无开发环境，详情请参见 简单模式和标准模式的工作空间。Bizdate String 是 2020-05-26 00:00:00 业务日期。Name String 是 xm_create_test 工作流的名称。NodeId Long 是 1234 节点的ID。您可以调用 ListNodes 接口获取...
创建并使用AnalyticDB for PostgreSQL节点
DataWorks的AnalyticDB for PostgreSQL节点可进行AnalyticDB for PostgreSQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用AnalyticDB for PostgreSQL节点进行任务开发的主要流程。前提条件 已购买DataWorks标准版及...
数据开发功能索引
本文为您介绍DataWorks数据开发（DataStudio）界面的整体布局，以及进行开发操作的主界面（业务流程和节点）中各组件、按钮的功能作用，方便您快速了解及使用数据开发模块。进入数据开发 登录 DataWorks控制台，单击左侧导航栏的 数据建模...
上传数据
标准模式下，在 表管理 页面中，对开发表右键上传数据。上传数据 当前仅支持上传本地数据至MaxCompute表。参考上述步骤，进入上传数据入口后，单击 导入数据。在弹出的 数据导入向导 页面中，确认数据导入的表，选择分区并检测分区是否存在...
配置任务调度
如果您使用的是 标准模式 的工作空间，提交成功后，开发环境便有了该同步任务，如果需要将其发布至 生产环境 进行 周期性调度，请单击左上角的 任务发布。在此界面将同步任务发布至生产环境。具体操作请参见 发布任务。同步任务只有提交至...
编辑标准功能
平台为每个品类创建了默认的标准功能，且支持对标准功能进行编辑，包括新增、修改和删除标准功能。前提条件 已创建项目，详见 创建项目。已创建产品，详见 创建产品。背景信息 在创建产品后，平台会默认为该品类的产品添加含有 推荐 标识的...
扩展程序概述
产品能力 DataWorks作为阿里云一站式大数据开发与治理平台，在各项能力支持上预设了很多拓展点，例如，在标准模式下，简略来看，节点创建后完成代码开发后，需先提交到开发环境中进行验证，完成后再正式发布到生产环境中，后续每天根据调度...
快速体验
技术选型 数据建模：大数据开发治理平台 DataWorks数据建模（可选），标准版及以上版本可使用，需要单独购买。原始数据存储：云数据库 RDS MySQL（必选），本实验中DataWorks为您提供了阿里云RDS MySQL用于测试，包含了测试数据，无需您...
管理数据源权限
从简单模式工作空间分享至标准模式工作空间：数据源在标准模式工作空间下变为两个，分别对应开发环境和生产环境，且内容一致。从标准模式工作空间分享至标准模式工作空间：不同环境的数据源，分享后在目标工作空间内，仍然对应各自的环境。...
创建EMR表
如果您使用的是标准模式的工作空间，请先提交表至开发环境，再提交表至生产环境。重要 提交时，您需要选择提交表时所用的调度资源组，当使用独享调度资源组提交表时，DataWorks平台将下发对应新建表的任务到引擎侧执行，并打印执行过程的...
受众与核心能力
产品定位 DataWorks致力于为数据开发者、数据分析师、数据资产管理者，打造一个具备开放自主开发与全栈数据研发能力的一站式、标准化、可视化、透明化的智能大数据全生命周期云研发平台。DataWorks赋予用户仅通过单一平台，即可实现数据...
MySQL节点
标准模式工作空间下，MySQL节点选择数据源时，无法下拉选择只配置开发环境但未配置生产环境的数据源。所以创建MySQL数据源时，您需要同时配置开发环境与生产环境的数据源。使用限制 MySQL节点仅支持对连接串模式创建的生产环境MySQL数据源...
DataWorks V2.0
一个 DataWorks工作空间对应两个MaxCompute项目，分别是开发环境和生产环境，详情请参见 简单模式和标准模式的区别。隔离风险，进一步保障生产环境代码的稳定性。数据开发 任务开发 整体功能 进行单任务、工作流的代码编写、周期调度配置，...
建表并上传数据
说明 本示例以标准模式的工作空间为例。如果您使用的是简单模式的工作空间，仅单击 提交到生产环境 即可。在左侧导航栏，单击 表管理。在 表管理 页面，双击打开相应的表名，查看表信息。创建表result_table 在 数据开发 页面，鼠标悬停至 ...
- 产品推荐
- 这些文档可能帮助您