交通
本文介绍了在交通行业中使用了移动开发平台服务的客户案例。北京公交 mPaaS x 启迪公交：为北京公交 App 重构研发模式。客户介绍 启迪公交，是中国领先的智慧公交系统方案提供商和服务运营商。旗下产品「北京公交 App」串联起了北京公共...
功能发布记录（2024年）
本文为您介绍2024年DataWorks产品功能和相应文档的发布动态。2024-03 功能名称 描述 发布时间 发布地域 使用客户 相关文档 新版补数据功能上线 周期任务开发完成并提交发布后会按照调度配置定时运行，若您希望在指定时间段运行周期任务，可...
工作空间概述
工作空间是DataWorks中进行任务开发和成员权限管理的基本单元。本文将为您介绍工作空间的概念、类型及基本操作。工作空间概述 所有开发工作都将在DataWorks自定义的工作空间内完成，一个工作空间支持绑定多个类型的计算引擎实例，例如：...
ClickHouse SQL
ClickHouse SQL可实现分布式SQL查询及处理结构化数据，提高作业的执行效率。DataWorks的ClickHouse SQL节点可进行ClickHouse SQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用ClickHouse SQL节点进行任务开发的主要...
生命周期
onDestroyed 方法不具有调用 JS API、组件方法和定时器等有异步逻辑的能力。如果有需要，它能用来打印一个日志 console.info 或者取消定时器等业务逻辑。注意事项 以上关于生命周期的方法，只支持如下写法，不支持箭头函数。onCreated(){ ...
创建AnalyticDB for MySQL3.0数据源
若您要使用DataWorks进行AnalyticDB for MySQL3.0任务的开发、管理，需先将您的AnalyticDB for MySQL3.0实例创建为DataWorks的AnalyticDB for MySQL3.0数据源。创建完成后，可在DataWorks的各功能模块使用该数据源连接AnalyticDB for MySQL...
项目分配与安全
项目模式选择 标准模式是指一个DataWorks项目对应两个MaxCompute项目，可设置开发和生产双环境，提升代码开发规范，并能够对表权限进行严格控制，禁止随意操作生产环境的表，保证生产表的数据安全。当您在DataWorks建立项目时，建议您使用...
AnalyticDB for MySQL
DataWorks的AnalyticDB for MySQL节点可进行AnalyticDB for MySQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用AnalyticDB for MySQL节点进行任务开发的主要流程。前提条件 已购买相应版本服务。购买DataWorks标准...
创建CDH Spark节点
Spark是一个通用的大数据分析引擎，具有高性能、易用和普遍性等特点，可用于进行复杂的内存分析，构建大型、低延迟的数据分析应用。DataWorks为您提供CDH Spark节点，便于您在DataWorks上进行Spark任务的开发和周期性调度。本文为您介绍...
快速体验
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
StarRocks
DataWorks的StarRocks节点可进行StarRocks任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用StarRocks节点进行任务开发的主要流程。背景信息 StarRocks是新一代极速全场景MPP（Massively Parallel Processing）数据库，...
接口开发
您可以参考本文完成组件接口的开发和使用。整个过程主要分为三步：获取业务组件数据结构。业务组件的数据结构和该组件的 mock.json 文件除去可选参数字段外，其余字段均保持一致。编写接口。表单提交接口 修改组件后，会调用该接口保存组件...
环境准备
说明 DataWorks的工作空间分为 简单模式 和 标准模式：简单模式：指一个DataWorks工作空间对应一个引擎项目，无法设置开发和生产环境，只能进行简单的数据开发，无法对数据开发流程以及表权限进行强控制。标准模式：指一个DataWorks工作...
创建并使用AnalyticDB for PostgreSQL节点
DataWorks的AnalyticDB for PostgreSQL节点可进行AnalyticDB for PostgreSQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用AnalyticDB for PostgreSQL节点进行任务开发的主要流程。前提条件 已购买DataWorks标准版及...
PostgreSQL节点
DataWorks的PostgreSQL节点可进行PostgreSQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用PostgreSQL节点进行任务开发的主要流程。背景信息 PostgreSQL是一款功能强大、灵活的开源关系型数据库管理系统（RDBMS），...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
基本概念
本文为您介绍DataWorks中，工作空间、业务流程、解决方案、组件、任务、实例、业务日期、定时时间、提交、脚本开发、资源、函数和输出名称等基本概念。工作空间 工作空间 是DataWorks管理任务、成员，分配角色和权限的基本单元。工作空间...
代码示例
本文提供 Android 和 iOS 端的代码示例。Android 代码示例 参见 获取代码示例 以获取代码示例以及使用方法和注意事项。iOS 代码示例 参见 获取代码示例 以获取代码示例以及使用方法和注意事项。客户端集成定位功能的详细介绍请参见 接入 ...
创建CDH Hive节点
如果您已部署CDH集群并希望借助DataWorks执行Hive任务（例如，数据查询作业或处理批量数据），可以使用CDH Hive节点。本文为您介绍如何创建CDH Hive节点。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于...
创建CDH Presto节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云CDH集群，并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将...
空间级模块权限管控
开发 该角色负责数据开发和维护工作，即在 数据开发 模块进行节点的开发与维护。说明 如果需要进行数据开发，您需要授予RAM用户开发或空间管理员角色权限。如果需要拥有发布权限，您需要授予RAM用户运维或空间管理员角色权限。运维 该角色...
操作权限控制
说明 上述说明在DataWorks上的具体体现为，管理员角色和开发角色的成员，有DataWorks上大部分功能权限，有DataWorks开发环境(MaxCompute引擎开发项目）所有权限，但默认没有生产环境（MaxCompute生产项目）的操作权限。如果子账号需要在...
创建CDH MR节点
在DataWorks任务开发中，您可以通过创建CDH MR（MapReduce）节点处理超大规模的数据集。本文为您介绍如何在DataWorks中创建并使用CDH MR节点。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务流程对不同...
开发可视化应用监控树莓派状态
物联网应用开发（IoT Studio）中的Web可视化开发工具可帮助您开发一个基于网页的控制界面，无需编写代码，十分的方便快捷。本文介绍通过开发Web应用，实现检测边缘计算机状态和控制设备电源指示灯开关的功能。前提条件 已完成项目开发和...
产品
物联网应用开发（IoT Studio）的项目详情页面提供了查看产品列表及其详情、创建产品、编辑产品基本信息和删除产品等功能。背景信息 在同一个物联网平台账号下：同一项目中的产品和设备仅可应用于相同项目下的Web可视化开发和业务逻辑开发。...
创建CDH Impala节点
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。右键单击某个业务流程，选择 新建节点>CDH>CDH Impala。说明 鼠标悬停至顶部 新增 按钮，根据界面...
数据开发常见问题
本文为您介绍数据开发相关的常见问题。任务开发常见问题 引擎基于DataWorks操作的常见问题 表相关 如何可视化新建表？为什么EMR通过DataWorks可视化建表失败报错：call emr exception？如何对生产表添加字段？如何将本地数据上传到...
创建EMR Hive节点
您可以创建EMR（E-MapReduce）HIVE节点，通过类SQL语句协助读写、管理存储在分布式存储系统上的大数据集的数据仓库，完成海量日志数据的分析和开发工作。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务...
创建并使用PAI Designer
人工智能平台PAI的 可视化建模Designer，用于实现端到端的机器学习开发流程的可视化建模工具。DataWorks为您提供PAI Designer节点，方便您通过该算法节点载入Designer工作流，通过调度配置实现Designer工作流的周期性任务调度。前提条件 ...
创建EMR Shell节点
通过自定义编辑Shell脚本，您能够进行数据处理、调用Hadoop组件、操作文件等高级功能。本文介绍了如何在DataWorks里配置和使用EMR Shell节点，以便您编辑和运行Shell脚本。背景信息 本节点支持使用OSS REF方式引用OSS资源，详情请参见 方案...
创建工作空间
工作空间是DataWorks管理任务、成员，分配角色和权限的基本单元，所有开发工作都将在具体的工作空间内完成。因此，进行任务开发前您需要先创建工作空间，本文为您介绍如何创建工作空间。前提条件 已开通DataWorks服务，详情请参见 开通...
创建并使用PAI DLC节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，因此，创建节点前需先新建业务流程，操作详情请参见 创建业务流程。注意事项 PAI DLC节点每次运行完成，均会在人工智能平台PAI的分布式训练（DLC）平台生成一个新的DLC...
创建EMR Impala节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云EMR集群，并注册EMR集群至DataWorks。创建EMR相关节点并开发EMR任务前，您需要先将...
创建EMR Spark节点
Spark是一个通用的大数据分析引擎，具有高性能、易用和普遍性等特点（Spark概述），可用于进行复杂的内存分析，构建大型、低延迟的数据分析应用。DataWorks为您提供EMR Spark节点，便于您在DataWorks上进行Spark任务的开发和周期性调度。...
创建EMR Spark SQL节点
您可以通过创建EMR（E-MapReduce）Spark SQL节点，实现分布式SQL查询引擎处理结构化数据，提高作业的执行效率。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，...
创建并管理工作空间
在 管理中心>工作空间 页面对指定工作空间的属性进行管理和配置，并为工作空间绑定MaxCompute、E-MapReduce等类型的计算引擎，用于进行后续开发操作。本文为您介绍工作空间的基本操作。操作入口介绍 工作空间各操作说明及入口如下表所示。...
设置宕机自动迁移
为了降低物理故障对业务的影响，阿里云为您提供专有宿主机DDH宕机自动迁移的功能。本章节介绍在创建DDH后如何开启或者关闭宕机自动迁移。背景信息 宕机自动迁移开启后，当DDH因故障停机时，会自动迁移至健康的DDH。若您未开启宕机自动迁移...
Windows系统实例的宕机问题排查
更多信息，请参见 常见宕机原因和解决方案。方式二：通过系统事件定位 登录 ECS管理控制台，左侧导航栏单击 事件。在左侧导航栏单击 非预期运维事件。单击发生宕机运维事件实例右侧的 诊断操作系统错误根因，诊断实例宕机原因。根据返回的...
开发流程
详细操作请参见 开发前端逻辑流操作代码 和 开发后端逻辑流操作代码。步骤三、上传构建产物 返回魔笔IDE的逻辑流编辑界面，在逻辑流物料面板中单击上传构建产物，选择构建产物并上传。详细操作请参见 上传构建产物。开发完成自定义逻辑流...
教程场景说明
在您按照本教程进行操作前，需先了解以下概念：概念 ...本教程将帮助您完成 支付完成 事件分析，包括：完成客户端开发：Android，iOS 创建属性 创建事件 查看事件 PV 和 UV 添加自定义分析 添加大盘 如遇问题，可参见 常见问题 文档进行处理。
- 产品推荐
- 这些文档可能帮助您