教程场景说明
在您按照本教程进行操作前，需先了解以下概念：概念 ...本教程将帮助您完成 支付完成 事件分析，包括：完成客户端开发：Android，iOS 创建属性 创建事件 查看事件 PV 和 UV 添加自定义分析 添加大盘 如遇问题，可参见 常见问题 文档进行处理。
通过函数计算节点实现GitHub实时数据分析与结果发送
开发人员在基于GitHub开源项目进行开发时会产生海量事件，GitHub会记录每次事件的类型、详情、开发者和代码仓库等信息，并开放其中的公开事件。DataWorks提供“Github十大热门编程语言”模板，通过对GitHub中公开数据集进行加工和分析，并...
扩展程序概述
产品能力 DataWorks作为阿里云一站式大数据开发与治理平台，在各项能力支持上预设了很多拓展点，例如，在标准模式下，简略来看，节点创建后完成代码开发后，需先提交到开发环境中进行验证，完成后再正式发布到生产环境中，后续每天根据调度...
创建业务流程
自定义组合而成的解决方案，可以让您进行沉浸式开发。通过解决方案管理业务流程时，您可以：在DataStudio界面左侧导航栏底部单击 图标，默认进入 设置>个人设置 页面，文件管理 模块选择 显示解决方案。通过解决方案修改面板批量添加业务...
平台安全诊断
DataWorks的平台安全诊断，为您提供了当前DataWorks工作空间与绑定的引擎在数据传输、存储、运算等过程中，与身份认证、访问权限控制、开发模式等功能相关的安全能力，以及诊断相关安全问题的最佳实践，帮助您及时发现平台的安全隐患，在...
MySQL节点
您可以通过创建MySQL节点，直接使用SQL语句对目标MySQL数据源进行数据开发。本文为您介绍如何创建并使用MySQL节点。前提条件 MySQL节点仅支持使用独享调度资源组，独享调度资源组的使用请参考文档：新增和使用独享调度资源组。已通过连接串...
环境准备
说明 DataWorks的工作空间分为 简单模式 和 标准模式：简单模式：指一个DataWorks工作空间对应一个引擎项目，无法设置开发和生产环境，只能进行简单的数据开发，无法对数据开发流程以及表权限进行强控制。标准模式：指一个DataWorks工作...
连接方式概述
客户端 在连接 OceanBase 数据库的 Oracle 租户时，支持的客户端如下：OceanBase 客户端（OBClient）OBClient 是一个交互式和批处理查询的命令行工具，支持 OceanBase 数据库的 MySQL 模式租户和 Oracle 模式租户，可以访问 软件中心 进行...
DataWorks On MaxCompute使用说明
一、数据访问与权限控制 您可通过ODPS SQL节点或临时查询节点，查询MaxCompute表数据，简单模式 工作空间无法做到细粒度权限控制及开发生产隔离，本文以 标准模式 工作空间示例说明。权限预设情况说明 RAM用户被添加至工作空间成为空间成员...
DataWorks On Hologres使用说明
DataWorks基于 实时数仓Hologres 轻松构建实时数仓与即席分析系统。Hologres可通过DataWorks提供的可视化方式配置任务工作流、周期性调度执行任务及元数据管理，保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上开发Hologres任务...
Oracle节点
DataWorks的Oracle节点可进行Oracle任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用Oracle节点进行任务开发的主要流程。背景信息 Oracle是用于存储和处理数据的关系型数据库管理系统（RDBMS），为您提供可靠、高效且...
开发ODPS Script任务
在DataWorks中，您可通过ODPS Script节点实现MaxCompute SQL脚本模式开发任务代码，并调度其他作业的集成操作。适用场景 脚本模式的适用场景如下：脚本模式适合用来改写需要层层嵌套子查询的单个语句，或者因为脚本复杂性而不得不拆成多个...
创建并管理工作空间
规划工作空间 选择空间模式 DataWorks工作空间分为简单模式与标准模式：简单模式：仅具有生产环境，对应一个引擎项目，无法做到数据权限隔离与开发生产隔离。标准模式：包括开发环境及生产环境，可以分别对应两个引擎项目，更好的做到开发...
SQL Server节点
DataWorks的SQL Server节点可进行SQL Server任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用SQL Server节点进行任务开发的主要流程。背景信息 SQL Server是用于存储和处理数据的关系型数据库管理系统（RDBMS），为您...
设备接入概述
RRPC能力 广播通信 基于MQTT Topic通信 基于MQTT Topic通信 RRPC能力 基于MQTT Topic通信 网关与子设备 子设备认证与连接 网关与子设备 子设备管理 网关与子设备 网关与子设备 网关与子设备 不支持 设备开发：业务功能 设备在接入物联网...
开发前准备：绑定数据源或集群
若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发（DataStudio）模块。绑定后，才可读取数据源或集群中的数据，并进行相关开发操作。前提条件 您需根据后续要开发和调度...
交通
Web 端与小程序的网络请求全部使用相同的框架，因此 Web 端已开发完成的业务能够快速地迁移至 mPaaS 小程序中，只需简单的调整即可满足 mPaaS 业务逻辑的处理需要，从而避免业务逻辑代码重复编写，保证双端业务逻辑一致，降低多人协作中...
推送流程
推送模式 消息推送组件提供以下推送模式：指定设备标识的推送 指定用户标识的推送 不指定任何标识的群发 说明 无论采用哪种模式，最终在系统内部都会映射成设备标识。指定用户标识的推送是移动推送服务为方便与用户的业务系统对接而提供的...
DataWorks模块使用说明
使用流程与主要子模块 DataWorks为您提供从端到端的一站式数据开发治理平台，数据处理流程主要包括以下几个阶段。各个阶段DataWorks的主要子模块如下。数据集成 子模块：数据集成 功能说明：数据集成是稳定高效、弹性伸缩的数据同步平台，...
通用
海尔 客户介绍 海尔高举推行业务“小微化”、“个体化”，从组织角度来设计技术架构，借助“移动中台”来统一管理各支线业务的迭代与更新显得尤为重要。甚至，在架构上实现弹性扩展，从而能够集成更多业务，形成生态。项目背景 以用户体验...
开发ODPS SQL任务
MaxCompute SQL任务采用类似SQL的语法，适用于海量数据（TB级）但实时性要求不高的分布式处理场景。本文为您介绍在DataWorks上开发SQL任务的注意事项及开发指导。前提条件 已创建ODPS SQL节点，详情请参见 创建并管理MaxCompute节点。背景...
功能发布记录（2024年）
2024.2.20 所有地域 DataWorks标准版及以上版本用户 查找代码 新增数据上传与下载功能 DataWorks的数据上传与下载功能支持将本地CSV文件、OSS文件数据上传至MaxCompute进行处理及分析。同时，也可管理上传的文件列表和DataWorks数据分析等...
产品优势
任务调度 提供分布式任务调度框架，实现任务的分布式处理、统一的任务调度和全方位监控运维管理，达到所有任务有序、高效运行的目的，极大降低开发和运维的成本。分布式链路跟踪 面向分布式架构、微服务架构和云原生架构的应用可观察性的...
8、如何做好迭代复盘？
作者：洪永潮｜云效研发效能专家、李田莉｜云效效能洞察负责人 在前 2 篇文章 敏捷开发落地指南之迭代排期 和 敏捷开发落地指南之迭代跟进 中，我们已经了解：什么是敏捷开发 Scrum 方法；什么是双周迭代；如何高效地开展迭代排期会；如何...
【通知】PDS托管模式改版
升级后，网盘与相册服务（开发者版）托管模式 只支持创建新的托管模式。如有问题，请 加钉钉群联系 23146118。2、托管模式改版前后差异 PDS标准模式，托管模式改版前后，功能比较如下表：StandardMode（标准模式）HostingModeV1（托管模式...
创建并管理数据源
标准模式工作空间中，任务在不同环境执行时所访问的数据源如下：在数据开发（DataStudio）模块与开发环境运维中心执行，默认访问开发环境的数据源。在生产环境运维中心执行，默认访问生产环境的数据源。说明 配置数据源时，请确认开发环境...
数据开发概述
DataWorks数据开发（DataStudio）模块用于定义周期调度任务的开发及调度属性，与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您...
MaxCompute数据权限控制详情
DataWorks通过空间预设角色或空间自定义角色与开发环境引擎Role映射，来让被授予空间角色的RAM用户，拥有该空间角色映射的开发引擎Role所拥有的MaxCompute引擎权限，但默认无生产权限，本文为您介绍预设角色权限基本情况、MaxCompute权限...
DataWorks On CDP/CDH使用说明
二、数据建模与开发 模块 说明 相关文档 数据建模 数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行诠释，让企业内部实现“数同文”的...
什么是企业级分布式应用服务EDAS
快鱼服饰FASTFISH 借助EDAS搭建起业内一个成熟的分布式业务系统，帮助快鱼解决原有多套系统之间商品、渠道等数据不一致等问题，保障系统的快速迭代和敏捷开发，降低研发周期及成本。微服务架构下，很好地支持海量数据及应用的并发，系统...
DataWorks On EMR使用说明
数据建模 数据开发 数据开发（DataStudio）是一站式大数据开发平台，支持在线开发EMR数据处理任务。它集成了强大的任务调度能力，能够支持千万级的任务混合编排和调度。此外，还提供了一套任务发布的管控流程，保障任务产出的稳定性。节点...
阶段一：基础防护建设
在该阶段，DataWorks为您提供了数据分类分级、规范数据开发流程、企业级身份认证、开源身份隔离等多个场景的最佳实践，帮助企业做好数据安全治理的相关基础防护工作。场景一：数据分级分类 无论在任何行业，数据分级分类都是监管首要检查的...
数据开发
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发、部署、调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化...
开发Link Visual的功能介绍
标识符 功能类型 功能名称 描述 控制台勾选 开发指南 DayNightMode 属性 日夜模式 App设置和获取设备当前的日夜模式，设备在状态变更时及开机时主动上报 按需 App和设备开发者需要关注并处理该物模型 ImageFlipState 属性 画面翻转状态 App...
开发ODPS Spark任务
MaxCompute Spark作业可通过 Local模式、Cluster模式 执行，此外，您也可在DataWorks中运行MaxCompute Spark离线作业（Cluster模式），以便与其它类型执行节点集成和调度。本文为您介绍如何通过DataWorks实现MaxCompute Spark作业的配置与...
什么是业务逻辑
物联网应用开发（IoT Studio）提供了物联网业务逻辑的开发工具，支持通过编排服务节点的方式快速完成简单的物联网业务逻辑的设计。应用场景 设备联动 设备数据处理 设备与服务联动 API的生成 HTTP请求开头的API，由于阿里云网关限制，业务...
功能简介
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发和运行调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化水平...
调度参数
调度参数典型场景 调度参数往前取一个小时，如何处理跨天参数替换的问题 如何处理表的分区格式年月日时分秒间带空格情况：pt=yyyy-mm-dd hh24:mi:ss 节点定时时间为每天20:00，节点内参数取值为定时时间（$cyctime或者$[yyyymmddhh24miss]...
数据开发功能索引
本文为您介绍DataWorks数据开发（DataStudio）界面的整体布局，以及进行开发操作的主界面（业务流程和节点）中各组件、按钮的功能作用，方便您快速了解及使用数据开发模块。进入数据开发 登录 DataWorks控制台，单击左侧导航栏的 数据建模...
代码评审
DataWorks的强制代码评审为工作空间维度开启，开启后，开发人员提交的节点代码必须通过评审人员的审核才可发布。同时，您可指定代码评审的基线范围（即对哪类基线任务进行评审），把控高优先级任务的代码质量，防止任务运行失败阻塞其他...
- 产品推荐
- 这些文档可能帮助您