构建调度器插件
假设，您需要在插件中实现节点操作中的添加节点和删除节点功能，以及队列操作的队列枚举功能，那么只需在配置文件中将NodeAdd与NodeDel设置为true，将NodeOnline与NodeOffline设置为false，并且将QueueList设置为true，将QueueAdd、...
新建Elastic Service在线类型的公共节点
Elastic Service是在线服务类型的节点，在线服务指的是一类“常驻”守护型服务，它的使用方式是通过某种远程过程调用RPC（Remote Procedure Call）来提供服务。本文介绍如何新建Elastic Service在线类型的公共节点。背景信息 Elastic ...
新建Elastic Service在线类型的公共节点
Elastic Service是在线服务类型的节点，在线服务指的是一类“常驻”守护型服务，它的使用方式是通过某种远程过程调用RPC（Remote Procedure Call）来提供服务。本文介绍如何新建Elastic Service在线类型的公共节点。背景信息 Elastic ...
配置参数说明
本文介绍开发节点的基本属性和运行属性参数。因为各个节点的不同，基本属性和运行属性参数也存在差异，我们按照通用参数和其他参数来介绍，其中通用参数我们梳理在通用参数中，各个节点的差异参数在其他参数中介绍。基本属性 通用参数 配置...
新建Elastic Service在线类型的节点并运行
Elastic Service是在线服务类型的节点，在线服务指的是一类“常驻”守护型服务，它的使用方式是通过某种远程过程调用RPC（Remote Procedure Call）来提供服务。本文介绍如何添加Elastic Service在线类型的节点并运行。背景信息 Elastic ...
新建Elastic Service在线类型的节点并运行
Elastic Service是在线服务类型的节点，在线服务指的是一类“常驻”守护型服务，它的使用方式是通过某种远程过程调用RPC（Remote Procedure Call）来提供服务。本文介绍如何添加Elastic Service在线类型的节点并运行。背景信息 Elastic ...
概述
逻辑节点可以帮助您设置资产和资产之间的交互逻辑，实现大屏内各个资产的交互。本文介绍在蓝图编辑器中，配置逻辑节点的方法。使用逻辑节点 登录 DataV控制台。在 我的可视化 页面中，选择一个可视化应用，单击 编辑。在画布编辑器页面，...
新建Elastic Job类型的公共节点
节点产出模型 选中 产出模型，把模型管理的服务地址透传到算法启动参数，节点内部实现时即可调用对应的 Java 或 Python 版本的模型管理 SDK 场景的操作模型，供其他算法操作使用。代码包 开发语言 当前支持的开发语言及版本如下：Java：...
新建同步节点并运行后上线
数据同步节点，实现不同云计算资源之间的数据传输。本文介绍如何新建数据同步节点并运行。操作步骤 步骤一：登录节点任务设置页面 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组...
新建同步节点并运行后上线
数据同步节点，实现不同云计算资源之间的数据传输。本文介绍如何新建数据同步节点并运行。操作步骤 步骤一：登录节点任务设置页面 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，...
SQL组件概述
组件是一种带有多个输入参数和输出参数的SQL代码过程模板，而SQL代码过程可通过引入一个或多个源数据表，并进行过滤、连接、聚合等操作，加工出业务所需的目标表，因此，您可通过组件快速加工出符合业务需求的目标表。本文为您介绍组件的...
开发ODPS MR任务
在DataWorks中，您可以通过ODPS MR节点实现MaxCompute MapReduce任务的调度运行，以及与其他作业的集成操作。使用限制 ODPS MR节点的使用限制请参见 使用限制。编辑代码：简单示例 以下以一个简单示例为您介绍ODPS MR节点的使用：统计wc_in...
开发ODPS MR任务
在DataWorks中，您可以通过ODPS MR节点实现MaxCompute MapReduce任务的调度运行，以及与其他作业的集成操作。使用限制 ODPS MR节点的使用限制请参见 使用限制。编辑代码：简单示例 以下以一个简单示例为您介绍ODPS MR节点的使用：统计wc_in...
do-while节点最佳实践
创建并配置赋值节点 核心操作要点为：赋值代码与上下文参数：选择赋值节点的赋值语言，并通过命令定义好 赋值节点 最终输出的结果集，赋值节点会将本节点最后一条输出语句赋值给赋值节点自带的outputs输出参数。说明 赋值节点的输出后续...
数值计算
使用数值计算节点，您无需写代码就能实现简单的逻辑运算，例如多个设备属性值相运算、多个设备属性值之间取最大值、最小值、平均值等简单的逻辑运算操作。节点配置 在业务逻辑编辑页面的 节点>功能 列表下，拖拽 数值计算 节点到中间画布中...
设置调度依赖最佳实践
配置调度依赖时，需要根据本节点输出名称作为关联项来给任务间设置依赖关系。本文将为您介绍如何配置任务调度依赖的输入输出。配置任务的本节点输入 您可以通过以下两种方式配置本节点输入：使用代码自动解析功能，解析出任务的依赖。手动...
Oracle节点
DataWorks的Oracle节点可进行Oracle任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用Oracle节点进行任务开发的主要流程。背景信息 Oracle是用于存储和处理数据的关系型数据库管理系统（RDBMS），为您提供可靠、高效且...
SQL Server节点
DataWorks的SQL Server节点可进行SQL Server任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用SQL Server节点进行任务开发的主要流程。背景信息 SQL Server是用于存储和处理数据的关系型数据库管理系统（RDBMS），为您...
PostgreSQL节点
DataWorks的PostgreSQL节点可进行PostgreSQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用PostgreSQL节点进行任务开发的主要流程。背景信息 PostgreSQL是一款功能强大、灵活的开源关系型数据库管理系统（RDBMS），...
StarRocks
DataWorks的StarRocks节点可进行StarRocks任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用StarRocks节点进行任务开发的主要流程。背景信息 StarRocks是新一代极速全场景MPP（Massively Parallel Processing）数据库，...
代码评审
DataWorks的强制代码评审为工作空间维度开启，开启后，开发人员提交的节点代码必须通过评审人员的审核才可发布。同时，您可指定代码评审的基线范围（即对哪类基线任务进行评审），把控高优先级任务的代码质量，防止任务运行失败阻塞其他...
配置do-while节点
DataWorks为您提供循环节点（do-while节点），您可以重新编排do-while节点内部的业务流程，将需要循环执行的逻辑写在节点内，再编辑end循环判断节点来控制是否退出循环。同时您也可以结合赋值节点来循环遍历赋值节点传递的结果集。本文通过...
查看并管理手动任务
手动任务列表支持的操作 操作 描述 查看节点代码 可进入代码详情页，查看手动任务的节点代码。查看实例 查看任务运行生成的手动实例。同时，您也可以对手动实例进行运维和管理。编辑开发节点 进入Dev项目下该任务的编辑页面，编辑该任务，...
创建并管理MaxCompute节点
DataWorks为您提供多种MaxCompute节点，便于您根据需要开发不同类型的MaxCompute任务，并为您提供丰富的节点调度配置，帮助您灵活设置MaxCompute任务的调度，本文为您介绍创建并管理MaxCompute节点的通用操作指导。前提条件 已创建业务流程...
查看并管理手动实例
手动实例列表支持的操作 操作 描述 查看节点代码 进入代码详情页，查看手动实例的节点代码。查看运行日志 进入运行日志页面，查看实例节点运行的日志。重跑 重跑当前实例节点及其下游未运行的实例节点。重跑后，当前实例节点及下游实例节点...
HCI超融合
目前已实现：单管理节点管理上万台物理主机、数十万台云主机；而多个管理节点构建的集群使用一个数据库、一套消息总线可管理十万台物理主机、数百万台云主机、并发处理数万个API。支撑高并发的API请求：HCI超融合 单管理节点可以轻松处理每...
查看并管理明细汇总表任务
基于逻辑运维视角：您只需要选择需要运维的字段或逻辑表任务节点，系统会按照当前物化拆分方式自动计算对应的物化节点，并按照数据一致性和正确性原则，为您提示需要连带操作的相关字段，无需关心物理实现方式，帮助您缩短操作路径，降低运...
查看并管理手动实例
手动实例列表支持的操作 操作 描述 查看节点代码 进入代码详情页，查看手动实例的节点代码。查看运行日志 进入运行日志页面，查看实例节点运行的日志。重跑 重跑当前实例节点及其下游未运行的实例节点。重跑后，当前实例节点及下游实例节点...
查看并管理手动任务
手动任务列表支持的操作 操作 描述 查看节点代码 可进入代码详情页，查看手动任务的节点代码。查看实例 查看任务运行生成的手动实例。同时，您也可以对手动实例进行运维和管理。编辑开发节点 进入Dev项目下该任务的编辑页面，编辑该任务，...
查看并管理明细汇总表任务
基于逻辑运维视角：您只需要选择需要运维的字段或逻辑表任务节点，系统会按照当前物化拆分方式自动计算对应的物化节点，并按照数据一致性和正确性原则，为您提示需要连带操作的相关字段，无需关心物理实现方式，帮助您缩短操作路径，降低运...
开发PyODPS 2任务
支持您在DataWorks的PyODPS 2节点上直接编辑Python代码，操作MaxCompute。前提条件 已创建PyODPS 2节点，详情请参见 创建并管理MaxCompute节点。背景信息 PyODPS是MaxCompute的Python版本的SDK，提供简单方便的Python编程接口，以便您使用...
创建并使用PAI DLC节点
开发SQL代码：使用调度参数 DataWorks提供的 调度参数 可实现周期调度场景下代码动态入参，您可在节点任务中通过${变量名} 的方式定义代码中的变量，并在 调度配置>参数 处，为该变量赋值。调度参数支持的格式，详情请参见 调度参数支持的...
开发PyODPS 2任务
支持您在DataWorks的PyODPS 2节点上直接编辑Python代码，操作MaxCompute。前提条件 已创建PyODPS 2节点，详情请参见 创建并管理MaxCompute节点。背景信息 PyODPS是MaxCompute的Python版本的SDK，提供简单方便的Python编程接口，以便您使用...
ClickHouse SQL
ClickHouse SQL可实现分布式SQL查询及处理结构化数据，提高作业的执行效率。DataWorks的ClickHouse SQL节点可进行ClickHouse SQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用ClickHouse SQL节点进行任务开发的主要...
开发PyODPS 3任务
DataWorks为您提供PyODPS 3节点，您可以在该节点中直接使用Python代码编写MaxCompute作业，并进行作业的周期性调度。本文为您介绍如何通过DataWorks实现Python任务的配置与调度。前提条件 已创建PyODPS 3节点，详情请参见 创建并管理...
创建并使用PAI Designer
人工智能平台PAI的 可视化建模Designer，用于实现端到端的机器学习开发流程的可视化建模工具。DataWorks为您提供PAI Designer节点，方便您通过该算法节点载入Designer工作流，通过调度配置实现Designer工作流的周期性任务调度。前提条件 ...
开发PyODPS 3任务
DataWorks为您提供PyODPS 3节点，您可以在该节点中直接使用Python代码编写MaxCompute作业，并进行作业的周期性调度。本文为您介绍如何通过DataWorks实现Python任务的配置与调度。前提条件 已创建PyODPS 3节点，详情请参见 创建并管理...
DataWorks节点合集
EMR Spark SQL节点 EMR Spark节点 EMR Shell节点 EMR Impala节点 EMR Spark Streaming节点 Trino节点 CDH CDH Hive节点 CDH Spark节点 CDH MR节点 CDH Presto节点 CDH Impala节点 AnalyticDB For PostgreSQL AnalyticDB for PostgreSQL节点...
远程调试
并集成了数据模型、服务模型、open API等sdk，调整参数可直接进行调试 5.2 示例 配置版本 自研节点依赖所有阿里云节点和三方节点，三方节点不支持存储节点和ElatiSearh节点的测试 下载Demo 启动调试环境，并下载相关自研节点的Demo代码 ...
什么是边缘函数
边缘函数（EdgeRoutine，简称ER）是一项基于Serverless架构的服务，它允许开发者编写JavaScript代码并在阿里云全球边缘节点上部署和执行，支持ES6语法和标准的Web Service Worker API。通过这种技术，用户的请求可以直接在离用户最近的边缘...
- 产品推荐
- 这些文档可能帮助您