创建并使用PAI Designer
步骤二：开发PAI Designer节点任务 简单示例 开发任务：编写Designer工作流 编辑PAI Designer节点任务时，如选择加载已有工作流，则需提前在PAI中创建Designer工作流，通过名称搜索，载入已经创建好的工作流。在PAI Designer节点编辑页面，...
开发PyODPS 2任务
编辑代码：简单示例 创建PyODPS节点后，您可以进行代码编辑及运行，更多关于PyODPS语法说明，请参见 基本操作概述。ODPS入口 DataWorks的PyODPS节点中，将会包含一个全局的变量 odps 或 o，即ODPS入口，您无需手动定义ODPS入口。print(odps...
开发PyODPS 2任务
编辑代码：简单示例 创建PyODPS节点后，您可以进行代码编辑及运行，更多关于PyODPS语法说明，请参见 基本操作概述。ODPS入口 DataWorks的PyODPS节点中，将会包含一个全局的变量 odps 或 o，即ODPS入口，您无需手动定义ODPS入口。print(odps...
开发PyODPS 3任务
编辑代码：简单示例 创建PyODPS节点后，您可以进行代码编辑及运行，更多关于PyODPS语法说明，请参见 基本操作概述。ODPS入口 DataWorks的PyODPS节点中，将会包含一个全局的变量 odps 或 o，即ODPS入口，您无需手动定义ODPS入口。print(odps...
Oracle节点
开发SQL代码：简单示例 在Oracle节点的代码编辑区域编写要执行的任务。示例查询当前用户有权访问的所有表的基本信息。代码如下：SELECT*FROM ALL_TABLES;开发SQL代码：使用调度参数 DataWorks提供的 调度参数 可实现周期调度场景下代码动态...
PostgreSQL节点
开发SQL代码：简单示例 在PostgreSQL节点的代码编辑区域编写要执行的任务。示例查询PostgreSQL数据库中所有基本表（BASE TABLE）的信息，代码如下：SELECT*FROM information_schema.tables WHERE table_type='BASE TABLE';开发SQL代码：...
StarRocks
开发SQL代码：简单示例 在StarRocks节点的代码编辑区域编写要执行的StarRocks任务。示例查询StarRocks数据库中所有基本表（BASE TABLE）的信息，代码如下：SELECT*FROM information_schema.tables WHERE table_type='BASE TABLE';开发SQL...
开发PyODPS 3任务
编辑代码：简单示例 创建PyODPS节点后，您可以进行代码编辑及运行，更多关于PyODPS语法说明，请参见 基本操作概述。ODPS入口 DataWorks的PyODPS节点中，将会包含一个全局的变量 odps 或 o，即ODPS入口，您无需手动定义ODPS入口。print(odps...
SQL Server节点
开发SQL代码：简单示例 在SQL Server节点的代码编辑区域编写要执行的任务。示例查询SQL Server数据库中所有用户表的基本信息。代码如下：SELECT*FROM sys.tables;开发SQL代码：使用调度参数 DataWorks提供的 调度参数 可实现周期调度场景下...
创建并使用PAI DLC节点
步骤二：开发PAI DLC任务 开发任务代码：简单示例 在PAI DLC节点编辑页面，您可通过如下方式编写DLC任务：基于已有DLC任务编写任务代码。通过名称搜索，载入在人工智能平台PAI已创建的DLC任务。任务载入后，DLC节点编辑器会根据PAI中该任务...
DeleteMultipleObjects
父节点：Deleted 示例 关闭简单响应模式的请求示例 POST/?delete HTTP/1.1 Host: oss-example.oss-cn-hangzhou.aliyuncs.com Date: Wed,29 Feb 2012 12:26:16 GMT Content-Length:151 Content-MD5:ohhnqLBJFiKkPSBO1eNaUA=Authorization:...
开发ODPS MR任务
编辑代码：简单示例 以下以一个简单示例为您介绍ODPS MR节点的使用：统计wc_in表中各字符串出现的次数，并将结果写入wc_out表。上传并提交、发布资源 mapreduce example.jar，操作详情请参见 创建并使用MaxCompute资源。说明 关于mapreduce...
开发ODPS MR任务
编辑代码：简单示例 以下以一个简单示例为您介绍ODPS MR节点的使用：统计wc_in表中各字符串出现的次数，并将结果写入wc_out表。上传并提交、发布资源 mapreduce example.jar，操作详情请参见 创建并使用MaxCompute资源。说明 关于mapreduce...
配置参数说明
节点资源文件 仅当节点类型为Spark Batch、Spark SQL、Elastic Job和MaxCompue MR、Elastic Service、Blink、Blink DataStream、Flink DataStream、Flink Vvp Stream、Flink Vvp Stream、Flink Vvp SQL、Flink Vvr Stream、Flink Vvr SQL、...
开发ODPS Spark任务
不同资源分别对应如下命令：jars JARS-py-files PY_FILES-files FILES-archives ARCHIVES 编辑代码：简单示例 以下以一个简单示例为您介绍ODPS Spark节点的使用：判断一个字符串是否可以转换为数字。创建资源。在 数据开发 页面新建Python...
开发ODPS Spark任务
不同资源分别对应如下命令：jars JARS-py-files PY_FILES-files FILES-archives ARCHIVES 编辑代码：简单示例 以下以一个简单示例为您介绍ODPS Spark节点的使用：判断一个字符串是否可以转换为数字。创建资源。在 数据开发 页面新建Python...
开发ODPS Script任务
以下以一个简单示例为您介绍ODPS Script节点的使用。create table if not exists dest(key string,value bigint);create table if not exists dest2(key string,value bigint);a:=select*from src where value>0;b:=select*from src2 where...
概览
示例1：假设源节点的ECS实例规格为ecs.sn1ne.large（2核4 GB），在生成场景时无此规格库存，则会查找相似的实例规格并应用于新节点。示例2：假设源节点仅包含EIP及其绑定资源，意味着EIP已绑定至某个实例。由于实例只能绑定1个EIP，在生成...
基于空白模板创建流程
示例流程节点：示例流程节点中展示了通用保险质检流程中的所有节点，您可以按需选择目标节点。示例节点中已经预置了节点名称、话术引导或检测项，您可以基于已有的示例信息进行修改。说明 智能双录质检中按照通用的质检流程预置了 10 个...
基于空白模板创建流程
示例流程节点：示例流程节点中展示了通用保险质检流程中的所有节点，您可以按需选择目标节点。示例节点中已经预置了节点名称、话术引导或检测项，您可以基于已有的示例信息进行修改。说明 智能双录质检中按照通用的质检流程预置了 10 个...
调试代码片段：快捷运行
本文以ODPS SQL节点示例。选中目标代码。在节点编辑页面的SQL代码区域，鼠标定位至目标代码行，系统会自动识别该行代码所属的完整代码片段。运行代码。说明 仅非运行状态的节点支持使用该功能。如果节点的任务代码处于运行状态，则在代码行...
运维中心入门
当前节点及下游节点 用于对当前节点及下游节点进行批量补数据操作，通常在当前节点的下游节点数量较少时使用该功能，支持指定部分下游节点。海量节点模式 用于对当前节点及下游节点进行批量补数据操作，通常在当前节点的下游节点数量较多时...
配置do-while节点
Shell 节点是DataWorks提供的一个业务处理节点示例。End 节点具有标记循环结束和判断是否开启下一次循环的功能，此处用于定义do-while节点的结束条件，不可删除。您也可根据业务背景自定义do-while节点内部业务流程，将中间的Shell节点替换...
使用do-while节点实现复杂的数据分析
本文通过简单的订单统计示例，为您介绍如何使用do-while节点。本文示例：原始数据 在电商行业中，由于每天的订单量可能很大，因此在DataWorks中已创建了一个按天（下单时间的年月日）分区的订单表。即：每天创建的订单放在同一个分区，分区...
Tunnel SDK示例汇总引导
Java示例 简单上传示例 简单下载示例 多线程上传示例 多线程下载示例 BufferedWriter上传示例 BufferedWriter多线程上传示例 复杂数据类型上传下载示例 除上述典型场景的示例外，更多其他应用场景的示例可查看开源 Java SDK文档。...
层级生成器功能介绍
层级树节点 在层级树面板中，每一行即为一个层级节点，每一个节点内有5种节点信息，包括标题、treeID、地理数据、子节点和父节点。说明 标题、地理数据、子节点和父节点这四个信息，可由您自定义配置修改，只有treeID不可手动更改，由层级...
do-while节点逻辑原理介绍
End节点示例代码中将表行数和迁移量与固定值比较，来限制do-while节点整体的循环次数。使用Shell语言 if[${dag.loopTimes}-lt 5];then echo"True"else echo"False"fi 将循环次数${dag.loopTimes} 和5进行比较，来限制do-while节点整体的...
配置代码模板
以ODPS SQL节点示例，该节点编辑页面代码模板展示如下。支持的代码模板类型 在定义代码模板时，您可使用相关变量来记录新建该类型任务时的相关信息，目前支持在模板中定义的变量有：author：记录节点创建人。createTime：记录节点创建时间...
最佳实践
大模型节点 示例Prompt：请根据以下关于天气的描述，给我推荐一首适合当前听的歌曲，仅输出歌名及歌手名即可，格式形如{"mediaName":"明天会更好","singerName":"群星"}，歌曲名字段为mediaName，歌手名字为singerName，天气描述为：${...
创建CDH Impala节点
开发SQL代码：简单示例 在SQL编辑区域输入任务代码，示例如下。show tables;select*from userinfo;开发SQL代码：使用调度参数 DataWorks提供 调度参数，可实现调度场景下代码动态入参，您可在节点中通过${变量名} 的方式定义代码中的变量，...
Node.js脚本
如果物联网应用开发（IoT Studio）平台提供的节点不能满足您的需求，您可以使用Node.js脚本节点，编写JavaScript代码来灵活定制功能逻辑。目前支持Node v6.10版本。编码说明 在业务逻辑编辑页面的 节点 中，选择对应功能节点配置业务流，...
创建CDH Hive节点
开发SQL代码：简单示例 在SQL编辑区域输入任务代码，示例如下。show tables;select*from userinfo;开发SQL代码：使用调度参数 DataWorks提供 调度参数，可实现调度场景下代码动态入参，您可在节点中通过${变量名} 的方式定义代码中的变量，...
如何使用流程编排处理复杂业务场景
大模型节点 示例Prompt：请根据以下关于天气的描述，给我推荐一首适合当前听的歌曲，仅输出歌名及歌手名即可，格式形如{"mediaName":"明天会更好","singerName":"群星"}，歌曲名字段为mediaName，歌手名字为singerName，天气描述为：${...
创建CDH Presto节点
开发SQL代码：简单示例 在SQL编辑区域输入任务代码，示例如下。show tables;select*from userinfo;开发SQL代码：使用调度参数 DataWorks提供 调度参数，可实现调度场景下代码动态入参，您可在节点中通过${变量名} 的方式定义代码中的变量，...
新建开发环境场景并运行
说明 在搭建节点流程的过程中，如果上游节点和下游节点需要连线（即上游节点的输出数据要作为下游节点的输入数据），则要求上游节点的输出数据与下游节点的输入数据的数据格式和云计算资源类型必须一致，任意结构（星号（*））和为空的除外...
新建开发环境场景并运行
说明 在搭建节点流程的过程中，如果上游节点和下游节点需要连线（即上游节点的输出数据要作为下游节点的输入数据），则要求上游节点的输出数据与下游节点的输入数据的数据格式和云计算资源类型必须一致，任意结构（星号（*））和为空的除外...
归并节点
归并节点示例 在下游节点中，添加分支节点作为上游节点后，通过选择对应的分支节点输出来定义不同条件下的分支走向。例如在下图所示的业务流程中，分支1 和 分支2 均为分支节点的两个下游节点。分支1依赖于autotest.fenzhi121902_1输出。...
层级生成器功能介绍
层级树节点 在层级树面板中，每一行即为一个层级节点，每一个节点内有5种节点信息，包括标题、treeID、地理数据、子节点和父节点。说明 标题、地理数据、子节点和父节点这四个信息，可由您自定义配置修改，只有treeID不可手动更改，由层级...
创建EMR Presto节点
开发SQL代码：简单示例 在SQL编辑区域输入任务代码，示例如下。show tables;select*from userinfo;开发SQL代码：使用调度参数 DataWorks提供 调度参数，可实现调度场景下代码动态入参，您可在节点中通过${变量名} 的方式定义代码中的变量，...
GetBucketCors
父节点：CORSRule ExposeHeader 字符串 x-oss-test 允许用户从应用程序中访问的响应头（例如一个JavaScript的XMLHttpRequest对象）。父节点：CORSRule MaxAgeSeconds 整型 100 浏览器对特定资源的预取（OPTIONS）请求返回结果的缓存时间。...
- 产品推荐
- 这些文档可能帮助您