前言
工作原理 创建 App：创建 App 时，将运行作业需要的软件或脚本安装在自定义的镜像中，并设置资源的默认配置，以及输入输出的格式。提交 App 作业：提交作业时，按照上述资源配置启动虚拟机镜像或 Docker 镜像，使用用户输入的数据运行软件...
配置Kafka输入组件
配置Kafka输入组件后，可以将kafka数据源中的数据读取至大数据平台对接的存储系统内，并进行数据整合和二次加工。本文为您介绍如何配置Kafka输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建Kafka数据源。具体操作，...
配置Kafka输入组件
配置Kafka输入组件后，可以将kafka数据源中的数据读取至大数据平台对接的存储系统内，并进行数据整合和二次加工。本文为您介绍如何配置Kafka输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建Kafka数据源。具体操作，...
LoRaWAN温湿度传感器方案
LoRa节点设备接入 搭建与管理网络 参见 搭建与管理网络 搭建和管理网络、创建节点组并添加节点。配置数据流转 目前数据流转支持阿里云物联网平台、消息队列MQ两种方式，这里选择将数据流转至阿里云物联网平台，详情请参见 数据接入物联网...
QueryPublicModelEngine
输出参数 参数名 参数类型 示例值 描述信息 code String bp-123456 业务过程编码 englishName String pay 业务过程英文名 name String 付款 业务过程中文名 dataDomainCode String trade 所属数据域编码 dataDomainName String 交易 所属...
步骤三：配置节点运行配置
操作步骤 步骤一：设置输入、输出和节点变量 单击页面右侧 运行配置 页签，选择需要的开发环境计算引擎和生产环境计算引擎。手动新建节点的输入、输出参数和节点变量，或通过单击编辑页面的 图标，自动解析节点任务的输入和输出参数，详细...
步骤三：配置节点运行配置
操作步骤 步骤一：设置输入、输出和节点变量 单击页面右侧 运行配置 页签，选择需要的开发环境计算引擎和生产环境计算引擎。手动新建节点的输入、输出参数和节点变量，或通过单击编辑页面的 图标，自动解析节点任务的输入和输出参数，详细...
代码解析结果对比
功能介绍 提交节点时，若节点当前版本的调度依赖（即在 调度配置>调度依赖 区域配置的输入输出）与该节点在生产环境的调度依赖不一致，将出现输入输出变更提示（例如，当前最新版本与上个版本比较，新增或删除了哪些输入或输出）。...
SQL组件概述
组件使用流程 在DataWorks中创建的 组件 需与DataWorks的 SQL组件节点 配合使用，具体流程如下：定义SQL组件 组件开发者可通过数据开发（DataStudio）的 组件管理 界面，定义通用逻辑的过程体代码及输入输出参数，通过编写抽象的SQL加工...
设置调度依赖最佳实践
本文将为您介绍如何配置任务调度依赖的输入输出。配置任务的本节点输入 您可以通过以下两种方式配置本节点输入：使用代码自动解析功能，解析出任务的依赖。手动输入任务依赖（手动输入父节点的 本节点的输出名称）。说明 手动输入上游节点...
实例监控
网络 netin（输入流量）PolarDB-X 1.0 实例计算节点的网络输入流量的总和，单位为Kbps。存储节点返回数据到计算节点，会产生网络输入流量。netout（输出流量）PolarDB-X 1.0 实例计算节点的网络输出流量的总和，单位为Kbps。计算节点发送...
新建Blink DataStream类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面的 图标，...
新建Blink类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出和节点变量。这里以解析为例介绍。单击编辑页面的 图标，在节点编辑页面的 ...
新建Blink DataStream类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面的 图标，...
新建Blink类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出和节点变量。这里以解析为例介绍。单击编辑页面的 图标，在节点编辑页面的 ...
新建RDS MySQL类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出参数和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面的 ...
新建Hologres类型公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出参数和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出参数和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面...
执行流程
背景信息 本示例演示在不定义 输入输出映射 情况下，执行的输入是如何传递给任务步骤，进而传递给函数计算Function的；以及函数计算Function的返回是如何传递给任务步骤，最后成为流程执行的输出。您也可以直接调用 StartExecution 接口...
新建RDS MySQL类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出参数和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面的 ...
新建PostgreSQL类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出参数和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出参数和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面...
新建PostgreSQL类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出参数和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出参数和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面...
新建Flink SQL类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面的 图标，...
新建Flink Vvp SQL类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面的 图标，...
新建MaxCompute SQL类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面的 图标，...
新建MaxCompute SQL类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面的 图标，...
新建Hive类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出参数和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出参数和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面...
新建Hive类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出参数和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出参数和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面...
概述
容器标准输出输入插件 支持采集容器标准输出。更多信息，请参见 采集容器标准输出。MySQL Binlog输入插件 支持采集MySQL Binlog。更多信息，请参见 采集MySQL Binlog。MySQL查询结果输入插件 支持采集MySQL查询结果。更多信息，请参见 采集...
提交节点报错：当前节点依赖的父节点输出名不存在
为了避免依赖关系配置错误导致数据出现问题，DataWorks会在提交节点时对表数据血缘关系的输入输出与调度配置的输入输出进行比较，如果不一致会给您提示，详情可参见 提交节点时提示：输入输出和代码血缘分析不匹配。不是DataWorks每天调度...
新建AnalyticDB PostgreSQL类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出参数和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出参数和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面...
新建AnalyticDB PostgreSQL类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出参数和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出参数和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面...
新建Flink Vvr SQL类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面的 图标，...
新建Flink Vvr SQL类型的公共节点
（条件必选）如果代码中存在输入、输出表或者节点变量，则需要手动添加节点的输入、输出和节点变量，或通过单击编辑页面的 图标，自动解析公共节点的输入、输出和节点变量。这里以解析为例介绍，详细参数如下表所示。单击编辑页面的 图标，...
异步任务处理机制
任务输入输出 输入数据参数一般以Source命名，包括如下参数：SourceURI：数据源地址，目前仅支持OSS URI。Sources：多个输入URI地址数组。Source：多个输入URI对象。输出数据参数一般以Target命名，包括如下参数：TargetURI：目标地址，该...
输入和输出
步骤的输入、输出和本地变量总大小不能超过32 KiB，否则会导致流程执行失败。如果一个步骤包含另一个步骤，则称外层步骤为父步骤，被包含步骤为子步骤。最外层步骤的父步骤是流程。如果两个步骤的父步骤相同，则这两个步骤是同级步骤。流程...
步骤三：引入数据
步骤二：开发离线管道脚本 在离线单条管道开发页面，选中 MySQL输入组件 和 MaxCompute输出组件 并拖动至管道画布中，同时进行连接。如下图所示：单击组件的 图标，配置 MySQL输入组件 和 MaxCompute输出组件。MySQL输入组件 参数 描述 ...
步骤三：引入数据
步骤二：开发离线管道脚本 在离线单条管道开发页面，选中 MySQL输入组件 和 MaxCompute输出组件 并拖动至管道画布中，同时进行连接。如下图所示：单击组件的 图标，配置 MySQL输入组件 和 MaxCompute输出组件。MySQL输入组件 参数 描述 ...
Web客户端漏洞类型
常见发生位置：所有涉及到用户可控的输入输出点，如个人信息、文章、留言等。防御措施：对重要的Cookie字段使用HTTPOnly参数。检查所有用户可控输入。对所有的输入点进行严格的检查，过滤或拦截所有不符合当前语境的输入。由于一般无法预期...
配置API输出组件
配置API输出组件，可以将外部数据库中读取的数据写入到API，或从大数据平台对接的存储系统中将数据复制推送至API，进行数据整合和再加工。本文为您介绍如何配置API输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API...
配置API输出组件
配置API输出组件，可以将外部数据库中读取的数据写入到API，或从大数据平台对接的存储系统中将数据复制推送至API，进行数据整合和再加工。本文为您介绍如何配置API输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API...
- 产品推荐
- 这些文档可能帮助您