工作流使用案例
工作流可执行操作 在工作流设计区域，您可以在 工作流名称 上单击右键，执行如下操作：克隆工作流：在同一文件夹下克隆出相同图形的工作流。重命名工作流：重新命名工作流的名称。删除工作流：删除工作流。当工作流在运行状态时无法删除。
工作流编辑
背景信息 本文为您提供工作流编辑的相关操作介绍，具体如下：新建工作流 编辑工作流 配置工作流调度 执行工作流 查看工作流运行记录 工作流可执行操作 前提条件 已创建项目，详情请参见 项目管理。已编辑好作业，详情请参见 作业编辑。新建...
阿里云OSS服务访问
您可在 代码执行 页签的 代码执行管理 区域下，选中 在线编辑 单选框，查看源码。其中：将替换为 创建OSS Bucket 中，创建存储空间时保存到本地的Endpoint值。将替换为 创建OSS Bucket 中创建存储空间时设置的Bucket名称，即 le-fc-bucket...
配置EventBridge类别的OSS触发器
执行代码前的准备工作和代码示例如下。说明 如果您要在您的函数中读写OSS资源，建议使用OSS内网服务地址进行访问，避免使用公网访问，产生公网费用。关于OSS内网服务地址的格式，请参见 访问域名和数据中心。Node.js/*准备工作：1.请先在...
常见问题
云工作流的工作原理是什么？云工作流的优势是什么？云工作流最长执行多长时间？怎么执行云工作流？云工作流使用什么语言编写流程？云工作流是集成了云监控？云工作流是否集成了事件源？什么是 云工作流？云工作流 是一个用来协调多个分布式...
使用Enclave构建机密计算环境
Enclave的工作原理 使用阿里云虚拟化Enclave构建机密计算环境的工作原理，是在ECS实例（即主VM）内切分计算资源（包括vCPU和内存），创建一个Enclave VM（简称EVM）作为可信执行环境。EVM的安全性保障体现在以下几方面：由底层虚拟化技术...
操作权限控制
说明 DataWorks成员与EMR用户权限映射关系详情可参考：准备工作：绑定EMR引擎 生产运维中心执行任务（生产环境执行任务）使用在引擎配置时候指定的生产环境指定的账号访问所有引擎资源。权限控制：管理者可以使用EMR集群内的Ranger组件对每...
DataWorks On MaxCompute使用说明
代码示例 开发环境（数据开发、开发环境运维中心）执行代码 生产环境（生产环境运维中心）执行代码 访问开发项目中的开发表：select col1 from projectname_dev.tablename;使用任务执行者个人云账号访问开发表。RAM用户（子账号）执行相关...
什么是边缘函数
工作原理 普通 DCDN 请求：1.客户端发起请求到边缘节点网关→2.边缘节点查找缓存，命中缓存则响应给客户端→3.缓存未命中则回源。边缘函数请求：1.客户端发起请求到边缘节点网关→4.请求被边缘函数接管并执行您的JS代码→通过fetch请求访问...
配置for-each节点
提交时需在 提交 对话框中输入 变更描述，并根据需要选择是否在节点提交后执行代码评审。重要 您需要设置节点的 重跑属性 和 依赖的上游节点，才可以提交节点。代码评审可对任务的代码质量进行把控，防止由于任务代码有误，未经审核直接...
无锁结构变更方案对比
Online修改工具：PT-Online（PT-Online-Schema-Change）：工作原理是创建和源表A一样的表A_gst执行DDL操作，同时在A上创建一个DML触发器，然后将A中的数据拷贝到A_gst，在拷贝过程中产生的增量变更就用触发器完成同步更新。拷贝结束后执行...
什么是边缘函数
工作原理 无ER的纯 CDN 请求：1.客户端发起请求到边缘节点网关→2.边缘节点查找缓存，命中缓存则响应给客户端→3.缓存未命中则回源。有ER后的 CDN 请求：1.客户端发起请求到边缘节点网关→4.请求被边缘函数接管并执行您的JS代码→通过fetch...
什么是边缘函数
工作原理 无ER的纯 DCDN 请求：1.客户端发起请求到边缘节点网关→2.边缘节点查找缓存，命中缓存则响应给客户端→3.缓存未命中则回源。有ER后的 DCDN 请求：1.客户端发起请求到边缘节点网关→4.请求被边缘函数接管并执行您的JS代码→通过...
RAM凭据插件
如果应用无法设置从classpath和可执行jar包中读取默认配置文件（managed_credentials_providers.properties），或需自定义配置文件名称时，可调用以下代码设置自定义配置文件,并按以下顺序读取：1."your-config-name"配置绝对路径+文件名称...
赋值节点
原理介绍 在DataWorks中，节点上下文参数可实现节点参数的上下游传递，赋值节点在此基础上，可将赋值节点最后一条查询结果传递给自带的输出参数（outputs），若下游节点依赖了赋值节点，则下游节点可通过添加输入参数的方式，在节点代码中...
DataWorks On Hologres使用说明
用于循环执行代码的do-while节点，遍历、判断上游赋值结果的for-each节点，分支节点等。其他节点。例如，通用Shell节点，MySQL数据库节点等。虚拟节点 HTTP触发器节点 OSS对象检查节点 FTP Check节点 赋值节点 参数节点 do-while节点逻辑...
创建自定义层
如果层中的代码依赖二进制的库或可执行文件，则需要使用Linux系统编译构建层，推荐使用Debian 9。如果层中的依赖库对指令集有依赖，则需要使用amd64架构的机器，或者通过交叉编译的方式确保依赖库与 函数计算 运行时兼容。各运行时使用层...
新建实验
更详细的原理介绍，请参见 AutoML工作原理。前提条件 首次使用AutoML功能时，需要完成AutoML相关权限授权。具体操作，请参见 云产品依赖与授权：AutoML。已创建工作空间，具体操作，请参见 创建工作空间。如果创建DLC任务，需要完成以下...
安全告警概述
可检测以下子项：ECS非合法IP登录 ECS在非常用地登录 ECS登录后执行异常指令序列（SSH）ECS被暴力破解成功（SSH）更多信息，请参见 云安全中心检测和告警异常登录功能的原理是什么？异常事件 检测程序运行过程中发生的异常行为。敏感文件...
OpenEvent概述
配置流程 了解上述原理后，您可根据实际情况规划并应用DataWorks的OpenEvent功能，实现关键事件的消息订阅，应用流程与配置要点如下。在 事件总线 EventBridge 控制台 开通事件总线EventBridge，创建自定义总线。在DataWorks端添加事件分发...
配置同周期调度依赖
依赖某节点同周期指本节点本周期运行，依赖上游节点当前周期的数据产出情况（即任务执行情况），待上游当前周期实例执行成功后，本节点才会运行。通常，若当前任务需依赖上游任务同周期产出的表数据时，可为当前任务设置依赖该上游任务的同...
EventBridge事件调度
无需配置：无需进行安全配置，接收到的所有URL请求均可触发工作流执行。IP网段：输入正确的IP地址或者IP网段。只有使用该IP地址或该IP网段内的IP地址访问的URL请求支持触发工作流执行。最多支持添加5个IP地址或者IP网段。安全域名：输入...
部分克隆（Partial clone）介绍
如此设计一方面带来了分布式的代码协同能力,但在另一方面,随着开发者持续向仓库中提交代码，仓库的体积会不可避免的变得越来越大,因为远端仓库体积迅速膨胀,带来clone后本地后磁盘空间的迅速增长以及clone耗时的不断增加。那么，有没有一种...
开发流程
步骤二、开发自定义操作的执行代码 在逻辑流物料面板内下载最新代码模版并解压。对于前端逻辑流：在解压文件目录所在位置安装依赖。对于后端逻辑流：熟悉代码模板工程，设置开发环境。在代码模板工程中，进入对应的代码开发目录，开发...
MapReduce模型
reduce由Master节点执行，一般用于数据聚合或通知下游，也可以用于工作流的上下游数据传递。reduce方法能处理所有子任务的结果。子任务通过 return ProcessResult(true,result)返回结果（例如返回订单号）。执行reduce方法时，通过context...
依赖关系
调度依赖配置实时场景 有A、B、C三个任务，如何实现每个小时执行一次A->B->C（A执行完了B再执行，B执行完了C再执行）的任务流程？如何设置跨业务流程，同地域跨项目依赖？其他常见问题 已配置失败重跑的任务在运行失败后未重跑，并报错Task...
使用访问凭证访问阿里云OpenAPI最佳实践
Linux和macOS系统配置方法 执行以下命令：export ALIBABA_CLOUD_ACCESS_KEY_ID=<access_key_id>export ALIBABA_CLOUD_ACCESS_KEY_SECRET=<access_key_secret><access_key_id>需替换为已准备好的AccessKey ID，替换为AccessKey Secret。...
概述
传统实现方式是在系统代码里指定任务的执行顺序，当业务发生变化时需要修改代码才可以正常工作，可维护性很差。使用任务编排功能，可以轻松的完成任务之间的依赖调整，大大提高了可维护性，并可以直观地看到任务的执行情况。
执行实例
工作流的每次执行称为一个执行实例，通过执行实例ID（RunId）可获取工作流本次执行的结果，包括执行状态、工作流中各节点的信息。本文为您介绍如何通过控制台查看工作流执行实例。操作步骤 登录 媒体处理控制台。在顶部菜单栏选择地域。在...
什么是主机应用部署
云开发平台部署主机应用的过程 第一步：根据语言进行机器环境分配，执行代码中的build.sh脚本 第二步：打包构建后build目录（云开发平台中可以修改）内容成压缩包，上传到流水线制品库 第三步：拉取构建包到主机应用/root/application（云...
操作指南
您可以在 云工作流 控制台创建和执行工作流、创建工作流调度、将 云工作流 ...云工作流 新版 工作流定义 创建工作流 工作流执行 工作流调度 工作流集成 监控指标 Serverless 工作流旧版 管理工作流 执行工作流 工作流调度 工作流集成 监控指标
基础术语
术语 说明 TEE TEE（Trusted Execution Environment）可信执行环境是 Intel SGX 处理器内存中的一个与外界完全隔离的安全执行环境，可以保证其中执行代码和用户数据的安全性、机密性和完整性。MYVM MYVM 是蚂蚁区块链自研的 WASM 虚拟机。...
AutoML工作原理
AutoML实现自动化调试参数的工作原理，是通过实验、Trial、训练任务进行循环迭代，来找到最优的超参组合。AutoML的工作机制如下图。您设定好超参数的值域、搜索算法、停止条件配置后，AutoML将其作为一次实验（experiment）传入到后端进行...
DBMS_ALERT
执行代码块后的显示结果如下：Issued alert for any_alert 控制流程返回第一个匿名代码块，然后执行剩余的代码：Registered for alert alert_test and any_alert Waiting for signal.Alert name:any_alert Alert msg:This is the message ...
ExecuteSparkStatement
Kind String 是 sql 执行代码的语言是什么,取值：scala python sql 返回数据 名称 类型 示例值 描述 Data String 2 代码块提交成功后在此Spark作业中的唯一ID。RequestId String 0DC5B6F080E8-0DC5B6F080E8-0DC5B 请求ID。示例 请求示例 ...
新增媒体
本文介绍通过Java SDK新增媒体并触发工作流执行的示例代码。说明 如果上传的目录满足工作流触发条件，则会触发工作流执行，否则不触发。更多信息，请参见 工作流的文件匹配规则。import com.alibaba.bltest.Config;import ...
任务运行诊断
该场景下，需等待任务的定时时间到达后，任务才可执行。若任务处于等待时间状态（即实例为 标识），您可单击 运行诊断，快速跳转至 定时检查 页面查看详情。检查调度资源 当满足 当前节点所依赖的上游任务均已执行完成、当前节点的定时时间...
漏洞公告|Windows SMBv3远程执行代码漏洞（CVE-2020-...
3月12日，微软发布了CVE-2020-0796漏洞更新补丁，旨在修复Windows操作系统的SMBv3远程执行代码漏洞。攻击者可利用此漏洞在目标服务器或客户端上执行恶意代码。阿里云已经同步更新Windows系统更新源，建议您及时更新ECS实例的操作系统到最新...
代码评审
区域 描述 1 在该区域可执行如下操作：代码评审人员可在 我审核的 页签查看并处理名下的评审任务。节点提交人可在 我发起的 页签查看名下已发起的评审任务。2 在该区域，您可通过评审状态、评审单名称、类型、提交人、提交时间等条件进行...
创建并使用PAI Designer
提交时需在 提交新版本 对话框中输入 变更描述，并根据需要选择是否在节点提交后执行代码评审。说明 您需设置节点的 重跑属性 和 依赖的上游节点，才可提交节点。代码评审可对任务的代码质量进行把控，防止由于任务代码有误，未经审核直接...
- 产品推荐
- 这些文档可能帮助您