详细功能介绍

当资产中添加了多个过滤器时,如果某个过滤器执行报错,那么过滤会终止,并采用上一次执行正确的结果。过滤器调试 在 设置数据源 页面中,单击 数据过滤器 下方的 开启过滤器调试。编辑过滤代码,完成后单击 测试。测试通过后,会显示数据...

事件请求处理程序(Event Handler)

执行成功后,您从返回结果中可以看到函数成功返回了上面的JSON格式,并且日志输出里打印了 key1,key2 和 key3 的内容。示例二:通过临时密钥安全读写OSS的资源 示例代码 您可以使用 函数计算 为您提供的临时密钥访问 对象存储OSS,代码...

do-while节点最佳实践

本文为您介绍通过循环的方式依次处理一组数据的每一行的复杂场景。前提条件 请在操作前,先了解do-while节点逻辑,详情请参见 do-while节点逻辑原理介绍。...赋值节点的输出结果。第1次 end 节点的运行结果。第2次 end 节点的运行结果。

DataWorks节点合集

包括用于数据同步的数据集成节点,用于数据清洗的引擎计算节点(例如,ODPS SQL、Hologres SQL、EMR Hive),以及可对引擎计算节点进行复杂逻辑处理的通用节点(例如,可统筹管理多个节点的虚拟节点、可循环执行代码的do-while节点),多种...

工作原理

考虑数据上传日志服务存在延迟情况,您可以结合数据采集延迟以及业务能够容忍的最大结果可见延迟,设置 执行延迟 和 SQL时间窗口(结束时间往前一点),避免实例执行时SQL时间窗口内的数据未全部到达。建议SQL时间窗口按分钟对齐(例如整...

离线模式依赖关系配置

Dataphin通过各个节点的调度依赖配置结果,有序的运行业务流程中各个节点,保障业务数据有效、适时地产出。本文为您介绍如何配置流批一体任务的离线模式依赖关系。背景信息 调度依赖就是节点间的上下游依赖关系,在Dataphin中,上游任务...

离线模式依赖关系配置

Dataphin通过各个节点的调度依赖配置结果,有序的运行业务流程中各个节点,保障业务数据有效、适时地产出。本文为您介绍如何配置流批一体任务的离线模式依赖关系。背景信息 调度依赖就是节点间的上下游依赖关系,在Dataphin中,上游任务...

密钥非托管模式

BaaS REST SDK中提供了通过重试查询获取交易执行结果的方法,方法定义如下。该方法实际上是查询交易回执的一个客户端封装。请求参数 参数名 必选 类型 说明 bizid 是 string 链ID hash 是 string 区块查询参数 请求示例 BaseResp baseResp=...

请求处理程序(Handler)

执行成功后,您从返回结果中可以看到函数成功返回了上面的JSON格式,并且日志输出里打印了 key1,key2 和 key3 的内容。示例二:通过临时密钥安全读写OSS的资源 示例代码 您可以使用 函数计算 为您提供的临时密钥访问 对象存储 OSS,代码...

PyAlink脚本

PyAlink脚本支持通过编写代码的方式来调用Alink的所有算法。您可以使用PyAlink脚本调用Alink的分类算法做分类、调用回归算法做回归、调用推荐算法做推荐等。PyAlink脚本也支持与其他Designer的算法组件无缝衔接,完成业务链路的搭建及效果...

步骤三:设置任务调度策略并发布

重要 设置执行任务策略前,请创建一个全新的自定义存储表,并在表结构中配置输出数据的字段,用于存储SQL分析任务调度产出的数据。具体操作,请参见 创建和管理自定义存储表。一个自定义存储表,仅可作为一个数据解析或SQL任务的输出表。...

通用视频生成

6.示例代码:该能力常用语言的示例代码,请参见 通用视频生成示例代码,常用语言查询异步任务结果的示例代码,请参见 查询异步任务结果示例代码。7.客户端直接调用:该能力常用的客户端调用方式包括以下几种。Web前端直接调用 小程序场景下...

配置for-each节点

DataWorks为您提供遍历节点(for-each节点),您可以通过for-each节点来循环遍历赋值节点传递的结果集。同时您也可以重新编排for-each节点内部的业务流程。本文以一个具体示例,通过for-each节点2次循环遍历赋值节点输出结果,并在每次循环...

创建应用一致性快照

创建后会返回云助手命令ID和命令执行ID,您可以根据命令执行ID查看创建结果。Windows实例 在Windows实例中,主要是通过Windows操作系统的卷影复制服务实现应用一致性。本节介绍如何为Windows实例开启应用一致性快照。进入ECS实例列表页面。...

do-while节点逻辑原理介绍

DataWorks为您提供循环节点(do-while节点),您可根据业务需要重新编排循环节点内部业务流程,将需要循环执行的业务逻辑放入循环节点内部,并通过循环节点内部的End节点来定义循环条件,即确认不满足何种条件的情况下退出循环。...

Golang SDK使用说明

背景信息 使用Golang SDK进行服务调用时,由于在编译代码时,Golang的包管理工具会自动从Github上将Golang SDK的代码下载到本地,因此您无需提前安装Golang SDK。如果您需要自定义部分调用逻辑,可以先 下载Golang SDK代码,再对其进行修改...

事件请求处理程序(Event Handler)

上述的代码示例中实现了 StreamRequestHandler,其中的 inputStream 参数为调用函数时传入的数据,outputStream 参数用于返回函数的执行结果。Context参数 Context参数中包含一些函数的运行时信息(例如RequestId、临时AccessKey等),其...

编译部署代码

您可以在本地.NET运行环境编译程序,打包为ZIP包,然后在 函数计算 控制台或使用Serverless Devs工具上传代码包,并正确运行您的代码。C#运行时依赖库 函数计算 为C#运行时提供依赖库 Aliyun.Serverless.Core,用于定义请求处理程序接口,...

运行选项

命中结果:平台的运行任务产生的计算作业,如果命中Call-Caching,则会直接跳过执行,复用历史记录中的输出结果。平台将不会产生后端计算作业,也不会产生资源消耗,无需收取费用。删除中间结果 用户运行任务的中间结果,会被基因分析平台...

Hive作业调优

在第一个MapReduce中,Map的输出结果集合会随机分布到Reduce中,每个部分进行聚合操作,并输出结果。这样处理的结果是,相同的Group By Key有可能分发到不同的Reduce中,从而达到负载均衡的目的;第二个MapReduce任务再根据预处理的数据...

机器学习边缘推理

Link IoT Edge支持以边缘应用的方式,将云端的机器学习模型部署到边缘端,并在边缘端执行机器学习推理(ML Inference)。此功能非常适用于在边缘端处理实时性强、数据量大的服务(例如计算机视觉识别)。前提条件 在树莓派4B(Raspberry Pi...

DescribeInvocations-查询命令的执行列表和状态

查询运维助手命令的执行列表和状态。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 ...

Aggregator机制

该API用于执行局部聚合操作,其中第一个参数 value 是本Worker在该轮超步已经聚合的结果(初始值是 createInitialValue 返回的对象),第二个参数是您的代码调用 ComputeContext#aggregate(item)传入的参数。该API中通常用 item 来更新 ...

EXPLAIN输出

输出节点 节点类型 在EXPLAIN命令的输出结果中可能包含多种类型的执行节点,可以大体分为几大类:控制节点(Control Node)扫描节点(ScanNode)物化节点(Materialization Node)连接节点(Join Node)扫描节点 扫描节点就是为了扫描表的...

MQTT触发器

云消息队列 MQTT 版 作为事件源通过 事件总线EventBridge 与 函数计算 集成后,通过 云消息队列 MQTT 版 触发器能够触发关联函数执行,通过函数可以对发布到 云消息队列 MQTT 版 的消息进行自定义处理。本文介绍如何在 函数计算 控制台创建...

视频画幅变换

6.示例代码:该能力常用语言查询异步任务结果的示例代码,请参见 查询异步任务结果示例代码。7.客户端直接调用:该能力常用的客户端调用方式包括以下几种。Web前端直接调用 小程序场景下直接调用 Android端直接调用 iOS端直接调用 输入限制...

DescribeInvocations-查询云助手脚本的执行列表和状态

您需要通过接口返回值查看实际执行结果,以实际输出结果为准。您可以查询最近 4 周的执行信息,执行信息的保留上限为 10 万条。支持以下两种方式查看返回数据:方式一:分页查询首页时,仅需设置 MaxResults 以限制返回信息的条目数,返回...

配置同周期调度依赖

依赖某节点同周期指本节点本周期运行,依赖上游节点当前周期的数据产出情况(即任务执行情况),待上游当前周期实例执行成功后,本节点才会运行。通常,若当前任务需依赖上游任务同周期产出的表数据时,可为当前任务设置依赖该上游任务的同...

快速创建函数

执行完毕后,您可以在 函数代码 页签,查看执行结果和详细的日志信息。相关文档 函数计算为您提供丰富的示例代码,可以帮助您在创建或者配置函数时,快速选择所需要的函数代码。具体示例代码,请参见 示例代码。如果您的函数在执行时报错...

Schema Registry管理

命令执行完后,会输出如下结果:.Successfully produced 10 messages to a topic called transactions[INFO]-[INFO]BUILD SUCCESS[INFO]-.查看结果。此时,您应该可以在 Messages 页面查看到上一步骤写入到消息。创建Consumer 在Consumer...

PyMySQL 连接 OceanBase 数据库示例程序

使用 fetchall()方法获取查询结果,并通过 for 循环逐行输出结果代码如下:def select_data():with pymysql.connect(*DB_CONFIG)as conn:with conn.cursor()as cursor:cursor.execute(SELECT_DATA_SQL)result=cursor.fetchall()for row ...

功能更新动态(2023年)

提交SPARK_JAR_ON_MAX_COMPUTE计算任务时,系统自动去除从Windows操作系统下复制的代码的开头和末尾的控制字符(\r、)。MaxCompute新增支持qualify和tablesample语法。MaxCompute SQL支持表字段名称使用系统保留字和关键词,但不推荐使用...

开发PyODPS 3任务

不支持其他带有二进制代码的三方包。由于兼容性原因,在DataWorks中,options.tunnel.use_instance_tunnel 默认设置为False。如果需要全局开启 instance tunnel,需要手动将该值设置为True。当Python 3的子版本号不同(例如Python 3.8和...

构建多架构容器镜像

使用ARM架构资源部署容器通常可以节省不少成本,但也可能导致维护成本增加,您可能需要面向x86、ARM架构分别构建镜像并设置不同的Tag。通过ACR控制台配置的多架构构建任务可以帮助您简化这一过程,您可以通过一个Tag来管理多种架构的镜像。...

DescribeInvocations-查询云助手脚本的执行列表和状态

您需要通过接口返回值来查看实际执行结果,以实际输出结果为准。您可以查询最近 2 周的执行信息,执行信息的保留上限为 10 万条。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以...

Python脚本

输出桩 Python脚本组件共有4个输出端口,其中 输出端口1 和 输出端口2 是OSS路径输出端口,输出端口3 和 输出端口4 是MaxCompute表输出端口。OSS路径输出 该组件的 脚本设置 页签的 任务输出路径 参数配置的OSS路径,会被系统自动挂载到/ml...

通过Go SDK创建应用一致性快照

Output 为命令执行后的输出信息,内容通过Base64编码。如果执行成功,Output 内容经过Base64解码后会包含创建的快照一致性组ID,如下所示。[snapshotgroup="ssg-bp170v57ca9j01jb*"][message="Finish whole Processes of Snapshot ...

开发PyODPS 2任务

不支持其他带有二进制代码的三方包。由于兼容性原因,在DataWorks中,options.tunnel.use_instance_tunnel 默认设置为False。如果需要全局开启 instance tunnel,需要手动将该值设置为True。PyODPS 2节点底层的Python版本为2.7。编辑代码:...

文档更新动态(2023年)

更新说明 通过单条管道创建集成任务 配置OSS输入组件 配置Salesforce输入组件 配置FTP输入组件 配置Microsoft SQL Server输入组件 通过整库迁移配置集成任务 配置OSS输出组件 调度配置 支持设置不依赖corn表达式的固定间隔时间的调度。...

DescribeCommandInvocations-查询命令执行列表和状态

the specified instance does not exists ErrorCode string 命令的下发失败或执行失败原因的代码,可能值:空:命令执行正常。InstanceNotExists:指定的实例不存在或已释放。InstanceReleased:执行命令期间,该实例被释放。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 云工作流 函数计算(旧版) 微服务引擎 智能商业分析 Quick BI 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用