通过导入工具导入至数仓版

步骤三:脚本准备 adb-import.sh.template 是一个模板脚本,支持自定义脚本名称,例如要导入的表名为 product_info,您可以将脚本命名为 adb-import-product_info.sh。您可以复制一份模板脚本,并根据数据导入场景编辑导入脚本参数。脚本中...

下载 OceanBase 客户端(OBClient)

连接上 OceanBase 数据库后,在 OBClient 里,可以运行一些 OBClient 命令(包含常用的 MySQL 命令)、SQL 语句、PL 语句来执行下面这些任务:计算、存储和打印查询结果 创建数据库对象、检查和修改对象定义 开发和运行批处理脚本 执行数据...

新建命令

命令类型可以是Windows PowerShell脚本、Bat批处理命令和Linux Shell脚本,命令中支持自定义参数,方便设置变量值。使用限制 创建的脚本在Base64编码后大小不能超过18 KB。操作步骤 登录 轻量应用服务器管理控制台。在左侧导航栏,单击 ...

批处理

使用批处理对存储空间(Bucket)中存量文件进行批量处理。例如将Bucket某个目录中后缀为.docx的文件转换成PDF格式、将所有MOV格式的文件转码为MP4等。说明 新版数据处理功能API、SDK支持在 IMM服务接入点 中的地域进行使用。注意事项 ...

UpdateBatch-更新批处理任务

更新批处理任务信息,如输入的数据源配置、数据处理的配置、批处理任务标签等信息。接口说明 更新批处理任务时,当批处理任务状态处于 Ready(就绪)或 Failed(失败)时可以更新,更新时不会改变当前的任务状态。更新完成后,之前未完成的...

DeleteBatch-删除批处理任务

删除指定的一个批处理任务。接口说明 删除批处理任务时,当任务状态处于 Ready(就绪),Failed(失败),Suspended(暂停),Succeeded(完成)时可以删除,其他运行中的状态禁止删除。删除批处理任务时,可以先通过 GetBatch 查询批处理...

ResumeBatch-恢复批处理任务

将一个Suspend(暂停)或Failed(失败)的批处理任务恢复。接口说明 只有 Suspended(暂停),Failed(失败)状态的批处理任务可以恢复,恢复后继续执行未完成的任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的...

SuspendBatch-暂停批处理任务

将一个 Running(正在执行)的批处理任务暂停。接口说明 任务状态 Running(正在执行)时,可以暂停任务。如果想继续执行,需要调用 ResumeBatch 接口。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后...

变量

在使用数据处理功能的批处理或触发器功能时,每个Object都会触发一个任务,任务中需要指定处理后的文件保存的输出路径,如果多个任务输出路径是同一个路径,则会产生文件覆盖,因此需要保证输出路径为动态路径,所以引入变量。此外,您可以...

权限

批处理和触发器权限 使用批处理和触发器,您需要授权给IMM服务访问其他云资源(例如OSS)的权限。没有服务角色时,您可以在 云资源访问授权 页面创建默认角色。关于如何为批处理添加服务角色,请参见 批处理。关于如何为触发器添加服务角色...

组织层次说明

测试用例的组织层次如下图所示:术语 说明 用例库 管理用例的集合,用例库可以关联多个应用。用例库版本 用例库基于版本进行隔离管理。用例库版本建议与应用的研发版本相对应...用例 用例是最小可执行的测试单元,由脚本与所需参数共同构成。

通过后处理脚本实现自动挂载ossfs

设置后处理脚本后,E-HPC集群上后续扩容的节点均会自动执行指定的后处理脚本,可以满足计算节点预部署的需求。通过后处理脚本,您可以对计算节点做定制化操作,例如扩容的计算节点自动挂载ossfs、自动部署软件环境等。本文以自动挂载ossfs...

UpdateDestination

DATAHUB:将解析器脚本处理后的Topic数据转发至阿里云DataHub,进行流式数据处理。ONS:将解析器脚本处理后的Topic数据转发至阿里云消息队列RocketMQ,进行消息分发。MNS:将解析器脚本处理后的Topic数据发送至阿里云消息服务中,进行消息...

用例管理

本文介绍用例管理的详细操作,包括新建用例、导入用例、批量导入脚本、添加用例参数。前提条件 已创建指定应用的用例库版本。具体操作请参见 新建用例库版本。新建用例 在指定应用的 用例管理 页签,选择 用例管理 子页签。从用例库版本...

GetDestination

DATAHUB:将解析器脚本处理后的Topic数据转发至阿里云DataHub,进行流式数据处理。ONS:将解析器脚本处理后的Topic数据转发至阿里云消息队列RocketMQ,进行消息分发。MNS:将解析器脚本处理后的Topic数据发送至阿里云消息服务中,进行消息...

ListParserDestination

DATAHUB:将解析器脚本处理后的Topic数据转发至阿里云DataHub,进行流式数据处理。ONS:将解析器脚本处理后的Topic数据转发至阿里云消息队列RocketMQ,进行消息分发。MNS:将解析器脚本处理后的Topic数据发送至阿里云消息服务中,进行消息...

页面变量

数据表配置 选中后,对页面变量或脚本处理之后的结构化数据进行解析并排序,以决定在组件上具体显示数据。详细信息,请参见 数据过滤器。处理后结果 当勾选了 数据过滤脚本 或 数据表配置 时出现的参数。经过脚本处理以及数据表配置优化...

工作流概述

工作流指媒体处理中的云端自动化处理工作流,音视频上传完毕后自动执行处理流程。本文介绍工作流的基本概念及使用方式。功能概览 基本概念 基本概念 说明 媒体工作流(MediaWorkflow)工作流是预先编排好的一系列任务流程,可以实现在指定...

导入场景

JMeter脚本与PTS API压测的字段对应关系如下:JMeter脚本字段 PTS API压测字段 Test Plan(测试计划)压测场景 Thread Group(线程组)串联链路 Sampler(采样器)说明 仅支持HTTP Request。Name 压测API名称 Server Name or IP Path Port ...

ListDestination

DATAHUB:将解析器脚本处理后的Topic数据转发至阿里云DataHub,进行流式数据处理。ONS:将解析器脚本处理后的Topic数据转发至阿里云消息队列RocketMQ,进行消息分发。MNS:将解析器脚本处理后的Topic数据发送至阿里云消息服务中,进行消息...

安装日志采集客户端

日志采集客户端 Logtail 可通过运维脚本批量安装或手动安装。批量安装(推荐)创建指定模板。在 金融分布式架构 控制台页面,选择 运维管理>经典应用服务>日常运维>指令模板,在右侧窗口中单击 创建模板。在 新建指令模板 页面中,填入相应...

导入场景

Swagger脚本与PTS API压测的字段对应关系如下:Swagger脚本字段 PTS API压测字段 paths.key 请求URL。paths.key.key 请求方法。paths.key.key.parameters 请求Query参数或请求体。definitions 请求体中使用的Schema。tags[0].name 业务会话...

迁移Batch批量计算到分布式工作流Argo集群

批处理作业(Batch)通常用于数据处理、仿真计算、科学计算等领域,往往需要大规模的计算资源。分布式工作流Argo集群基于开源Argo Workflows项目开发,完全符合开源工作流标准。通过 工作流集群,您可以轻松编排工作流,每个工作流步骤使用...

GetPostScripts-查询指定集群的后处理脚本

调用GetPostScripts查询指定集群的后处理脚本。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略...

CreateDestination

DATAHUB:将解析器脚本处理后的Topic数据转发至阿里云DataHub,进行流式数据处理。ONS:将解析器脚本处理后的Topic数据转发至阿里云消息队列RocketMQ,进行消息分发。MNS:将解析器脚本处理后的Topic数据发送至阿里云消息服务中,进行消息...

SetPostScripts-设置集群后处理脚本

调用SetPostScripts设置集群后处理脚本。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的...

数据过滤器

脚本写法:接口定义如下:脚本框架只支持传入一个变量data,过滤器返回经过函数方法处理后的data。function_filter(data){/do something.return data;} 仅允许访问部分全局对象:Object、Array、Date、Math、parseInt、parseFloat、String...

Spark计算引擎

Spark通用化的引擎能力可以同时提供SQL、批处理、流处理、机器学习和图计算的能力。AnalyticDB MySQL Serverless Spark是 AnalyticDB MySQL 团队基于Apache Spark打造的服务化的大数据分析计算服务,开通 AnalyticDB MySQL 服务后只需...

集成Skywalking

选择 使用批处理 后,选择需要批处理的数组节点作为根节点。说明 当告警数据存在多个数组节点时,ARMS告警管理仅支持选择其中一个数组节点进行批处理。在 将源字段映射到目标字段 区域将告警源字段映射到ARMS告警字段上。单击映射图标,...

SQL开发编辑器

引擎 资源组 支持的SQL SQL执行方式 Spark Job型资源组 Spark SQL 可支持批处理和交互式执行两种方式,详情请参见 Spark SQL执行方式。XIHE Job型资源组 XIHE BSP SQL 批处理方式执行。Interactive型资源组 XIHE MPP SQL 交互式执行。重要 ...

常见报错

too many pending request,now count xxx,beyond threshold xxx ERR redis temporary failure ERR redis temporary failure(ErrorCode 7002)Lua脚本与事务(Transaction)NOSCRIPT No matching script.Please use EVAL.BUSY Redis is busy ...

常见报错

too many pending request,now count xxx,beyond threshold xxx ERR redis temporary failure ERR redis temporary failure(ErrorCode 7002)Lua脚本与事务(Transaction)NOSCRIPT No matching script.Please use EVAL.BUSY Redis is busy ...

Hive数据源

附录:脚本Demo参数说明 附录:离线任务脚本配置方式 如果您配置离线任务时使用脚本模式的方式进行配置,您需要在任务脚本中按照脚本的统一格式要求编写脚本中的reader参数和writer参数,脚本模式的统一要求请参见 通过脚本模式配置离线...

集成Zabbix

选择 使用批处理 后,选择需要批处理的数组节点作为根节点。说明 当告警数据存在多个数组节点时,ARMS告警管理仅支持选择其中一个数组节点进行批处理。在 将源字段映射到目标字段 区域将告警源字段映射到ARMS告警字段上。单击映射图标,...

数据转发到其他Topic

通过云产品流转可以将解析脚本处理完的一个设备Topic的消息内容,转发到另一个设备Topic,实现设备间通信(M2M通信)或者其他通信场景。本文以物模型数据上报Topic为例,介绍流转消息数据的完整流程。工作原理 消息转发的云产品流转功能...

周期实例通用运维概述

明细及汇总表DAG图与脚本实例DAG图界面信息相同,下图以周期脚本为例:区域 描述 ① 节点信息 展示当前选中节点的概要信息。单击 查看节点详情,可以查看更多节点信息,包括实例概率、运行诊断、运行日志、操作日志、节点代码和任务参数等...

周期实例通用运维概述

明细及汇总表DAG图与脚本实例DAG图界面信息相同,下图以周期脚本为例:区域 描述 ① 节点信息 展示当前选中节点的概要信息。单击 查看节点详情,可以查看更多节点信息,包括实例概率、运行诊断、运行日志、操作日志、节点代码和任务参数等...

SQL概述

提交MaxCompute作业后,会存在几十秒到数分钟不等的排队调度,所以适合处理批作业,提交一次作业批量处理海量数据。不适合直接对接需要每秒处理几千至数万笔事务的前台业务系统。使用向导 如果您需要.参考文档 说明 了解MaxCompute SQL ...

集成Nagios

选择 使用批处理 后,选择需要批处理的数组节点作为根节点。说明 当告警数据存在多个数组节点时,ARMS告警管理仅支持选择其中一个数组节点进行批处理。在 将源字段映射到目标字段 区域将告警源字段映射到ARMS告警字段上。单击映射图标,...

查看并管理脚本实例

DAG节点支持的操作 脚本实例DAG节点支持的操作与脚本实例列表支持的操作相同。更多信息,请参见 脚本实例列表支持的操作。脚本实例 批量操作 周期脚本支持的批量操作说明如下:操作 描述 重跑 仅 成功、失败 状态的实例支持重跑。如果选中...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
媒体处理 日志服务 视频直播 对象存储 视频点播 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用