文档快照
x-oss-process=doc/snapshot HTTP/1.1 Host:doc-demo.oss-cn-hangzhou.aliyuncs.com Date: Fri,28 Oct 2022 06:40:10 GMT Authorization:OSS qn6qrrqxo2oawuk53otf*:UNQDb7GapEgJkcde6OhZ9J*获取word文档example第2页的jpg快照 处理方式 ...
图片处理
x-oss-process=image/<yourAction1>,<yourParamValue1>/<yourAction2>,<yourParamValue2>/.例如：http://image-demo.oss-cn-hangzhou.aliyuncs.com/example.jpg?x-oss-process=image/resize,w_100/rotate,90 支持HTTPS访问 图片服务支持...
数据处理配置
每个数据源默认免费提供2个资源，如您的数据量更新较大，并且对数据的时效性有要求的场景，可以通过数据处理配置，扩容process_partition_count来支持更大的数据更新。扩容数据处理资源 在高级配置中，用户点击数据处理配置后，选择需要...
数据处理配置
每个数据源默认免费提供2个资源，如您的数据量更新较大，并且对数据的时效性有要求的场景，可以通过数据处理配置，扩容process_partition_count来支持更大的数据更新。扩容数据处理资源 在高级配置中，用户点击数据处理配置后，选择需要...
批处理
选中 批处理 页签，查看批处理列表，单击页面下方翻页按钮可查看上一页或下一页。批处理状态说明如下表所示。状态 说明 就绪 任务就绪，刚创建的任务处于就绪状态。运行中 正在执行，正常执行的任务状态。成功 任务执行完成。暂停 任务暂停...
负载均衡SLB产品家族介绍
负载均衡SLB（Server Load Balancer）是一种对流量进行按需分发的服务，通过将流量分发到不同的后端服务器来扩展应用系统的吞吐能力，并且可以消除系统中的单点故障，提升应用系统的可用性。负载均衡SLB产品家族包括应用型负载均衡ALB...
ListBatches-查询批处理任务列表
查询批处理任务列表，支持排序，支持按照任务标签，任务状态等条件查询。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权...
变更流程问题排查指南
如果您设置了2批部署，则会有 第一批部署 和 第二批部署 两个页面。区域单击失败的阶段（如 执行部署），在右侧实例中查看失败步骤的具体日志，定位问题。应用变更典型异常及处理 下面介绍应用变更时的几种典型异常如何通过变更流程排查及...
批量添加域名
根据页面第一步，输入要找回的域名，每行1个。根据页面第二步，按照云解析提供的 主机记录、记录值，到各个域名当前所在的DNS厂商为域名添加 txt记录。单击 找回 按钮，提交批量域名找回任务。批量域名找回任务的处理结果，在 批量操作记录...
Transaction Table2.0概述
随着当前数据处理业务场景日趋复杂，很多业务场景并不要求延时秒级更新可见或者行级更新，更多的需求是分钟级或者小时级的近实时数据处理叠加海量数据批处理场景，MaxCompute支持基于Transaction Table2.0实现近实时的增全量一体的数据存储...
变量
在使用数据处理功能的批处理或触发器功能时，每个Object都会触发一个任务，任务中需要指定处理后的文件保存的输出路径，如果多个任务输出路径是同一个路径，则会产生文件覆盖，因此需要保证输出路径为动态路径，所以引入变量。此外，您可以...
Slowly Changing Dimension
INSERT INTO s1 VALUES(1,"addr_1_v1"),(2,"addr_2_v1"),(3,"addr_3_v1");INSERT INTO s2 VALUES(2,"addr_2_v2"),(4,"addr_1_v1");通过使用两次批量写入，代替流式写入的方式模拟G-SCD on Delta Lake的数据处理。第一次批量写入，然后创建...
API概览
批处理 批处理 CreateBatch 创建批处理任务 创建一个批处理任务，指定存储内已存在的若干文件，对其批量执行指定操作，如转码、格式转换等。SuspendBatch 暂停批处理任务 将一个 Running（正在执行）的批处理任务暂停。ResumeBatch 恢复批...
聚类标注方法介绍
标注动作包括：正确 错误-修改知识 错误-已处理 未覆盖-新增知识 未覆盖-已处理 无效 待定 标注步骤 第1步：选择高频用户问法 在【聚类问法组】中选择高频聚类问法，查看用户问法与知识的匹配类型及匹配明细。第2步：判断用户问法与知识的...
权限
当您使用智能媒体管理...{"Statement":[{"Effect":"Allow","Action":["oss:GetObject","oss:PutObject","oss:PostProcessTask","oss:ProcessIMM"],"Resource":["acs:oss:*:*:bucketname1/*","acs:oss:*:*:bucketname2/*"]},{"Action":["imm:...
通过Spark SQL读写Delta外表
步骤二：创建外库和Delta外表 说明 您可以选择批处理或交互式执行任意一种方式执行以下SQL语句。详情请参见 Spark SQL执行方式。执行以下语句，创建数据库。如果已有数据库，可跳过本步骤。CREATE DATABASE if not exists external_delta_...
通过Spark SQL读写Hudi外表
步骤二：创建外库与Hudi外表 说明 您可以选择批处理或交互式执行任意一种方式执行以下SQL语句。详情请参见 Spark SQL执行方式。执行以下语句，创建数据库。如果已有数据库，可跳过本步骤。CREATE DATABASE adb_external_db_hudi location '...
顺序消息
如上图所示，消息组1和消息组4的消息混合存储在队列1中，云消息队列 RocketMQ 版 保证消息组1中的消息G1-M1、G1-M2、G1-M3是按发送顺序存储，且消息组4的消息G4-M1、G4-M2也是按顺序存储，但消息组1和消息组4中的消息不涉及顺序关系。...
查看并处理任务
查看已处理的任务 在任务中心的 已处理 的页签，查看已处理的任务。您可以单击任务的名称或操作列下的 图标，查看任务详情。查看我发起的任务 在任务中心的 我发起 的页签，查看我发起的任务。您可以单击任务的名称或操作列下的 图标，查看...
查看并处理任务
查看已处理的任务 在任务中心的 已处理 的页签，查看已处理的任务。您可以单击任务的名称或操作列下的 图标，查看任务详情。查看我发起的任务 在任务中心的 我发起 的页签，查看我发起的任务。您可以单击任务的名称或操作列下的 图标，查看...
触发器
和批处理的不同的是，触发器只会对创建触发器之后OSS内新增的文件进行处理，对存量文件则不会处理。说明 新版数据处理功能API、SDK支持在 IMM服务接入点 中的地域进行使用。注意事项 触发器将对满足条件的所有文件生成对应数据处理任务，请...
保障离线在线一致性的CTR预估方案
本案例使用经典的CTR点击率预估数据集Avazu进行一体化模型训练，并将离线调试完成的 归一化预测->独热编码预测->向量聚合->FM预测 流程完整部署到EAS。您在线上环境进行模型预测时，也可以使用离线训练时的数据预处理和特征工程逻辑，以...
仪表盘
借助于阿里云ARMS Prometheus监控服务和Grafana的指标存储和展示能力，云消息队列 RocketMQ 版 提供可实时...如果这60条消息在第1秒发送了40条，第2秒发送了20条，则该实例在这1分钟内每秒的TPS分别为40、20、0、0.0。实例TPS Max值=40次/秒。
生成测试数据
模拟数据设置信息 显示创建模拟数据任务时您选择的 目标表、模拟生成数据量、批处理大小、插入模拟数据前清空表、数据冲突处理方式、实际插入记录、冲突记录、忽略插入、清除记录 和 规则设置展示 等信息。在任务信息面板右下角，单击 再次...
集成Open-Falcon
示例告警源：{"name":"cpu alert","endpoint":"test-host","metric":"cpu.user","status":"PROBLEM","step":"1","priority":2,"time":"2021-09-08 09:25:00","tpl_id":1,"exp_id":2,"stra_id":1,"tags":""} 在 告警集成 页签单击目标集成...
集成Skywalking
选择 使用批处理 后，选择需要批处理的数组节点作为根节点。说明 当告警数据存在多个数组节点时，ARMS告警管理仅支持选择其中一个数组节点进行批处理。在 将源字段映射到目标字段 区域将告警源字段映射到ARMS告警字段上。单击映射图标，...
Spark SQL执行方式
AnalyticDB for MySQL 湖仓版（3.0）支持使用批处理和交互式两种方法执行Spark SQL，两种执行方式都直接与 AnalyticDB for MySQL 的元数据服务连通，可以读写 AnalyticDB for MySQL 的库表。本文介绍批处理和交互式两种执行方式的注意事项...
上传txt验证文件
一、效果展示 二、注意事项【前提】1.需要授权 已认证的公众号（支持服务号、订阅号）。2.域名必须是 已通过ICP备案 验证。【要求】需要完成 四个步骤 的设置，生效后 分享才有效果。（其他步骤教程见文章底部）三、设置教程（本文教程针对...
文档处理概述
您可以使用批处理对存量文档进行转换处理。操作方式，请参见 批处理。您可以使用触发器对增量文档进行转换处理。操作方式，请参见 触发器。您可以通过同步处理接口x-oss-process对文档进行在线预览、在线编辑、文档快照、文档智能处理。...
DataStream的Timer使用最佳实践
}@Override public void processElement(Tuple2,Long>value,Context ctx,Collector<Tuple2,Long>>out)throws Exception { if(sumState.value()=null){/当某个Key的数据第一次处理，或在Timer触发后第一次处理时，根据当前数据的事件时间，...
使用EasyTransfer进行文本分类
无 STRING batchSize 否 训练时的批处理大小。如果是多卡训练，则为每个GPU上的批处理大小。32 INT numEpochs 否 训练总Epoch的数量。1 INT optimizerType 否 优化器类型，取值包括：adam lamb adagrad adadeleta adam STRING learningRate...
云效Flow基于标签功能实现阿里云ECS多环境发布
推荐使用第一批暂停，在发布完第一批之后，对线上服务进行观察，如果没有异常，则可以继续其余批的发布·分批数量：希望主机组中的机器分为几批进行发布。比如一共4台机器，分两批，则每批同时发布2台机器。本文中配置如下所示：7、部署...
DescribeBatchResultDetail-查询批量处理结果的详细...
查询批量处理结果的详细信息。接口说明 前提条件：请在批量任务执行完成后，再调用此接口。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 ...
集成自建Prometheus告警
选择 使用批处理 后，选择需要批处理的数组节点作为根节点。说明 当告警数据存在多个数组节点时，ARMS告警管理仅支持选择其中一个数组节点进行批处理。在 将源字段映射到目标字段 区域将告警源字段映射到ARMS告警字段上。单击映射图标，...
UpdateBatch-更新批处理任务
更新批处理任务信息，如输入的数据源配置、数据处理的配置、批处理任务标签等信息。接口说明 更新批处理任务时，当批处理任务状态处于 Ready（就绪）或 Failed（失败）时可以更新，更新时不会改变当前的任务状态。更新完成后，之前未完成的...
文档转换
例如：1,2,4-10 表示转换第1页、第2页、第4页~第10页。文档转换时也会用到 sys/saveas 和 notify 参数。更多信息，请参见 另存为 和 消息通知。使用REST API 转换信息 转换前 文档格式：DOCX 文档名称：example.docx 处理方式：文档格式...
参考：渐进式计算
渐进式计算（Progressive Computing）是处于传统的流计算和批处理之间的一种计算方式，具有高资源利用率和低延迟的优势。本文为您介绍渐进式计算的基础配置、作业调优配置以及使用示例。背景信息 渐进式计算能够处理增量数据并维护中间结果...
计算成本优化
按量付费项目A的作业并入后，第一批作业运行共需占用2000CU时，资源预留了1000CU，全部运行完成第一批作业需运行2h，导致第一批作业在03:00才全部运行完成，作业延期1h。按量付费项目A的作业并入后，第二批作业运行共需占用1000CU时，资源...
快速开始
text-embedding-v2是text-embedding-v1模型的升级版本,更新内容主要包括：语种扩充:text-embedding-v2模型对比text-embedding-v1模型扩展日语、韩语、德语、俄罗斯语文本向量化能力 效果提升:预训练模型底座和SFT策略优化提升embedding模型...
SQL性能问题
SELECT*FROM(SELECT*,ROW_NUMBER()OVER(PARTITION BY b ORDER BY proctime)as rowNum FROM T)WHERE rowNum=1 以上示例是将T表按照b字段进行去重，并按照系统时间保留第一条数据。proctime在这里是源表T中的一个具有Processing Time属性的...
- 产品推荐
- 这些文档可能帮助您