新建补数据任务
高级配置 并发运行组数 并发运行组数用于控制同时有多少个补数据进程在运行。您可以选择并发运行的组数，系统支持最少并发运行 1组，最多并发运行 12组。业务日期的跨度时间小于并发运行组数，则实际并行组数为业务日期天数。业务日期的...
常见问题
则可联系产品团队或提工单 建议在任务执行过程中适当添加日志信息，便于任务出错时定位原因 问：如何提高大量任务并发执行效率？答：基因分析平台将为单个task准备机器资源、拉取docker镜像等，因此高并发时同步准备机器资源或拉取docker...
监控指标
单实例多请求数 并发请求数（FunctionConcurrentRequests）个 在调用函数时，函数执行实例中并发执行的请求个数。按1分钟或1小时粒度统计求和。说明 如果不开启单实例多请求，则默认单实例并发执行单请求。如需展示该指标，请开启实例级别...
DataWorks资源组概述
推荐指数★选择指引 时效性要求：在数据集成任务高并发执行且无法错峰运行的情况下，企业需要独享的计算资源来保障数据快速、稳定地传输，此时您可选择使用独享数据集成资源组。访问内网环境的需求：独享数据集成资源组拥有公网访问能力，...
计量计费
StableDiffusion文生图模型 计费单元 模型服务 计费单元 StableDiffusion文生图模型 张 计费单价 模型名称 计费单价 stable-diffusion-xl 限时免费中，计费方案即将推出；当前免费额度如果耗尽后可通过发送电子邮件至modelstudio@service....
基础术语
子任务可以并发执行或根据条件执行。任务编排 Topology management 将多个子任务根据业务逻辑编辑成拓扑任务的过程。任务分步 Step 一个简单任务可以拆分成多个执行步骤（step），由不同的执行器（handler）按顺序执行。前置步骤成功完成后...
变更规格操作
如果当前资源组使用率过高，需要并发执行的任务数较大，当前资源组不能满足实际需求，您可以针对该资源组进行升配；若当前资源组规格较大超过业务实际需要，您可以针对该资源组进行降配，以节省资源费用。本文为您介绍如何对资源组进行规格...
限流配置
并发运行数 设置并发运行数，需要结合实际限流场景进行配置。说明 并发数为0代表不下发。生效时间 设置限流规则生效时间。支持设置 全时间段、指定时间范围、指定时间区间。全时间段：根据配置的限流规则持续生效。指定时间范围：指定时间...
循环（Map）
执行并行循环步骤会并发执行输入参数中的每个元素的处理器状态。当所有分支执行结束后，默认将输出一个包含所有分支结果的map[string]any，然后通过输出构造器将结果进行进一步处理。说明 循环状态最大并发数限制为 100，具体能够支持的...
计费逻辑说明
任务量需求 数据集成任务高并发执行且无法错峰运行的情况下，企业需要独享的计算资源来保障数据快速、稳定地传输，此时您可选择使用独享数据集成资源组。访问公网需求 独享数据集成资源组拥有公网访问能力，如果您的数据库在公网内，独享...
功能特性
单个简单任务对应一个 handler，支持任务分片及分步：当需要并发执行并且不关注资源利用率时，可以使用简单任务的分片功能。当需要将一个任务分成若干步骤按顺序执行时，可以使用简单任务的分步功能。集群任务 适用于复杂的调度场景，支持...
错误处理
函数并发执行超上限。429 以二进制指数退避方式重试执行5小时。当您的函数执行失败后将在0.5秒后开始重试，后续重试执行的时间间隔将以二进制指数退避方式计算，即重试时间间隔为1秒、2秒、4秒、8秒等持续重试5小时。否 由于阿里云账号（主...
数据加工
重要 数据加工任务运行并发度不足不会触发源数据Logstore的 自动分裂Shard 功能，需要手动分裂源数据Logstore的Shard，才能提高加工任务的运行并发度。自动分裂Shard 操作请参考 管理Shard。分裂源数据Logstore的Shard提升任务的最大运行时...
使用限制
重要 数据加工任务运行并发度不足不会触发源数据Logstore的 自动分裂Shard 功能，需要手动分裂源数据Logstore的Shard，才能提高加工任务的运行并发度。自动分裂Shard 操作请参考 管理Shard。分裂源数据Logstore的Shard提升任务的最大运行时...
使用限制
1 天（公测版暂不支持）并发和循环限制 规则 限制数量 注释 实例运行并发 50 个 允许在同一时间或并行运行的逻辑编排实例数上限 并发缓冲 50 个 当逻辑编排实例的并发数达到最大值时，可等待运行的逻辑编排实例数上限 Foreach 数组项 10000...
错误处理
函数并发执行超上限。429 以二进制指数退避方式重试执行5小时。当您的函数执行失败后将在0.5秒后开始重试，后续重试执行的时间间隔将以二进制指数退避方式计算，即重试时间间隔为1秒、2秒、4秒、8秒等持续重试5小时。否 由于阿里云账号（主...
限流配置
并发运行数 设置并发运行数，需要结合实际限流场景进行配置。说明 并发数为0代表不下发。生效时间 设置限流规则生效时间。支持设置 全时间段、指定时间范围、指定时间区间。全时间段：根据配置的限流规则持续生效。指定时间范围：指定时间...
Hive
支持并发执行多个段落。支持参数功能。支持图表展示SQL结果。示例 多行SQL 如下图所示，在一个段落里执行2句SQL语句（以分号间隔），第一句切换执行引擎，第二句运行Select语句。注释 以-开头的均为SQL注释。参数功能 Zeppelin支持${var=...
透视分析：按研发链路
任务运行并发数趋势：查看所选工作空间当前任务运行并发的变化趋势，支持查看调度任务并发总数，离线同步任务并发总数及各类型资源组在具体时间点的并发变化趋势。时间区间只支持选择一天的数据，您可以选择7天中任意一天。数据同步：查看...
架构优化
通过弹性计算、网络和数据库几大类IaaS/PaaS云资源性能优化，可以为用户在云上环境中获得云...Python、Ruby等解释型语言程序在运行时才翻译成机器码，每次执行都依赖于解释器的翻译，在增加灵活性的同时程序执行效率与编译型语言相比较低。
SQL限流（rds_ccl）
语法二：SELECT rds_add_ccl_rule_with_query_id(1,-待限流的SQL语句的query_id 1,-仅限制主实例 3,-最多允许3条此类SQL并发执行 2,-最多允许2个此类SQL等待 true,-规则立即生效 ''-SQL语句的文本，本示例不填写 'limit constant select',-...
SQL限流（rds_ccl）
语法二：SELECT rds_add_ccl_rule_with_query_id(1,-待限流的SQL语句的query_id 1,-仅限制主实例 3,-最多允许3条此类SQL并发执行 2,-最多允许2个此类SQL等待 true,-规则立即生效 ''-SQL语句的文本，本示例不填写 'limit constant select',-...
EMR Workflow商业化公告
建议并发执行任务数上限 emr.w1.small 1 vCPU 2 GiB 2 任务提交至Yarn执行：16 任务不提交至Yarn执行：10 说明 任务提交至Yarn执行：配置工作流任务时开启 提交到Yarn执行 开关，所有的工作流任务将提交至EMR集群的Worker节点上运行。...
表数据格式
数据优化管理操作例如小文件clustering、compaction等都可按照Bucket粒度来并发执行计算，提高执行效率，缩短运行时间。记录类型 目前记录只支持upsert、delete两种数据类型进行写入和存储，upsert包含insert/update两种隐含语义，如记录不...
MaxCompute执行并发插入操作时返回ODPS-0110999错误码
问题描述 阿里云云原生大数据计算服务MaxCompute在执行并发插入操作时，返回如下报错：ODPS-0110999:Critical!Internal error happened in commit operation and rollback failed,possible breach of atomicity-Rename directory failed ...
创建同步任务
开启：分布式执行模式可以将您的任务切片分散到多台执行节点上并发执行，进而做到同步速度随执行集群规模做水平扩展，突破单机执行瓶颈。未开启：配置的并发数据仅仅是单机上的进程并发，无法利用多机联合计算。如果您对于同步性能有比较...
计量计费
计费单元 模型服务 计费单元 通用文本向量 token 重要 这里token数量指的是大模型使用的tokenizer分词后对应的最小分词单元的数量。在通用文本向量模型中，单个token平均约对应1.5个汉字,0.7个英文单词。通用文本向量服务根据模型输出结果...
Pipeline执行引擎
parallel_pipeline_task_num parallel_pipeline_task_num 代表了SQL查询进行并发执行的Pipeline Task数目。SelectDB默认的配置为 0，会自动设置为CPU核数的一半。您也可以根据自己的实际情况进行调整。set parallel_pipeline_task_num=0;您...
GroupInvokeFlow-批量运行工作流
调用成功后，并不代表所有请求并发执行，逻辑编排会自动根据请求情况确定单次执行的开始执行时间。该 API 每次调用认为是一次执行分组（Group），假设共需要执行工作流 1000 次，每 100 次为一个分组，那么就需要调用 10 次该 API，同时...
计量计费
计费单元 模型服务 计费单元 通用文本向量 token 重要 这里token数量指的是大模型使用的tokenizer分词后对应的最小分词单元的数量。在通用文本向量模型中，单个token平均约对应1.5个汉字，0.7个英文单词。通用文本向量服务根据模型输出结果...
独享调度资源组
在任务高并发执行且无法错峰运行的情况下，需要专有的计算资源来保障任务定时被调度运行时，建议您选择使用DataWorks的独享调度资源组。本文为您概要介绍独享调度资源组。适用场景 对任务时效性要求高，避免公共资源组资源争抢导致任务延时...
使用应用观测器排查代码问题
观测线程执行堆栈和上下文变量，而不会阻塞程序的执行；统计代码行执行次数和方法执行耗时。前提条件 目前仅支持观测 Java 应用（JDK>=1.7）；不能跟Java 远程调试同时使用（即不能跟-agentlib:jdwp 同时使用）Java 应用需要运行在 Linux...
自动设置用户网卡DNS
步骤二：制作自定义镜像 完成步骤一的操作您已通过脚本创建了任务计划程序，通过运行任务计划程序成功设置了一台云电脑的网卡DNS，此时可以通过该云电脑创建自定义镜像，那么该镜像就包含了任务计划程序；或者也可以在本地电脑制作一个包含...
历史慢Query
Hologres从V0.10开始支持慢Query的查询与分析，帮助您对系统中...查看甘特图 HoloWeb支持甘特图分析功能，您可单击Query列表右上角的 甘特图，在弹出的对话框中查看同一时间Query的并发执行情况，帮助您更好地分析并发场景下的性能瓶颈问题。
Config和Hint配置参数
AGGREGATION_PATH_TYPE=single_agg*/分组聚合查询优化 调整运⾏时策略 hash_partition_count 每个计算任务都会被切分成多个Task并发执行，充分利用计算资源。您可使用该Hint设置并发度。默认值为32，取值范围为大于0的整数。HASH_PARTITION...
安装C++ SDK
复制protoc到可执行程序目录(cd到解压目录bin中后执行)mv protoc/usr/local/bin#把include目录的内容复制到可执行程序目录(cd到解压目录include中后执行)cp-r google/usr/local/include 进入项目文件夹，执行 make 命令编译。重要 请您根据...
将Spring Task迁移至SAE Job
各个节点独立运行，存在单点风险，无分布式协调机制，需要考虑禁止并发执行。随着定时任务规模增多，无统一视角对其进行任务进度的追踪和管控，难以维护。功能过于简单，没有超时、重试和阻塞等任务高级特性。可观测能力差，问题排查定位...
产品计费
说明 除体验版和旗舰版外，若在版本赠送并发资源之外，您此前额外购买了并发，且当前无需额外并发，可在产品控制台 续费升配>降配 完成“额外并发”的降配。支持降配的版本 标准版（通义版）、企业版（通义版）：可支持降配。体验版（通义...
同步时源库为MongoDB的注意事项及限制
如果同步的源数据库类型为MongoDB，如自建MongoDB、云数据库MongoDB，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。源库为MongoDB的同步方案概览 根据如下同步方案，查看同步任务的注意事项及...
通过脚本模式配置离线同步任务
分布式执行模式可以将您的任务切片分散到多台执行节点上并发执行，进而做到同步速度随执行集群规模做水平扩展，突破单机执行瓶颈。null：不开启分布式处理能力。配置的并发数据仅仅是单机上的进程并发，无法利用多机联合计算。重要 如果独...
- 产品推荐
- 这些文档可能帮助您