概述
上图中的GroupAggregate算子处于INITIALIZING状态，此时该算子不能处理数据。Gemini 与RocksDB在作业启动时进行状态全量迁移的行为不同，Gemini是在作业运行时按需迁移，即只有访问到状态中某条数据时，这条数据才会发生迁移。整个作业启动...
Dataphin如何查看SQL计算任务的运行记录
概述 Dataphin某一时间开发环境在SQL计算任务中运行了一段SQL，如何查看该段SQL的运行记录。详细信息 在开发-运行记录页面可以查看资产数据预览、数据处理、建模数据预览以及OpenAPI数据查询的运行记录，记录以天为粒度进行划分。相关文档 ...
集群管理FAQ
集群创建后，容器运行时不支持切换。您可以创建不同类型运行时的节点池，节点池与节点池的运行时可以不同。更多信息，请参见 节点池概述。如需将节点容器运行时从Docker迁移到containerd。具体操作，请参见 将节点容器运行时从Docker迁移到...
应用模板
运行参数：该应用定义的输入输出参数 输入：从实体表格中获取运行任务的输入文件 输出：运行任务的输出结果写入到实体表格中去 说明 运行参数的输入必须是根实体的已存在的属性。而输出的实体属性如果不存在，将由平台自动创建。例如输出中...
查看启动和运行日志
说明 启动日志中不包含调度日志，需要在运行事件中去查看相应的日志信息。例如资源不足、交换机IP不足都属于调度方面的。运行日志 Flink的Job Manager和Task Managers的日志可以在作业探查页面查看，也可以在Flink UI界面查看。关于如何...
Flow语言专项场景
Java语言 部署发布服务器 部署场景描述 部署操作流程 ECS 使用Jar/War的制品形式进行交付 制品最终会运行在ECS或者自有主机上 Java应用构建并部署ECS K8s 使用容器镜像的制品形式进行交付 制品最终会运行在阿里云ACK或者其他K8s集群上 Java...
运维监控
应用部署上线后，如何监控线上运行状态，如果出现问题，如何定位？部署在函数计算Serverless架构类型的应用 在代码中记录日志是排查线上问题的最好办法 NodeJS写日志 console.info('写日志');Python写日志 import logging logger=logging....
检测服务概述
检测方案：一组规则包和对应运行时的参数配置组成了检测方案，方案可以复用到多个代码库上，当方案应用于代码库上被运行，即成为一个检测任务。检测任务：在代码库上运行检测方案的一系列规则形成一个检测任务，检测任务可以指定分支多次...
查看并管理脚本实例
执行重跑操作时，会校验当前实例节点的上游节点的运行状态是否全部为 成功，如果校验不成功则当前实例的运行状态将直接被置为 未运行。如果业务场景需要执行重跑操作，您可以执行强制重跑。具体操作，请参见 强制重跑当前实例。查看节点...
运行并管理手动任务
说明 列表模式下会运行整个手动业务流程（存在依赖关系的会按照依赖关系从上到下运行，不存在依赖关系的节点将同时运行）。查看实例 单击操作栏中的 查看实例，即可跳转至 手动实例 页面，查看手动业务流程的运行结果。详情请参见：查看并...
查看并管理脚本实例
执行重跑操作时，会校验当前实例节点的上游节点的运行状态是否全部为 成功，如果校验不成功则当前实例的运行状态将直接被置为 未运行。如果业务场景需要执行重跑操作，您可以执行强制重跑。具体操作，请参见 强制重跑当前实例。查看节点...
魔笔应用可以部署到任意地方去运行吗？
问题描述 魔笔中创建的应用可以部署到任意其他地方去运行吗？问题原因 魔笔目前是运行在自己的服务器上面的，应用的运行，需要后端服务、前端应用，算力、数据库、流量等底层资源支持，我们是云原生平台，会提供或者适配这些底层资源，让...
资源运维
背景信息 您可以根据具体业务需求对资源组上运行的实例任务定制监控指标和自动运维规则，资源运维页面会以可视化方式为您展示资源组使用情况及实例任务执行情况，实现资源组及实例任务的智能监控和自动化运维，减少繁杂的人工操作，提高运...
SOFAArk 概述
这种做法只能有效避免包冲突问题，不能从根本上解决包冲突的问题。如果某个应用的确需要在运行时使用两个相互冲突的包，例如 protobuf2 和 protobuf3，那么类似 Spring Boot 的做法依然解决不了问题。为了彻底解决包冲突的问题，需要借助类...
基础使用
模式 描述 特点 Session模式 Seesion模式会根据您设置的资源参数创建一个Flink集群，所有作业都将被提交到这个集群上运行。该集群在作业运行结束之后不会自动释放。例如，某个作业发生异常，导致一个Task Manager关闭，则其他所有运行在该...
离线集成任务属性配置概述
通过依赖关系有序调度运行上下游节点，即当上游节点运行成功后，下游节点才会启动运行，保障适时的产出有效业务数据。您可使用自动解析快速设置节点依赖，也可手动添加节点的依赖关系。运行配置 用于定义任务运行超时时间和任务运行失败时...
离线集成任务属性配置概述
通过依赖关系有序调度运行上下游节点，即当上游节点运行成功后，下游节点才会启动运行，保障适时的产出有效业务数据。您可使用自动解析快速设置节点依赖，也可手动添加节点的依赖关系。运行配置 用于定义任务运行超时时间和任务运行失败时...
Group Identity功能说明
在排队运行任务的场景中，如果当前运行的是普通或低优先级的任务，当高优先级任务的vruntime小于当前任务时，高优先级任务可以无视原有调度策略（任务在CPU上运行的时间小于最小运行时间时不可以进行资源抢占），进行资源抢占。ID_NORMAL ...
创建ID安全匹配任务
日常不调度：配置后不运行任务。按日调度：每天运行任务。按周调度：每周运行任务。按月调度：每月运行任务。数据引入 选择使用方和加持方的输入表名、分区和碰撞字段。使用方：指需要数据的一方。加持方：指提供数据的一方。数据名称：...
前言
镜像中封装了运行作业的程序或算法，使用 App 提交作业，只需要指定输入数据和输出路径即可以运行作业，而不用关心上述的资源配置以及程序运行的细节。工作原理 创建 App：创建 App 时，将运行作业需要的软件或脚本安装在自定义的镜像中，...
检查索引使用
也可以在一个运行中的服务器上收集有关索引使用的总体统计情况。很难明确地表达决定创建哪些索引的通用过程。在之前的小节中的例子里有一些典型的情况。通常需要大量的实验才能决定应该创建哪些索引。本小节剩余的部分将给出一些创建索引的...
离线任务属性配置概述
通过依赖关系有序调度运行上下游节点，即当上游节点运行成功后，下游节点才会启动运行，保障适时的产出有效业务数据。您可使用自动解析快速设置节点依赖，也可手动添加节点的依赖关系。运行配置 用于定义任务运行超时时间和任务运行失败时...
离线任务属性配置概述
通过依赖关系有序调度运行上下游节点，即当上游节点运行成功后，下游节点才会启动运行，保障适时的产出有效业务数据。您可使用自动解析快速设置节点依赖，也可手动添加节点的依赖关系。计算任务运行配置 用于定义任务运行超时时间和任务...
基本概念
使用上会稍有区别，C/S版本需要配置计算Server的服务地址、上传待求解问题、异步拉取求解结果，而本地运行版不需要。云鉴权 是指运行求解器时的鉴权文件 fl_client.ini 文件方案。此方法在求解器运行的时候会联网鉴权。仅用于校验鉴权信息...
任务未运行
问题现象 在周期实例运行时，实例定时时间和实例开始运行时间有时并不完全一致，或任务到了定时时间还没运行。问题排查 您可以先通过 上游分析 功能定位阻塞当前任务运行的关键实例，再通过 智能诊断 分析当前任务阻塞原因，快速定位问题。...
Ride测试环境搭建
为此，阿里云IoT团队提供了运行在Ride环境的测试case，通过测试case，设备厂商可以验证是否实现了所有接口的功能。Ride运行环境打包在《准入认证软件包》中，目前《准入认证软件包》只对合作的厂商开放，厂商需要找阿里云IoT支持人员申请。...
配置数据质量规则去噪
当任务触发质量规则校验时，您可以使用去噪管理功能，对当前工作空间内，数据质量规则校验异常的数据不触发报警，且不阻塞任务运行（任务不会因为数据质量校验不通过而失败退出）。前提条件 已创建数据质量校验规则，详情请参见 配置规则：...
常见问题
一般MaxCompute任务是混部集群上执行的，混部集群底层对离线、在线任务是共用的，因此可能出现离线任务占用了较多的集群资源，导致在线任务获取不到相应的资源，出现运行缓慢甚至失败等情况。一般建议：限制离线任务的资源使用。可以限制...
采集Job任务的日志
由于ECI不支持DaemonSet，在ECI上运行的Job任务运行结束后，Pod会立即退出，因此可能会出现日志尚未完全采集的情况。建议您为Job挂载NAS文件系统来保存日志文件。本文介绍在ACK集群中使用ECI来运行Job任务时，如何采集Job任务的日志。前提...
补数据
为什么补数据选择业务时间后不运行，实例显示黄色，实例状态显示等待时间？为什么补数据选择业务时间昨天和今天，也会出现等待时间的情况？为什么补数据选择补0点~1点生成了多个实例？为什么进行大量补数据操作时，会出现等待资源情况...
基于ECI运行Job任务
因此，您可以选择将这个Job任务调度到虚拟节点上，而不占用集群本身节点的计算资源。前提条件 您已经创建了一个Kubernetes托管版集群。具体操作，请参见 创建Kubernetes托管版集群。您已经在该集群上部署了一个虚拟节点。具体操作，请参见 ...
安装WAF客户端
根据您的集群部署配置，在本地服务器上安装和卸载防护节点设置，以及监控服务运行状态，提供稳定有效的防护能力。您在本地服务器上安装并启动vagent后，服务器的系统进程中将会出现 AliYunDunWaf，表示vagent正在工作，可以与阿里云WAF服务...
流水线的运行
当前一阶段完成时，若后一阶段正在运行，则后一阶段不受干扰，继续运行完成。待运行完成，出现空闲时，后一阶段自动启动，接续前一阶段版本运行。若在后一阶段运行时，前一阶段完成了多次运行，则在后一阶段出现空闲时，接续前一阶段的最近...
基本概念
应用诊断 EDAS针对应用提供了详细的问题排查和性能分析，包括提供当前应用运行的单机上的JVM堆／非堆内存、类加载（ClassLoader）、线程、Tomcat连接器的统计数据以及方法追踪等。云服务总线 云服务总线 CSB（Cloud Service Bus）面向专有...
查看并管理明细及汇总表实例
执行重跑操作时，会校验当前实例节点的上游节点的运行状态是否全部为 成功，如果校验不成功则当前实例的运行状态将直接被置为 未运行。如果业务场景需要执行重跑操作，您可以执行强制重跑。具体操作，请参见 强制重跑当前实例。字段及批量...
查看并管理明细及汇总表实例
执行重跑操作时，会校验当前实例节点的上游节点的运行状态是否全部为 成功，如果校验不成功则当前实例的运行状态将直接被置为 未运行。如果业务场景需要执行重跑操作，您可以执行强制重跑。具体操作，请参见 强制重跑当前实例。字段及批量...
一键MaxCompute Merge任务节点问题排查方案
Merge任务运行慢或运行长时间不结束 运维中心查看任务运行日志，可以看到当前运行中的SQL任务，日志如下：2022-08-07 18:10:58,919 INFO[LogUtils.java:20]-Wait instance 20220807101058817gbb6ghx5 to finish.2022-08-07 18:10:58,938 ...
Sidecar 监控
如果 Sidecar 不处于运行、结束或等待状态，则处于等待状态。未知：由于某些未知错误引起的状态，例如 sidecar 注入失败等。Sidecar 健康状态统计：展示了在统计时段内处于健康状态下的 Sidecar 数量的变化趋势。Sidecar 列表 在 Sidecar ...
K8s内核高可用架构
K8s管控正常，集群可以进行资源变更 master上以deployment作为controller的pod可以顺利迁移 worker节点Pod正常运行 worker节点无状态Pod可以正常迁移 关机后重启，pod能迁移回来 2/3个master节点关机 K8s管控不可用，不能进行资源变更 ...
查看实例统计
如果您已选择了运行成功、运行失败和已运行实例总数，则鼠标悬停至趋势图上后，系统为您展示 已运行实例总数、运行成功、运行失败、历史15天失败实例均值。实例运行统计 重要 仅当实例统计页面以全局视角（图标）方式展示时，支持查看实例...
- 产品推荐
- 这些文档可能帮助您