基于镜像的日常发布
对于在线上运行的机器我们需要分批的去更换系统盘。总结下来，我们需要做的操作如下：更新镜像后，可以启动一台新的机器，或者在一台机器上执行命令后打成一个镜像。用新镜像分批更新系统盘。对于以上操作，我们一步一步的操作实在是太繁琐...
常见问题
任务上一次没运行完，下一次是排队还是不运行了？one_time任务运行完成后怎么查看历史记录？如何进行秒级别调度？某个时间点没有调度怎么办？SchedulerX如何设置超时时间？为什么实例停止之后还会执行？如何进行任务管理高级配置？机器繁忙...
常见问题
任务上一次没运行完，下一次是排队还是不运行了？one_time任务运行完成后怎么查看历史记录？如何进行秒级别调度？某个时间点没有调度怎么办？SchedulerX如何设置超时时间？为什么实例停止之后还会执行？如何进行任务管理高级配置？机器繁忙...
常见问题
任务上一次没运行完，下一次是排队还是不运行了？one_time任务运行完成后怎么查看历史记录？如何进行秒级别调度？某个时间点没有调度怎么办？SchedulerX如何设置超时时间？为什么实例停止之后还会执行？如何进行任务管理高级配置？机器繁忙...
索引
任务上一次没运行完，下一次是排队还是不运行了？one_time任务运行完成后怎么查看历史记录？如何进行秒级别调度？某个时间点没有调度怎么办？SchedulerX如何设置超时时间？为什么实例停止之后还会执行？如何进行任务管理高级配置？机器繁忙...
索引
任务上一次没运行完，下一次是排队还是不运行了？one_time任务运行完成后怎么查看历史记录？如何进行秒级别调度？某个时间点没有调度怎么办？SchedulerX如何设置超时时间？为什么实例停止之后还会执行？如何进行任务管理高级配置？机器繁忙...
索引
任务上一次没运行完，下一次是排队还是不运行了？one_time任务运行完成后怎么查看历史记录？如何进行秒级别调度？某个时间点没有调度怎么办？SchedulerX如何设置超时时间？为什么实例停止之后还会执行？如何进行任务管理高级配置？机器繁忙...
依赖关系
为什么要设置调度依赖 配置调度依赖后，可保障调度任务在运行时能取到正确的数据（当前节点依赖的上游节点成功运行后，DataWorks通过节点运行的状态识别到上游表的最新数据已产生，此时，下游节点再去取数）。避免下游节点取数据时，上游表...
通过虚拟节点将Pod调度到ECI上运行
借助虚拟节点Virtual Node，您可以直接调度Pod到ECI上运行，省去节点创建时间，避免产生闲置节点资源，降低成本。适用场景 在ECI上运行Pod适合应对突发流量，也能降低计算成本。典型场景包括：有明显波峰波谷的在线业务：例如在线教育、...
配置调度规则
匹配到节点对应污点后，应用在节点上可以继续运行的时间。若不指定该字段则表示应用可以一直运行在该节点。完成设置后单击 创建应用。在 应用创建完成 页签确认 应用基本信息、应用配置 和 应用高级设置 等信息，确认完毕后单击 确定创建...
创建Serverless集群
ECI可以为您省去了底层服务器的运维和管理工作，让您专注于业务开发，提升开发效率。同时，您仅需要为容器实际运行消耗的资源付费，可以节约使用成本。更多信息，请参见 什么是弹性容器实例。前提条件 已创建E-HPC和ECI的服务关联角色。...
执行测试并查看测试实例
去诊断（运行诊断）：用于对任务进行全链路分析，当任务运行不符合预期时，您可以使用该功能定位问题。详情请参见 智能诊断。重跑：用于对运行成功或运行失败的任务进行重跑操作，当任务执行成功后可以触发下游未运行状态任务的调度。常...
任务常见问题
任务上一次没运行完，下一次是排队还是不运行了？任务默认并发是1，即串行跑。如果任务执行时间比较长，上一次没运行完，下一次调度时间到了，则下一次会直接丢弃，不会运行也不会排队。如果设置任务实例并发数为2，上一次没运行完，下一次...
任务常见问题
任务上一次没运行完，下一次是排队还是不运行了？任务默认并发是1，即串行跑。如果任务执行时间比较长，上一次没运行完，下一次调度时间到了，则下一次会直接丢弃，不会运行也不会排队。如果设置任务实例并发数为2，上一次没运行完，下一次...
任务常见问题
任务上一次没运行完，下一次是排队还是不运行了？任务默认并发是1，即串行跑。如果任务执行时间比较长，上一次没运行完，下一次调度时间到了，则下一次会直接丢弃，不会运行也不会排队。如果设置任务实例并发数为2，上一次没运行完，下一次...
智能诊断
您可以使用智能诊断功能对任务进行全链路分析，当任务运行不符合预期时，您可以使用该功能快速定位问题。功能概述 智能诊断功能可以基于以下维度对任务进行诊断分析：全链路分析：检查上游任务运行情况：上游任务运行失败时，将阻塞当前...
查看周期实例
终止运行：用于终止不需要运行的任务，任务终止运行后，将失败退出。说明 仅支持对状态为 等待时间、等待资源 和 运行中 的实例进行终止运行操作。暂停（冻结）：当前实例及其下游实例都不需要执行的时候，可选择使用此功能。周期实例中的...
语雀
但是为了解决上面提到的一系列问题还需要付出很大的成本：需要维持一个不小的任务集群，尽管可能大部分时间都用不上那么多资源。需要定时对三方应用软件进行重启，避免长时间运行带来的内存泄漏，即便如此有些特殊请求也会造成第三方软件的...
语雀
但是为了解决上面提到的一系列问题还需要付出很大的成本：需要维持一个不小的任务集群，尽管可能大部分时间都用不上那么多资源。需要定时对三方应用软件进行重启，避免长时间运行带来的内存泄漏，即便如此有些特殊请求也会造成第三方软件的...
执行补数据并查看补数据实例（旧版）
如果任务不需要再运行，可选择冻结实例。公共调度资源组实例保留一个月（30天），日志保留一周（7天）。独享调度资源组任务实例、日志均保留一个月（30天）。运行完成的实例，当日志大于3M时，平台会每天定时清理。注意事项 实例运行相关 ...
任务管理
任务管理就是为多任务环境中的每个任务分配一个上下文（context）（上下文（context）是指当任务被调度执行的所必不可少的一组数据，包括前任务的CPU指令地址（PC指针），当前任务的栈空间，当前任务的CPU寄存器状态等），在任务相继执行...
时间属性配置说明
运行成功后不可重跑，运行失败后可以重跑 如果节点运行一次成功后，重跑后会影响运行结果，而运行失败后重跑不会影响结果，可选择使用该重跑类型。运行成功或失败后皆不可重跑 如果节点不管运行成功或失败，重跑后都会影响运行结果（例如，...
附录：DAG图功能介绍
上游分析 周期实例通常存在上下游依赖关系，如果目标节点长时间未运行，则您可以对其进行上游节点分析，在DAG图中查看阻塞当前节点运行的上游节点，快速定位并及时处理相关运行报错，提升节点的执行效率。说明 仅实例（包括自动调度的周期...
分支模式
然后在 feature 分支上开发、测试，直到这个 feature 功能完成，质量 OK，准备好去集成和发布。release 分支上的集成 release 分支用于集成和发布。基于 master 分支最新版本创建一条 release 分支，然后把想要集成的各条feature分支合并到...
查看运行异常日志
说明 如果Job Manager都没启动起来，不属于Job Manager异常，需要在启动日志中去查看。失效Task Managers日志 运行状态为正常的作业，不会有失败TM。但是对于风险等级较高的，可能有失败的TM，但TM又被拉起了，这时可以查看失败的TM归档...
云效 Flow 实现分支模式
然后在 feature 分支上开发、测试，直到这个 feature 功能完成，质量 OK，准备好去集成和发布。release 分支上的集成 release 分支用于集成和发布。基于 master 分支最新版本创建一条 release 分支，然后把想要集成的各条feature分支合并到...
数据开发与运行
如果调度参数有变化，需要重新生成实例去运行。如何可视化新建表？可以在数据开发，表管理和业务流程内的表容器中建表。如何对生产表添加字段？主账号可以在 表管理 页面，对生产表添加字段后，提交至生产环境。子账号需要拥有运维或项目...
逻辑视图和字段资产详情
平均运行时长：统计最近 15 天所有正常调度的周期实例，所有运行成功记录的平均运行时长的平均值，其中脚本任务的平均运行时长统计包括重跑场景，逻辑表任务的平均运行时长统计不包括重跑场景，T+1 更新。说明 小时、分钟实例支持按照周期...
逻辑视图和字段资产详情
平均运行时长：统计最近 15 天所有正常调度的周期实例，所有运行成功记录的平均运行时长的平均值，其中脚本任务的平均运行时长统计包括重跑场景，逻辑表任务的平均运行时长统计不包括重跑场景，T+1 更新。说明 小时、分钟实例支持按照周期...
常见问题
多云成本运营中，成本是账单运行分摊后产生的，默认每月4号上午10点系统会自动运行成本分摊任务，如果需调整也可在成本运行页面调整或手工运行成本分摊，4日前运行成本分摊可能会出现账单和成本对不齐的情况，而且和最终版本会有些出入，仅...
常见问题
完成以上配置后，您在集群外的机器上启动Flink作业（例如，运行命令 flink run-d-t yarn-per-job-ynm flink-test$FLINK_HOME/examples/streaming/TopSpeedWindowing.jar）后，应当能在DataFlow集群的YARN Web UI中看到相应的Flink作业。...
手动部署Java Web环境（CentOS 7）
本篇教程介绍如何手动在ECS实例上部署Java web项目，适用于刚开始使用阿里云进行建站的个人用户。前提条件 已注册阿里云账号。如还未注册，请先完成 账号注册。如果在中国内地地域中使用云服务器ECS，请确保账号已完成实名认证。如还未认证...
数据地图
DataWorks数据地图是在元数据基础上提供的企业数据目录管理模块，元数据详情查看、数据血缘和数据类目管理等功能。数据地图可以帮助您更好地查找、理解和使用Hologres数据。本文为您介绍如何在数据地图中配置Hologres元数据采集器及相关...
API概览
如果现有SDK不能满足使用需求，可通过签名机制进行自签名对接。由于自签名细节非常复杂，需花费 5个工作日左右。因此建议加入我们的服务钉钉群（11370001915），在专家指导下进行签名对接。在使用API前，您需要准备好身份账号及访问密钥...
Pod安全
在 容器服务 Kubernetes 版 中，您可以通过限制容器以特权模式运行、限制应用程序进程以root身份运行以及禁用Service Account令牌自动挂载等方式，防止容器中运行的进程逃离容器的隔离边界并获得对宿主机的访问权限。通过正确配置Pod安全...
什么是弹性容器实例
从购买配置ECS再部署容器（ECS模式）到直接部署容器（ECI模式），ECI为您省去了底层服务器的运维和管理工作，让您专注于业务开发，提升开发效率。同时，您仅需要为容器实际运行消耗的资源付费，可以节约使用成本。使用ECI时，您既可以借助...
作业调试
您可以使用作业调试功能模拟作业运行、检查输出结果，验证SELECT或INSERT业务逻辑的正确性，提升开发效率，降低数据质量风险。本文为您介绍如何进行Flink SQL作业调试。背景信息 您可以在Flink开发控制台使用作业调试功能本地验证作业逻辑...
【产品变更】运行时终止支持计划
您的函数可以继续运行，但是会运行在一个不受支持的运行时上。该运行时不再支持新的功能特性，也不会进行安全更新。如您需要相关技术支持，请加入钉钉用户群（钉钉群号：11721331）咨询。Node.js 4.4和Node.js 6运行时终止支持计划 自2023...
管理任务
最近运行状态 运行状态根据最近一次任务的运行情况来定义，包含待运行、运行中、运行成功、运行失败、手动终止、未运行（-），其中：待运行：出现并行任务时，排队中的任务状态显示为待运行。手动终止：当任务在待运行或运行中时，通过单击...
应用迁移概述
如果您的应用已经部署到生产环境并处于正常运行状态，为了保持业务不中断运行，并且不发生数据丢失，您可以采用平滑迁移的方式将应用迁移至SAE。迁移至SAE的价值 SAE为应用部署提供了灵活的启动参数配置、可视化的部署流程、优雅上下线服务...
- 产品推荐
- 这些文档可能帮助您