K8s内核高可用架构
2个或者2个以上Master关机，K8s管控能力不可用，已经创建并顺利运行的Pod不受影响 针对单Master部署架构（不推荐）Master关机，K8s管控能力不可用，已经创建并顺利运行的Pod不受影响 节点高可用场景说明：场景 期望 备注 1/3个master节点...
在Kubernetes集群中部署SchedulerX
所以，当一个定时任务资源消耗大且调度频率不高（例如每小时或每天运行一次）时，可以新增一个Pod运行该定时任务，使之与原来的在线应用处于不同进程中。方式一：通过Deployment部署SchedulerX 使用非Java应用类型时，可以通过Deployment...
切换主可用区
概念介绍 主可用区（Primary Zone）：OceanBase 数据库中同一分区（partition）的数据副本分布在多个可用区中，其中分区的主副本所在的可用区称为主可用区。切换主可用区场景 在主可用区故障时，OceanBase 会根据服务情况自动将主切换至新...
周期任务通用运维概述
使用说明 仅生产环境运维中心支持自动调度生成的周期实例，开发环境运维中心虽会生成自动调度的周期实例，但不支持自动调度。周期任务页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 ...
周期任务通用运维概述
使用说明 仅生产环境运维中心支持自动调度生成的周期实例，开发环境运维中心虽会生成自动调度的周期实例，但不支持自动调度。周期任务页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 ...
产品优势
稳定可靠 服务可用性不低于99.99%，可为您提供稳定可靠的服务保障。高可用性 HTTPDNS从节点之间、节点内部两个维度提升服务的高可用性。HTTPDNS接入了阿里优质的BGP网络，与全国主流运营商都实现了BGP互联。同时HTTPDNS使用了Anycast IP...
创建多可用区的ECI Pod
策略 调度说明 VSwitchOrdered（按指定顺序）如果ECI Pod挂载了云盘，云盘所属可用区必须和Pod一致，不符合的可用区会被过滤。按照指定的顺序尝试创建资源，当第一个可用区没有库存时，尝试使用第二个，以此类推，直至资源创建成功。...
实现ECI Pod可用区打散或亲和调度
在ACK Pro版集群或 ACK Serverless集群Pro版 中，您可以通过Kubernetes原生调度语义实现分布式任务的跨可用区打散，以达到高可用区部署的要求，或者通过Kubernetes原生调度语义实现分布式任务在指定可用区中的亲和性部署，以达到高性能部署...
自定义参数取值差异对比
pt=${yyyy-1}=2020 不支持 取月份：07 调度参数赋值：datetime=${mm} 代码引用：pt=${datetime} 参数替换结果：pt=${mm}=07 调度参数赋值：datetime=$[mm]代码引用：pt=${datetime} 参数替换结果：pt=$[mm]=07 取日期（天）：20 调度参数...
UpdateTaskFlowSchedule-更新任务流调度配置
调用UpdateTaskFlowSchedule接口，更新任务流调度配置。接口说明 该接口用于更新编辑态任务流的调度设置。可配置 定时调度、周期调度、事件调度；其中 定时调度可配置调度一次或周期调度，事件调度可配置的订阅包括任务流和任务流节点。...
Pod 拓扑分布约束及Pod亲和与反亲和调度
ACS 兼容 Kubernetes 原生的 Pod 拓扑分布约束及 Pod 亲和与反亲和调度能力，通过配置 Pod 亲和与 Pod 反亲和控制 Pod 之间的部署关系；也可以使用 Pod 拓扑分布约束控制 Pod 部署到不同的拓扑域，也一样可以实现高可用。因为 ACS 通过虚拟...
多可用区创建实例
当您在应对突发流量，进行业务的快速水平扩容时，或者启动大量实例进行Job任务处理时，可能会遇到可用区对应规格实例库存不足或者指定的交换机IP耗尽等特殊情况，从而导致实例创建失败，影响业务。此时，您可以采用指定多可用区的方式来...
产品高可用
当主可用区出现故障或不可用时，负载均衡有能力在非常短的时间内（约30秒）切换到备可用区并恢复服务；当主可用区恢复时，负载均衡同样会自动切换到主可用区提供服务。说明 负载均衡的主备可用区是可用区级别的容灾。只有当主可用区整体不...
配置同周期调度依赖
修改自动解析的依赖关系 当自动解析的依赖关系不符合预期，或存在 不支持调度依赖的场景（非周期性调度产出数据的表）需手动删除依赖关系时，您可参考以下内容修改自动解析的依赖关系。场景及方式 描述 操作及结果示例 开启自动解析时，...
配置数据质量监控
表的行数非0校验（强规则）主键唯一性校验（弱规则）3、规则关联调度节点 数据质量通过关联调度的方式及时感知源端数据的变更与ETL（Extract Transformation Load）中产生的脏数据，即通过关联调度节点触发数据质量校验规则执行。...
QuerySchedruleOnDemand-查询代播实例的调度规则
查询代播实例的调度规则。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中...
ListTaskFlowsByPage-分页获取任务流详情列表
取值如下：2:小时级调度 3:日级调度 4:周级调度 5:月级调度 2 CronBeginDate string 定时调度开始时间，此时间点之前任务流不进行调度。1970-01-01 CronEndDate string 定时调度结束时间，此时间点之后任务流不进行调度。2023-01-01 ...
产品优势
高可用 采用高可用架构和任务多备份机制，经历阿里集团多年双十一、容灾演练，可以保障机房宕机时调度任务不受影响。安全防护 多层次安全防护：支持HTTPS和VPC访问，基于阿里云的多层安全防护，可有效防止恶意攻击。多租户隔离机制：支持多...
周期性调度作业概述
如果您希望周期性运行MaxCompute作业，可使用DataWorks的DataStudio开发周期性MaxCompute作业，并配置周期性调度的时间属性、调度依赖等配置项，将作业整体提交至DataWorks的运维中心进行周期性调度。本文为您概要介绍当前使用DataWorks...
使用ASM Serverless网关支撑弹性业务场景
若Pod不能容忍指定的污点，将不会被节点接受，即Pod不能调度到具有匹配污点的节点上。若Pod可以容忍指定的污点，表示Pod可以（但不要求）被调度到具有匹配污点的节点上。更多信息，请参见 taint-and-toleration。节点亲和性（nodeAffinity...
使用ASM Serverless网关支撑弹性业务场景
若Pod不能容忍指定的污点，将不会被节点接受，即Pod不能调度到具有匹配污点的节点上。若Pod可以容忍指定的污点，表示Pod可以（但不要求）被调度到具有匹配污点的节点上。更多信息，请参见 taint-and-toleration。节点亲和性（nodeAffinity...
拓扑感知调度
{\"topologies\":[{\"key\":\"kubernetes.io/hostname\"}],\"nodeSelectors\":[{\"matchLabels\":{\"test\":\"a\"}}]}}""node":"cn-shenzhen.10.0.2.4" } 将Pod调度到同一低延时部署集中 在一些特定场景中，仅仅在某一可用区中亲和并不能...
专业版公测（2022年01月26日）
使用SchedulerX 2.0的日志服务，您不需要修改一行代码，只需要增加一个Log4j或Logback的配置，即可将每次任务调度的框架日志和业务日志进行收集，同时SchedulerX 2.0的专业版提供了日志检索功能，可以通过任务调度平台快速定位任务失败的...
Check节点
不存在：此次检查不通过，平台即认为该分区表不可用。基于LastModifiedTime校验：检查目标分区数据在指定时间段内是否有更新。无更新：此次检查通过，平台即认为该分区数据已写入完成，分区表可用。存在更新：此次检查不通过，平台即认为该...
海外支持
能够有效缓解如东南亚等地区，不确定的运营商网络带来的APP可用性风险。全网域名支持 HTTPDNS支持全网域名的解析，包括在阿里云（万网）注册的域名，和其它第三方以及国外域名（国外域名需按地域合规），可使用免费在线体验。支持Akamai等...
网络架构容灾
VPC可以分别通过两个VPN网关学习到本地数据中心的路由，但是VPC默认仅通过一个VPN网关（系统优先选择实例ID较小的VPN网关）转发从VPC去往本地数据中心的流量，在当前VPN网关不可用后，才会通过另一个VPN网关转发流量（系统自动切换），因此...
实现虚拟节点Pod可用区打散以及亲和调度
在 ACK Serverless集群Pro版 中，您可以通过Kubernetes原生调度语义实现分布式任务的跨可用区打散，以达到高可用区部署的要求，或者通过Kubernetes原生调度语义实现分布式任务在指定可用区中的亲和性部署，以达到高性能部署的要求。...
ACK集群概述
不可用（unavailable）集群基础云资源异常，集群不再可用。详细信息，请参见 集群异常状态。删除中（deleting）删除集群中。删除失败（delete_failed）删除集群失败。已删除（deleted，该状态用户不可见）成功删除集群。图 1.集群状态流转 ...
资源包（专业版）
此外，为避免欠费导致资源不可用，您还可以开启资源包额度预警。当账户资源包余量低于设定的剩余额度比例时，系统将以短信等方式提醒。说明 打开 统一额度预警设置 开关，会同步打开所有的资源包预警。如果您需要为不同的资源包设置额度...
多可用区创建Pod
策略 调度说明 VSwitchOrdered（按指定顺序）如果ECI Pod挂载了云盘，云盘所属可用区必须和Pod一致，不符合的可用区会被过滤。按照指定的顺序尝试创建资源，当第一个可用区没有库存时，尝试使用第二个，以此类推，直至资源创建成功。...
创建资源
关闭 load5 不能超过客户端机器CPU可用核数 0 内存使用率 表示近5分钟进程内存平均使用率不能大于该阈值，否则判断客户端机器繁忙。90%磁盘使用率 表示磁盘使用率不能大于该值，否则判断客户端机器不健康，状态繁忙。95%是否触发繁忙机器 ...
产品优势
网络流量型DDoS攻击防护 大量针对网络传输层的攻击会使网络堵塞、机房不可用，而使您的网络业务中断或大面积瘫痪。在传统的代理、探测、反弹、认证、黑白名单、报文合规等标准技术的基础上，DDoS高防结合IP信誉、近源清洗，以及通过对网络...
任务常见问题
cron、fix_rate不支持秒级别调度，您可以选择时间类型为second_delay，即上一次运行完之后间隔几秒再运行。某个时间点没有调度怎么办？某个单机任务有一个时间点没有调度运行时，您需要确认机器列表是否存在机器，并确认机器是否全部处于...
管理调度资源组
调度资源组用于任务的调度运行。首次开通EMR Workflow服务时，将免费为您提供一个默认调度资源组。如果默认调度资源组不能满足您的需求，您可以根据业务场景需求购买合适规格的付费调度资源组。购买调度资源组后，在实际使用前您还需进行...
创建实时元表规则
预览SQL 说明 关键信息没有填写完整，预览SQL不可用。左边为上次保存配置SQL预览，若未配置，则为空；右边为当前配置SQL预览。规则配置列表 您可以在规则配置列表页面查看已经配置的元表规则信息，并进行查看、编辑、试跑、运行、删除等...
创建实时元表规则
预览SQL 说明 关键信息没有填写完整，预览SQL不可用。左边为上次保存配置SQL预览，若未配置，则为空；右边为当前配置SQL预览。规则配置列表 您可以在规则配置列表页面查看已经配置的元表规则信息，并进行查看、编辑、试跑、运行、删除等...
运维中心概述
当当前节点所有的父节点运行成功，并且已经到达节点设置的定时运行时间时，如果节点指定的调度资源组无可用资源时，节点进入等待资源的状态，直到占用该调度资源的任务执行成功，将资源释放后启动运行。本任务不是冻结状态 如果当前节点...
调度管理
说明 最大并发数的设置不能超过实例的容器数量 如需修改某游戏的用户调度等级，则点击该游戏用户调度等级对应数字，输入新调度等级或在下拉框中选择数字。调度管理支持对该实例下所有已部署游戏进行批量管理，点击【批量操作】勾选需批量...
应用管理
关闭 实例繁忙配置 load5 不能超过客户端机器CPU可用核数。0 内存使用率 表示近5分钟进程内存平均使用率不能大于该阈值，否则判断客户端机器繁忙。90%磁盘使用率 表示磁盘使用率不能大于该值，否则判断客户端机器不健康，状态繁忙。95%是否...
定期调度Zeppelin中的作业
状态 描述 scheduled 已开始调度 skipped 跳过本次调度 upstream_failed 上游任务失败 up_for_reschedule 已重新调度 up_for_retry 重试 failed 调度失败 success 调度成功 running 调度正在运行中 queued 加入调度队列 no_status 没有状态...
- 产品推荐
- 这些文档可能帮助您