设计方案
基于稳定性支柱设计原则，整体稳定性设计方案可参考如下：架构设计原则 软件系统从所有的功能都在一个应用程序内运行的单体应用架构，到不同的功能模块分别部署在不同的服务器上的传统分布式应用架构，再到服务细分通过轻量级的通信机制...
全场景解决方案
能够基于已有的系统能力进行定制扩展或配置，提升复用性同时又满足差异性的要求。分布式技术能力 提供金融级分布式框架和金融级分布式数据库，支持多租户，支持海量用户的高业务并发场景。提供大数据和人工智能的中台能力建设，支持分布式...
智能边缘一体机产品介绍
但是如何对智能化系统进行标准化交付集成和持续运维，集团提出了“边缘小闭环、云端大闭环”的系统建设思路。基于这个思路，进一步的对系统改造提出了如下需求：边缘自治要求：小区的业务系统能够在不连云的情况下，完成基础功能，以防总部...
文档修订记录
本文为您介绍DataWorks文档更新的最新动态，基于此您可以及时了解DataWorks的新增特性及功能变更。2024年2月更新记录 时间 特性 类别 描述 产品文档 2024.2.22 新增功能 账单订阅及查询分析 用户中心支持订阅不同类型的账单数据，例如，...
应用场景
运力资源调度：机位智能分配、人员智能排班、车辆智能调度、船舶智能避碰、泊位智能分配、集卡车辆智能调度、龙门吊桥吊智能调度。案例说明 场景：某机场飞机滑行轨迹难以实现全链路追踪和还原；保障节点靠人工记录漏报误报情况普遍；安全...
历史功能发布记录（2021年）
它在Alibaba Cloud Linux 3的基础上，提供了更高的安全性、更快的启动速度和极为精简的系统服务与软件包，默认集成云原生组件，开箱即用。您可以在ACK托管节点池中使用ContainerOS镜像，并免费获得阿里云针对该操作系统的支持。全部 ...
基于AnalyticDB实现城市公交系统智能化
启迪公交基于 AnalyticDB MySQL版 和DRDS建设的完整解决方案，将人、车、线、站的大数据资源及相关配套资源进行商业化转换，引领行业提升公交系统的创新能力和服务水平，助力“互联网+城市公交”的提升发展。业务挑战 启迪公交（北京）科技...
阿里云CDN的五大竞争力
持续更新的精准IP数据库：IP数据库的作用是在用户的DNS解析请求转发到了CDN调度系统时，调度系统会判断用户的地区和运营商归属，以此来为用户分配就近接入的同运营商CDN节点。为了确保IP数据库的数据处于最新的状态，数据库一直在持续地...
任务管理
基于时间片的轮转调度 时间片轮转调度使用时间片控制每个任务的执行时间，同等优先级的任务依次获得处理器被调度执行，每个任务可以运行的时间片是固定的，当任务的时间片用完后，该任务被放在对应优先级就绪队列的队尾，然后调度就绪队列...
使用GPU拓扑感知调度（Tensorflow版）
ACK基于Scheduling Framework机制，实现GPU拓扑感知调度，即在节点的GPU组合中选择具有最优训练速度的组合。本文介绍如何使用GPU拓扑感知调度来提升TensorFlow分布式训练的训练速度。前提条件 已创建ACK Pro集群，且集群的实例规格类型选择...
配置并使用调度参数
调度参数是根据任务调度的业务时间及调度参数的取值格式自动替换为具体的值，实现在任务调度时间内参数的动态替换。本文为您介绍如何配置及使用调度参数，并以ODPS SQL节点为例，讲解调度参数配置完成后使用冒烟测试功能测试调度参数的替换...
数据开发概述
代码在重复运行时若希望获取到运行环境的一些信息，例如日期、时间等，可根据DataWorks调度系统的调度参数定义，动态为代码中的变量赋值。业务日期 指昨天，在离线计算场景下，交易日期为业务发生的日期。DataWorks默认取调度时间内，任务...
使用GPU拓扑感知调度（Pytorch版）
ACK基于Scheduling Framework机制，实现GPU拓扑感知调度，即在节点的GPU组合中选择具有最优训练速度的组合。本文介绍如何使用GPU拓扑感知调度来提升PyTorch分布式训练的训练速度。前提条件 已创建ACK Pro集群，且集群的实例规格类型选择为 ...
数据开发：开发者
步骤九：发布任务 DataWorks仅支持自动调度发布至生产环境的任务，因此在冒烟测试无误后，您需将任务发布至生产环境调度系统进行周期调度。步骤一：新建业务流程 DataWorks以业务流程为中心组织数据开发，通过各类型开发节点的容器看板，将...
使用须知
调度资源管理 调度资源 即DataWorks上的调度资源，调度资源用于执行或分发调度系统下发的任务。DataWorks的调度资源分为如下两种模式，详情请参见 查看资源组列表。默认调度资源。指DataWorks的公共资源池。当DataWorks节点并发量很高，...
功能发布记录
全部 Knative概述 支持基于ACK One构建混合云同城容灾系统 对于当前业务运行在IDC或第三方公共云的Kubernetes集群中的系统架构，如果希望通过云计算为云下业务提供同城灾备的高可用冗余能力，可利用阿里云分布式云容器平台 ACK One来提供...
计算资源优化
基于云基础设施的操作系统优化 阿里云提供了Alibaba Cloud Linux操作系统镜像，是阿里云基于龙蜥社区（OpenAnolis）的龙蜥操作系统（Anolis OS）打造的操作系统发行版，在兼容RHEL/CentOS生态的同时，为云上应用程序提供安全、稳定、高性能...
创建数据表质量规则
业务日期/执行日期：若调度类型选择 定时调度（定时调度不支持执行日期）、数据更新触发调度、固定任务触发调度，支持配置日期，可选择 普通日历 或 自定义日历，如何自定义日历，请参见 新建公共日历。若选择 普通日历，则条件可选 月份、...
创建数据表质量规则
业务日期/执行日期：若调度类型选择 定时调度（定时调度不支持执行日期）、数据更新触发调度、固定任务触发调度，支持配置日期，可选择 普通日历 或 自定义日历，如何自定义日历，请参见 新建公共日历。若选择 普通日历，则条件可选 月份、...
节点伸缩概述
当集群的容量规划无法满足应用Pod调度时，您可以使用ACK提供的节点伸缩功能，自动扩缩节点资源以进行调度容量的补充。ACK目前提供 节点自动伸缩 与 节点即时弹性 两种弹性方案，后者相较于前者有着更快的弹性速度、更高的交付效率和更低的...
消息 Mesh
消息 Mesh 流量调度 消息 Mesh 的流量调度，示例如下：流量调度流程说明如下：控制平面会将与流量调度相关的规则下发至 MOSN，规则主要包含该应用下所有容器节点的 IP 地址与流量权重，这是能够进行精细化流量调度的前提。当 MOSN 收到消息...
创建指标质量规则
业务日期/执行日期：若调度类型选择 定时调度（定时调度不支持执行日期）、数据更新触发调度、固定任务触发调度，支持配置日期，可选择 普通日历 或 自定义日历，如何自定义日历，请参见 新建公共日历。若选择 普通日历，则条件可选 月份、...
创建指标质量规则
业务日期/执行日期：若调度类型选择 定时调度（定时调度不支持执行日期）、数据更新触发调度、固定任务触发调度，支持配置日期，可选择 普通日历 或 自定义日历，如何自定义日历，请参见 新建公共日历。若选择 普通日历，则条件可选 月份、...
使用Gang scheduling
ACK基于新版的Kube-scheduler框架实现Gang scheduling的能力，解决原生调度器无法支持All-or-Nothing作业调度的问题。本文介绍如何使用Gang scheduling。重要提示 请预留足够资源：使用弹性节点池时请保证弹性节点池的最大资源量以及节点...
使用Gang scheduling
ACK基于新版的Kube-scheduler框架实现Gang scheduling的能力，解决原生调度器无法支持All-or-Nothing作业调度的问题。本文介绍如何使用Gang scheduling。重要提示 请预留足够资源：使用弹性节点池时请保证弹性节点池的最大资源量以及节点...
产品优势
一直秉承引领和拥抱业界先进标准和实践，同时亦能满足传统金融架构的平滑迁移、融合适配，以稳妥应对业务升级变更，并积极应对金融交易系统所面临的服务和数据扩展性、事务一致性、秒级容灾、弹性供给与调度等关键技术挑战。微服务平台 ...
DataWorks On CDP/CDH使用说明
DataWorks支持基于CDH（Cloudera's Distribution Including Apache Hadoop，以下简称CDH）和CDP（Cloudera Data Platform，以下简称CDP）集群创建Hive、MR、Presto和Impala等节点，实现CDP/CDH任务工作流的配置、定时调度和元数据管理等...
历史功能发布记录（2023年）
全部 自助诊断GPU节点问题 ACK调度器支持IP感知调度和拓扑调度等功能 IP感知调度 当Pod调度到某节点上时，由于可用IP不足无法启动，该节点将被标记为缺少IP状态并被拉黑五分钟。IP感知调度可防止大量Pod由于IP不足而导致的启动失败问题。...
服务定时自动部署
每执行一次定时部署调度，系统就会在原模型服务基础上，增加一个模型服务版本，作为最新的线上运行服务。home/admin/usertools/tools/eascmd64-i<yourAccessKeyID>-k<yourAccessKeySecret>-e pai-eas....
什么是Dataphin
Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出，一站式提供数据采、建、管、用全生命周期的大数据能力，以助力企业显著提升数据治理水平，构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin兼容多种计算...
横向网关产品特性汇总
集群限流：适用于全局精确控制限流，每个节点的请求数会实时上报给全局限流调度中心来动态决策。降级：适用于异步场景因流量突发后端节点来不及处理时，在网关侧配置降级配置来保障用户请求不中断，后续根据日志等后台补充未处理任务。熔断...
功能更新动态（2023年）
支持补数据任务定时调度，系统自动定期回刷历史数据。通用补数据实例 资产目录 新增专题广场功能，实现资产分类管理。新增 运营管理员 角色，负责资产专题及专题分组管理。新增资产专题广场，可快捷搜索及查看有权限的资产专题，展示新建...
文档更新动态（2023年）
支持补数据任务定时调度，系统自动定期回刷历史数据。更新说明 通用补数据实例 新增专题广场功能和数据表列表优化 新增专题广场功能，实现资产分类管理。新增 运营管理员 角色，负责资产专题及专题分组管理。新增资产专题广场，可快捷搜索...
整库离线同步至OSS
由于需要进行周期性调度，所以需要在此定义周期性调度任务时的相关属性，包括 调度周期、生效日期、暂停调度 等。当前方案的调度配置与DataWorks中节点的调度配置一致，配置详情请参见 时间属性配置说明。步骤六：运行资源设置 该同步方案...
功能说明
基本配置 基本配置是指对创建的GTM实例进行基本配置及访问策略类型选择，基本配置包含“实例名称、CNAME接入域名类型、业务域名、全局TTL、报警通知组、报警通知方式相关信息”，访问策略类型包含“基于地理位置的访问策略”和“基于访问...
资源使用优化
云原生资源调度通过应用负载合理调度资源 为了实现精准、实时的实例伸缩和放置，必须把应用负载的特征作为资源调度依据，使用弹性调度策略，云平台负责管理应用所需的弹性计算资源。调度平台可以识别应用特征，在应用负载快速上升时，及时...
配置eci-profile
对于上述情况，ECI Scheduler基于Mutating Webhook机制实现了一种新的调度机制。在eci-profile中，您可以自定义selector，selector可以根据Pod的Label或者Pod所属Namespace的Label来筛选Pod，满足selector筛选条件的Pod会自动调度到ECI。...
配置eci-profile
对于上述情况，ECI Scheduler基于Mutating Webhook机制实现了一种新的调度机制。在eci-profile中，您可以自定义selector，selector可以根据Pod的Label或者Pod所属Namespace的Label来筛选Pod，满足selector筛选条件的Pod会自动调度到ECI。...
配置eci-profile
对于上述情况，ECI Scheduler基于Mutating Webhook机制实现了一种新的调度机制。在eci-profile中，您可以自定义selector，selector可以根据Pod的Label或者Pod所属Namespace的Label来筛选Pod，满足selector筛选条件的Pod会自动调度到ECI。...
功能发布记录
2023-04-14 配置集群巡检 2023年3月 功能名称 变更类型 功能描述 发布时间 相关文档 支持创建基于Ubuntu操作系统的E-HPC集群 新增 公共镜像新增支持Ubuntu 20.04，可以创建基于Ubuntu操作系统的E-HPC集群。2023-03-15 集群概述 使用向导...
- 产品推荐
- 这些文档可能帮助您