Bucket Shuffle Join
工作原理 SelectDB支持的常规分布式Join方式包括Shuffle Join和Broadcast Join。这两种Join都会导致相当大的网络开销。例如，当前存在A表与B表的Join查询，它的Join方式为Hash Join，不同Join类型的开销如下：Broadcast Join：如果根据数据...
工作流集群快速入门
通过MNS消息触发工作流 通过向OSS上传文件触发工作流 可观测性 使用Prometheus监控服务 使用日志服务 相关文档 了解 工作流集群 的功能优势工作原理和网络规划信息，请参见 分布式工作流Argo集群概述。工作流集群 不收取集群管理费用，如果...
ACK One概述
分布式云容器平台 ACK One（Distributed Cloud Container Platform for Kubernetes）是阿里云面向混合云、多集群、分布式计算、容灾等场景推出的企业级云原生平台。ACK One 可以连接并管理您任何地域、任何基础设施上的Kubernetes集群，并...
分布式工作流Argo集群概述
分布式工作流Argo集群（简称 工作流集群）采用无服务器模式，使用阿里云弹性容器实例ECI运行工作流，通过优化Kubernetes集群参数，实现大规模工作流的高效弹性调度，同时配合抢占式ECI实例，优化成本。本文介绍 工作流集群 的控制台操作...
概述
分布式链路跟踪系统（Distributed System Tracing，简称 DST）是面向分布式架构、微服务（Spring Cloud、SOFAStack、Service Mesh 等）架构等云原生架构的一种具有应用可观察性（Observability）的金融级解决方案。通过 DST，运维人员、...
和开源产品对比
产品名称 定时调度 工作流 分布式任务 白屏化任务治理 任务类型 报警监控 使用成本 Quartz Cron 不支持 不支持 不支持 Java 不支持 1个数据库、多个服务器、人工运维成本 Elastic-job Cron 不支持 静态分片 支持运行大盘 支持运行日志 不...
使用前须知
本文介绍该应用的功能、工作原理、资产、费用等信息。重要 本文档为阿里云原创文档，知识产权归阿里云所有，由于本文档旨在介绍阿里云与第三方产品交互的服务能力，因此可能会提及第三方公司或产品等名称。功能说明 提供便捷的配置，帮助您...
常见问题
云工作流的工作原理是什么？云工作流的优势是什么？云工作流最长执行多长时间？怎么执行云工作流？云工作流使用什么语言编写流程？云工作流是集成了云监控？云工作流是否集成了事件源？什么是 云工作流？云工作流 是一个用来协调多个分布式...
流程管理
创建工作流 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，单击 流程管理。在 流程管理 页面选择目标命名空间，然后单击 创建工作流。在 创建工作流 面板，设置工作流的 名称、描述、应用ID 和 时间类型 等配置项，然后...
什么是Serverless工作流
Serverless 工作流（Serverless Workflow）是一个用来协调多个分布式任务执行的全托管云服务。在 Serverless 工作流 中，您可以用顺序、分支、并行等方式来编排分布式任务，Serverless 工作流 会按照设定好的步骤可靠地协调任务执行，跟踪...
什么是云工作流（CloudFlow）
云工作流（CloudFlow）是一个用来协调多个分布式任务执行的全托管云服务。在 云工作流 中，您可以用顺序、分支、并行等方式来编排分布式任务，云工作流 会按照设定好的步骤可靠地协调任务执行，跟踪每个任务的状态转换，并在必要时执行您...
透视分析：按研发链路
支持您按照研发链路（数据同步和数据开发）查看和分析工作空间内DataWorks离线同步任务和DataWorks调度任务运行情况及资源消耗详情。便于您了解当前花费较多的资源类别、识别运行失败的任务，合理调整消费结构，发现阻塞任务运行的问题并...
基本概念
本文对 Serverless 工作流 涉及的专有名词及术语进行定义及解析，方便您更好地理解相关概念并使用 Serverless 工作流。Serverless工作流（Serverless Workflow）协调多个分布式任务执行的全托管Serverless云服务。通过Serverless工作流，您...
概述
通过分布式链路跟踪，运维人员、开发人员和架构师能看清楚复杂的大规模微服务架构下的应用及服务之间的复杂调用关系、性能指标、出错信息与关联日志，从而实现故障根因分析、服务治理、应用开发调试、性能管理、性能调优、架构管控、故障...
分布式事务
本文主要介绍 PolarDB-X 1.0 分布式事务的基本原理。分布式事务通常使用二阶段提交来保证事务的原子性（Atomicity）和一致性（Consistency）。二阶段事务会将事务分为以下两个阶段：准备（PREPARE）阶段：在PREPARE阶段，数据节点会准备好...
用量分析
资源容量分布 分类展示 组织 内 各资源 在 各工作空间 中的分布情况，资源分类（左侧边栏）以报表种类作区分，资源空间分布（右侧柱状图）默认展示全部资源的空间分布情况。交互式联动效果：点击 左侧类目 中的任一报表资源，联动筛选右侧...
泊松分布拟合
计算逻辑原理 泊松分布：泊松分布的概率密度函数为 泊松分布的参数是 单位时间（或单位面积）内随机事件的平均发生次数。泊松分布适合于描述单位时间内随机事件发生的次数。泊松分布的期望和方差均为。KS检验：KS检验可以用于检验数据是否...
高斯分布拟合
计算逻辑原理 高斯分布：若随机变量 服从一个位置参数、尺度参数为 的概率分布，且其概率密度函数为：则这个随机变量就服从正态分布，记作。正态分布有两个参数，即期望 和方差，当 时，就称为标准正态分布。KS检验：KS检验可以用于检验...
什么是分布式任务调度SchedulerX
分布式任务调度SchedulerX是阿里巴巴自研的分布式任务调度平台，兼容开源XXL-JOB、ElasticJob、Spring Schedule，K8s Job，支持Cron定时、一次性任务、可视化工作流任务编排和分布式跑批，具有高可用、可观测、可运维和低延时等能力。...
技术原理
本文介绍了PolarDB-X的主要技术原理。分布式线性扩展 PolarDB-X将数据表以水平分区的方式，分布在多个存储节点（DN）中。数据分区方式由分区函数决定，PolarDB-X支持哈希（Hash）、范围（Range）等常用的分区函数。以下图为例，shop库中的...
查看监控概览
全景监控通过可视化图形实时呈现监控任务、监控链路、监控告警分组、任务状态数据分布、任务状态分布明细、核心指标看板等在线业务，帮助用户快速掌握全平台的数据情况。本文介绍如何查看监控概览信息。操作步骤 登录 数据资源平台控制台。...
查看监控概览
全景监控通过可视化图形实时呈现监控任务、监控链路、监控告警分组、任务状态数据分布、任务状态分布明细、核心指标看板等在线业务，帮助用户快速掌握全平台的数据情况。本文介绍如何查看监控概览信息。操作步骤 登录企业数据智能平台。在...
MapReduce模型
MapReduce模型的原理和最佳实践，请参见 SchedulerX 2.0 分布式计算原理和最佳实践。SchedulerX 2.0支持MapReduce模型的详细信息，请参见 SchedulerX 2.0 支持 MapReduce 模型。注意事项 所有子任务结果会缓存在Master节点，内存压力较大，...
JobContext参数说明
参数 解释 long jobId 任务ID long jobInstanceId 任务实例ID long wfInstanceId 工作流实例ID long taskId 分布式任务子任务ID，根任务是0。DateTime scheduleTime 实例的计划调度时间 DateTime dataTime 实例的数据时间 String jobType ...
JobContext参数说明
参数 解释 long jobId 任务ID long jobInstanceId 任务实例ID Long workflowId 工作流ID long wfInstanceId 工作流实例ID long taskId 分布式任务子任务ID，根任务是0。DateTime scheduleTime 实例的计划调度时间 DateTime dataTime 实例的...
应用场景
云工作流（CloudFlow）用于协调分布式应用和微服务以构建复杂多步骤的、异步调用任务以及长时间运行的业务流程。事务型业务流程编排 复杂的业务场景如电商网站、酒店和机票预定等应用通常要访问多个远程服务，并且对操作事务性语义（即所有...
2019年功能发布记录
2019-11-13 工作流调度固定版本或预留资源函数 函数工作流产品在华北2（北京）开服 函数工作流新增开通华北2（北京）地域，目前可以在华东1（杭州），华东2（上海），华南1（深圳）和华北2（北京）使用函数工作流服务编排函数和分布式任务...
MapReduce模型
原理&最佳实践 Schedulerx2.0分布式计算原理&最佳实践 Demo 处理单表数据（单表ID连续）主任务读取最小ID和最大ID。select min(id),max(id)from Tab1;根据ID的range进行分页，每个task包含两个字段：startId和endId。每个task通过ID的range...
开通服务
本节介绍如何开通分布式事务服务。...操作步骤 开通 SOFAStack 产品服务。...在上方菜单栏选择 产品与服务>中间件>金融分布式架构 SOFAStack。...后续操作 使用分布式事务前，需要创建一个标准工作空间，具体操作步骤参考 创建标准工作空间。
普通集成
普通集成是指 云工作流 直接通过阿里云开放平台OpenAPI集成云产品对外提供的服务接口，不对服务接口做任何特殊处理和优化。允许 云工作流 通过调用弹性计算、存储服务、数据库、容器、大数据处理、可观测性服务及中间件服务在内的多个阿里...
四川农信
完成云平台 PaaS 层建设，构建分布式系统上下游生态，实现分布式云原生架构体系 实现分布式云原生架构体系，需要从技术规范、基础设施、生产力工具、组织流程等各个方面进行持续革新：建立一个面向分布式架构的开发平台和运行平台，结合...
典型客户案例
完成云平台 PaaS 层建设，构建分布式系统上下游生态，实现分布式云原生架构体系 实现分布式云原生架构体系，需要从技术规范、基础设施、生产力工具、组织流程等各个方面进行持续革新：需要一个面向分布式架构的开发平台和运行平台，结合...
EDAS 3.0助力佐朋数科快速实现上云
分布式任务调度：支持编排定时任务、工作流任务、跑批操作和分布式任务调度。解决方案 阿里云的EDAS 3.0是一站式企业级分布式应用服务，通过接入EDAS 3.0即可获得应用生命周期的管理能力，支持各种发布方式，可以利用应用的监控来快速定位...
卡方分布拟合
计算逻辑原理 卡方分布：卡方分布是统计推断中应用最广泛的概率分布之一。其定义为：若 个独立的随机变量，且均符合标准正态分布，则这 个随机变量的平方和 为服从自由度为 的卡方分布，记为 也可以记为：卡方分布的期望和方差分别为：其中...
基础术语
中文 英文 释义 事务 transaction 事务是指作为单个逻辑工作单元执行的一系列操作，要么完全执行，要么完全不执行。分布式事务 distributed transaction 事务的发起者、资源及资源管理器和事务协调者分别位于不同的分布式系统的不同节点之...
什么是分布式任务调度SchedulerX
分布式任务调度SchedulerX是阿里巴巴基于Akka架构自研的新一代分布式任务调度平台，提供定时调度、调度任务编排和分布式批量处理等功能。您可以在控制台配置、管理您的定时调度任务、查询任务执行记录和运行日志，还可以通过工作流进行任务...
什么是蚂蚁链分布式身份服务 DIS
分布式数字身份及生态参与方 基于区块链的DIS服务，是一种高效、合规、安全、可信的数字身份管理方案：区块链技术在分布式和安全性方面的能力，便于实现跨机构和组织的协同工作，使得身份标识等数据能在多个节点之间共享复制，抵御故障和...
工作流简介
云工作流 支持创建标准和快速两种模式的工作流。本文介绍工作流概念以及如何使用工作流。背景信息 工作流流程（Flow）定义了业务逻辑描述以及流程执行所需要的通用信息，例如一个订单管理流程可能包含创建订单、处理支付、预留库存、配送...
入门概述
如果您想了解 Serverless 工作流 是如何解决复杂的业务场景问题，请参见 分布式多步骤事务 等最佳实践文章。示例一：简单流程 本示例创建了一个流程，该流程包含了一个传递（Pass）步骤。本示例让您熟悉 Serverless 工作流 控制台的基本...
历史记录
新增API：查询工作流。2021-06-02 新特性 支持应用自动分裂，可以支持单应用百万级别任务。支持RAM鉴权。2020-12-07 新特性 客户端实例支持自定义标签，可以进行任务指定标签运行。新增邮件、钉钉机器人报警。支持应用级别报警联系人组。...
- 产品推荐
- 这些文档可能帮助您