任务管理高级配置参数说明
1 子任务单机并发数 并行计算 内存网格 网格计算 分布式模型，单台机器并发消费子任务的个数。5 子任务失败重试次数 并行计算 内存网格 网格计算 分布式模型，子任务失败自动重试的次数。0 子任务失败重试间隔 并行计算 内存网格 网格计算 ...
技术面临的挑战与革新
share nothing架构的分布式数据库，每一个节点拥有独立的计算和存储资源，每一个节点都有各自的计算引擎和存储引擎，计算存储绑定。这种类型的架构好处显而易见，数据Sharding的方式让数据存取以及处理可以并行化，计算存储本地化最大化...
PolarDB-X历史
产品基于透明分布式理念提供了默认主键拆分策略、基于TSO和MVCC的高性能强一致分布式事务、基于一致性Hash分区策略的分布式线性扩展能力、全局一致性Binlog和全局一致性备份能力。数据节点（DN）采用阿里巴巴自研的基于X-Paxos的三副本强...
步骤一：架构规划
本文以同城双活单元化架构为示例，介绍如何进行单元化技术架构和应用架构的规划，输出部署架构图和应用架构图，指导研发运维人员初始化环境和进行应用研发改造。前提条件 了解 单元化架构 架构介绍 如上图所...分布式事务 无 无 微服务 无 无
江西农信
江西农信日前携手蚂蚁集团，使用最前沿的云原生技术，实现了传统业务系统从集中式技术架构下移，并平滑迁移上云，为整体核心系统进行分布式架构升级和演进探索积累了坚实的技术基础。客户需求 过去多年，江西农信基于传统 ESB...
应用开发概述
HSF从分布式应用的层面，统一了服务的发布与调用方式，从而帮助您更加方便、快速地开发分布式应用，以及提供或使用公共功能模块。HSF屏蔽了分布式领域中的各种复杂技术细节，如远程通讯、序列化实现、性能损耗、同步与异步调用方式的实现等...
分布式序列
数据访问代理提供了生成分布式环境下的分布式唯一序列（Sequence）的能力，该序列有全局唯一、全局递增的特性，常用于分库分表下的主键、业务主键生成的场景。重要 数据访问代理分布式序列功能是基于数据库实现，如果需要使用该功能，需要...
全场景解决方案
平滑迁移异构治理 方案架构 双模微服务平台通过 SOFA 微服务和 Service Mesh 微服务...开放的 X86 架构，灵活的弹性调度，统一信息标准，以及配套的分布式治理工具，帮助客户精准、高效的治理运维，降低总体拥有成本。客户案例 暂无 建议产品
TCC 模式接入
分布式事务支持以 TCC 模式接入 SOFARPC、Dubbo 和 Spring Cloud 远程服务框架。本文将介绍如何定义接口、实现接口，并针对远程服务框架进行发布服务。定义接口 TCC 参与者需要实现三个方法，分别是一阶段 Try 方法、二阶段 Confirm 方法...
Saga 模式服务设计
基于 Saga 模式分布式事务的多年实践，本文提供了在 Saga 模式下服务设计的一些最佳实践与经验。服务执行与补偿 判断服务状态 应对隔离性问题 服务执行与补偿 Saga 模式是 SEATA 提供的长事务解决方案。Saga 模式下，分布式事务内存在多个...
任务管理高级配置参数说明
1 子任务单机并发数 并行计算 内存网格 网格计算 分布式模型，单台机器并发消费子任务的个数。5 子任务失败重试次数 并行计算 内存网格 网格计算 分布式模型，子任务失败自动重试的次数。0 子任务失败重试间隔 并行计算 内存网格 网格计算 ...
FMT 模式参与者
分布式事务支持以 FMT 模式接入 SOFARPC 和 Dubbo 远程服务框架。本文将介绍如何：配置数据源 创建数据表 针对 SOFARPC 或 Dubbo 进行 发布服务 FMT 模式参与者只需要替换数据源，即可将对该数据源的访问纳入到分布式事务中。一个数据源...
典型客户案例
实现从应用到数据的分布式多活架构 四川农信建成的下一代 IT 架构，要对标行业内的先进实践，并保证架构的持续迭代和进化能力，目前来看，需要实现“两地三中心异地多活”，多活机制覆盖从接入层、应用层到数据层，在接入层建立相应的流量...
2024年
2024-03-27 全部地域 镜像管理 MaxCompute分布式计算框架MaxFrame发布 MaxFrame是由阿里云自研的分布式计算框架，支持Python编程接口、兼容Pandas接口且自动进行分布式计算，同时可直接使用MaxCompute计算资源及数据接口，与MaxCompute ...
应用场景
下文以支付转账为场景说明消息队列如何实现以下功能：异步解耦 分布式事务的数据一致性 削峰填谷 异步解耦 传统处理方式 最常见的一个场景是支付转账成功后，需要生成交易双方的账单，并更新用户权益，发送用户通知。传统的做法有以下两种...
架构
在产品层除了提供业界标准的云原生能力外，还提供具备金融级特性的发布运维能力，比如按序的无损发布策略，针对大规模分布式系统的批量发布运维能力，内置按机房或部署单元的高可用容灾拓扑，并集成 SOFAStack 的实时监控能力。您可通过...
应用场景
基于蚂蚁集团中台战略及架构的最佳实践，将企业级公共能力进行抽象，形成以客户服务、运营服务、分布式架构为基础的业务中台体系，实现开放、可扩展、组件化、分布式的业务架构，支持业务快速、高效、低成本创新，满足互联网场景化快速多变...
ClickHouse
特色功能 对于ClickHouse的分布式表，支持直接写对应的本地表。对于EMR的ClickHouse，提供Exactly Once的语义。前提条件 已创建ClickHouse表，详情请参见 创建表。已配置白名单。如果您使用的是阿里云数据库ClickHouse，配置白名单详情请...
技术架构
另外在业界主流的分布式数据库里，分布式下的redolog/binlog等数据库变更日志其实一直被厂商所忽视，从关系数据库的发展历史来看，生态和标准对于市场规模化非常重要，PolarDB-X 支持binlog日志服务，兼容和拥抱MySQL数据库生态，用户可以...
产品架构
作为分布式架构的平台管控层，单元化应用服务还承担与各相关系统的对接能力。与研发效能产品对接，提供持续集成与交付功能，生成 LHC 产品的发布单。与各 PaaS 基础产品对接，提供权限、资源、应用元数据、工作空间、部署单元等领域模型的...
概述
使用说明 Mars是一个基于张量的统一分布式计算框架。Mars能利用并行和分布式技术，为Python数据科学栈加速，包括 Numpy、Pandas 和 Scikit-learn。Mars常用接口如下：Mars Tensor 接口 和Numpy保持一致，且支持大规模高维数组。示例代码...
批量计算
批量计算（BatchCompute）是一种适用于大规模并行批处理作业的分布式云服务。BatchCompute可支持海量作业并发规模，系统自动完成资源管理，作业调度和数据加载，并按实际使用量计费。
什么是图计算服务
图计算服务Graph Compute是阿里云自主研发的高性能分布式图计算产品，为开发者提供万亿级数据规模的一站式图技术服务。Graph Compute支持复杂图关系数据的存储、查询和计算，高效对接图算法与模型，在搜索推荐广告、实时风控、知识图谱、...
ACK One概述
分布式云容器平台 ACK One（Distributed Cloud Container Platform for Kubernetes）是阿里云面向混合云、多集群、分布式计算、容灾等场景推出的企业级云原生平台。ACK One 可以连接并管理您任何地域、任何基础设施上的Kubernetes集群，并...
FMT 模式行锁策略
乐观锁 分布式事务的 FMT 模式行锁默认是悲观锁。如果对数据一致性要求不高，可以开启乐观锁。您可在 SOFABoot 的配置文件 config/application.properties 中添加如下乐观锁配置：是否开启乐观锁 com.alipay.dtx.rowlock.optimistic=xxx;...
查询应用事务
本文介绍如何查询应用事务信息，包括基本信息和详情信息...分布式事务的开启、结束时间。发起方、参与方信息。事务操作过程，包括 开启、提交 和 回滚 事务。参与方类型（Type），详见 参与者接入模式。如果事务执行报错，显示具体错误信息。
MASK_HASH
返回值说明 返回字符串表达式计算出的Hash值，固定长度64字节；对所有非字符串类型的表达式返回 null，与Hive兼容。使用示例 说明 非字符串类型表达式统一返回NULL，目前实现Hash算法为SHA256，返回长度为64个字符的16进制字符串。对abc...
查询执行模式
Interactive模式 AnalyticDB MySQL 接收到用户查询后，会对查询进行解析，由优化器生成执行计划，执行引擎接收到执行计划后，会生成对应的分布式执行任务，这些分布式执行任务会根据执行计划描述的逻辑进行计算。执行引擎负责调度、管理...
实现原理
PontusSpark 分布式计算引擎 功能强大的 Spark 计算集群，负责接收产品层的计算配置，并对数据进行离线计算和统计。从 Register 中获取监控数据采集的 Vessel 地址，并通过 Vessel 获取必要的监控数据。PontusAlarm 监控告警组件（又称 ...
产品架构
架构优势 在传统的分布式系统中，常用的存储计算架构有如下三种。Shared Disk/Storage（共享存储）有一个分布式的存储集群，每个计算节点像访问单机数据一样访问这个共享存储上的数据。这种架构的存储层可以比较方便的扩展，但是计算节点...
什么是持续交付
可编排 在分布式计算中，组件灵活可编排，可以支持各种规模的动态部署与服务。通过检测容器状态，分析整体数据和资源状况，合理分配和支持不同业务、不同规模的产品服务，实现高效的持续交付。多样化 多平台支撑，支持多种分支策略，支持...
产品功能
分布式计算 提供简单、易用的分布式编程模型，可以进行大数据跑批。单机：随机挑选一台机器执行。详情请参见 单机。广播：所有机器同时执行且等待全部结束。详情请参见 广播。Map模型：类似于Hadoop MapReduce里的Map。只要实现一个Map方法...
名词解释
下表列出了 AnalyticDB PostgreSQL 所涉及到的基本概念：名词 解释 MPP Massively Parallel Processing，一种分布式 Shared Nothing 计算架构，支持多个无共享的节点，执行全并行计算，计算性能随节点增加而线性提升。AnalyticDB for ...
基础概念
功能概览 使用过程中请注意：iGraph Gremlin语法与开源使用差异 其他相关服务 MaxCompute：大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，提供了完善的数据导入方案以及多种经典的分布式计算模型，...
数学统计函数
累积分布函数 beta_cdf函数 beta_cdf(α,β,v)用于计算贝塔分布的累积分布函数P(N;α,β)，其中α和β是贝塔分布的参数。binomial_cdf函数 binomial_cdf(x,y,v)用于计算二项分布的累积分布函数P(N)，其中x表示实验的次数，y表示单次实验...
任务管理
10 子任务全局并发数（仅适用于拉模型）并行计算 内存网格 网格计算 分布式拉模型支持全局子任务并发数，可以进行限流。1,000 在 定时配置 配置向导页，设置定时参数和高级配置参数，然后单击 下一步。定时参数说明如下：配置项 说明 时间...
产品概述
在 PolarDB-X 1.0 层面DB-X计算层面实现分布式逻辑，最终得到一个具有稳定可靠、高度扩展性的分布式关系型数据库系统。相比于全自研分布式NewSQL数据库，PolarDB-X 1.0 产品始终以持续稳定性和可运维性作为第一要务，同时通过标准数据库...
数据面安全性
多可用容灾：一个地域的计算节点分布于多个可用区，具备可用区容灾能力。隔离的VPC环境：计算节点位于隔离的VPC环境内，用户不可以直接访问计算节点。云盾安全防护：函数计算 节点使用阿里云 云盾服务 提供漏洞检测，安全防御及对入侵的...
数据面安全性
多可用容灾：一个地域的计算节点分布于多个可用区，具备可用区容灾能力。隔离的VPC环境：计算节点位于隔离的VPC环境内，用户不可以直接访问计算节点。云盾安全防护：函数计算 节点使用阿里云 云盾服务 提供漏洞检测，安全防御及对入侵的...
什么是MaxCompute
MaxCompute还为您提供完善的数据导入方案以及多种经典的分布式计算模型，您可以不必关心分布式计算和维护细节，便可轻松完成大数据分析。MaxCompute适用于100 GB以上规模的存储及计算需求，最大可达EB级别，并且MaxCompute已经在阿里巴巴...
- 产品推荐
- 这些文档可能帮助您