概述
分布式事务 DTX（Distributed Transaction-eXtended）是蚂蚁集团自主研发的金融级分布式事务中间件，用来保障在大规模分布式环境下业务活动的最终一致性。在蚂蚁集团内部被广泛地应用于交易、转账、红包等核心资金链路，服务于亿级用户的...
概述
动态配置（Distributed Resource Management，简称 DRM）是一个分布式环境下，实时动态的配置管理框架。可以在应用没有重启的情况下，完成配置的动态更新。广泛用于业务参数配置、应急开关切换等场景。动态配置是微服务下的模块之一，您只...
分布式序列
数据访问代理提供了生成分布式环境下的分布式唯一序列（Sequence）的能力，该序列有全局唯一、全局递增的特性，常用于分库分表下的主键、业务主键生成的场景。重要 数据访问代理分布式序列功能是基于数据库实现，如果需要使用该功能，需要...
附录：SOFAStack 产品目录
FMT 模式：为了解决 TCC 模式的易用性问题，分布式事务推出了框架管理事务模式（Framework-Managed Transactions，简称 FMT）。FMT 是一种无侵入的分布式事务解决方案，该模式解决了分布式事务的易用性问题，最大的特点是易于使用、快速接...
消息队列 RocketMQ 客户端流控设计
若使用以上的流量控制方法在分布式架构下做到全局动态控制，可通过配置中心下发流控参数来实现。下文详细介绍了如何基于配置中心来实现异步消息消费的全局动态流控。示例中使用了阿里云的消息队列 RocketMQ（消息队列）和 ACM（应用配置...
流式数据通道概述
流式服务在API上极大简化了分布式服务的开发成本，同时解决了批量数据通道在高并发、高QPS（Queries-per-second）场景下的性能瓶颈。本文为您介绍如何使用流式数据通道服务。功能介绍 MaxCompute流式数据通道服务已商业化且不计费，您可以...
性能测试技术指南
对性能测试实施过程中非常重要、关键的相关技术进行分析，主要包括：系统环境、测试指标、业务模型、数据量、测试模型、测试类型、脚本（API）、场景、监控、瓶颈分析、调优和性能测试分布式云化压测工具。系统环境 分析 系统环境分为生产...
PolarDB MySQL版DDL操作指南
PolarDB MySQL版 的各个版本常见的DDL操作的行为特征：是否锁表（允许并发DML）：非锁表的DDL（Online DDL）只在修改元数据时申请表互斥锁（持续时间一般不超过1秒），在表结构变更期间允许对目标表进行读写操作，提高了在生产环境中的响应...
产品概述
PolarDB分布式版 MySQL Share Nothing，分布式 公共云、专有云企业版、DBStack MySQL生态下的大规模数据、超高并发应用 PolarDB MySQL版和PolarDB PostgreSQL版 产品架构 PolarDB MySQL版 和PolarDB PostgreSQL版均为计算存储分离、共享...
Multi-Master关键技术介绍
AnalyticDB PostgreSQL版 对Multi-Master架构下的表锁协议进行了增强和适配，AnalyticDB PostgreSQL版 定义了一套新的分布式表锁协议来规范Main Master及Secondary Master上加锁的顺序和规则：任意Master上的进程请求1~3级锁规则如下：本地...
技术面临的挑战与革新
云计算下如何平衡扩展性和稳定性SLA 云计算环境下，企业和个人通过开启云服务，即可以得到所需的软件功能、计算资源、存储空间，并按实际使用量付费。在业务量逐步上涨的过程中，用户需要不断提升计算和存储资源来满足业务需要。因此，扩展...
基于TairString实现高性能分布式锁
分布式锁是大型应用中最常见的功能之一，基于Redis实现分布式锁的方式有很多。本文先介绍并分析常见的分布式锁实现方式，之后结合阿里巴巴集团在使用 云原生内存数据库Tair 和分布式锁方面的业务经验，介绍使用 Tair 实现高性能分布式锁的...
PolarDB技术内幕
PolarDB 就是在这种背景下出现的，由阿里巴巴自主研发的下一代关系型分布式云原生数据库。在兼容传统数据库生态的同时，突破了传统单机硬件的限制，为用户提供大容量、高性能、高弹性的数据库服务。核心技术之共享存储 PolarDB 采用了共享...
FMT 模式行锁策略
乐观锁 分布式事务的 FMT 模式行锁默认是悲观锁。如果对数据一致性要求不高，可以开启乐观锁。您可在 SOFABoot 的配置文件 config/application.properties 中添加如下乐观锁配置：是否开启乐观锁 com.alipay.dtx.rowlock.optimistic=xxx;...
基本概念
发起方 Initiator，分布式事务的发起方负责启动分布式事务，通过调用参与者的服务，将参与者纳入到分布式事务当中，并决定整个分布式事务是提交还是回滚。一个分布式事务有且只能有一个发起方。分组标识 用于在网关上做全局的唯一标识，...
PolarDB PostgreSQL版架构介绍
分布式执行加速索引创建 分布式并行执行加速多模：时空数据库 传统数据库的问题 随着用户业务数据量越来越大，业务越来越复杂，传统数据库系统面临巨大挑战，例如：存储空间无法超过单机上限。通过只读实例进行读扩展，每个只读实例独享一...
性能压测
对比项 阿里云PTS Apache JMeter ApacheBench wrk 成本 学习成本 低 中 低 低 部署、运维成本 SaaS服务，免部署 单机部署成本低、分布式部署成本高 低 低 是否收费 是 开源、免费 开源、免费 开源、免费 分布式能力 是否支持分布式施压 是 ...
历史记录
问题修复 分布式拉模型，全局子任务可能不起作用。隔离单元环境，如果没有配置Domain，可能还是会启动失败。优化 Server端性能优化，和客户端通信同步改成异步，并优化了akka默认 dispatcher 的配置。使用1.1.0版本客户端，心跳性能优化...
常见问题
运维管理 容器应用服务常见问题 经典应用服务常见问题 中间件 SOFABoot 常见问题 微服务常见问题 微服务故障排查之 DRM 微服务故障排查之限流 微服务故障排查之 RPC 服务网格-故障排查 消息队列常见问题 任务调度常见问题 分布式链路跟踪...
功能特性
FMT 模式 为了解决 TCC 模式的易用性问题，分布式事务推出了框架管理事务模式（Framework-managed transactions，简称 FMT）。FMT 是一种无侵入的分布式事务解决方案，该模式解决了分布式事务的易用性问题，最大的特点是易于使用、快速接入...
产品优势
分布式事务 蚂蚁集团自主研发的金融级分布式事务中间件，用来保障在大规模分布式环境下业务活动的最终一致性，被广泛地应用于交易、转账、红包等核心资金链路，服务于亿级用户的资金操作。多模应用 PaaS 平台 SOFAStack CAFE（Cloud ...
任务常见问题
如果任务没有抛异常或者使用了分布式任务，您的专业版应用可以通过日志服务来排查问题。如果是基础版应用，您可以自行登录Worker节点，查看SchedulerX的日志和业务自己的日志进行排查。任务运行中卡住怎么办？问题现象：调度任务一直处于...
任务常见问题
如果任务没有抛异常或者使用了分布式任务，您的专业版应用可以通过日志服务来排查问题。如果是基础版应用，您可以自行登录Worker节点，查看SchedulerX的日志和业务自己的日志进行排查。任务运行中卡住怎么办？问题现象：调度任务一直处于...
典型客户案例
完成云平台 PaaS 层建设，构建分布式系统上下游生态，实现分布式云原生架构体系 实现分布式云原生架构体系，需要从技术规范、基础设施、生产力工具、组织流程等各个方面进行持续革新：需要一个面向分布式架构的开发平台和运行平台，结合...
产品概述
产品简介 PolarDB-X 1.0 是由阿里巴巴自主研发的PolarDB分布式版数据库，融合分布式SQL引擎与分布式自研存储X-DB，基于云原生一体化架构设计，可支撑千万级并发规模及百PB级海量存储。专注解决海量数据存储、超高并发吞吐、大表瓶颈以及...
行业趋势与背景
该时代的产品专注解决单机解决不好的分布式扩展性问题，满足分布式数据一致性要求，并支持从单机到分布式的平滑演进，利用云原生技术的优势提供低成本和弹性能力，在交付上具备线上公有云、线下专有云、轻量化等全形态输出。
应用场景
分布式调度（支持非微服务场景）MSE ZooKeeper提供了丰富的分布式锁，分布式队列等功能，可以为自建分布式应用提供多种分布式协调解决方案，提升系统高可用能力，快速高效实现分布式应用系统的构建。如果你使用的是Hadoop、HBase、Kafka和...
技术架构
存储节点（Data Node，DN），主要提供数据存储引擎，基于多数派Paxos共识协议提供高可靠存储、分布式事务的MVCC多版本存储，另外提供计算下推能力满足分布式的计算下推要求（比如Project/Filter/Join/Agg等下推计算），可支持本地盘和共享...
如何高效使用IN查询
另外，PolarDB-X 内部针对跨分片的查询会有一个Parallel Query执行，例如涉及32个分片，针对每个用户查询，会有节点CPU内核数大小的并发度，例如分布式下单个节点规格为16core时，默认并发数就是16个，即32个分片会分成2批才能执行完成。...
在IN查询中如何选择Values个数
另外，PolarDB-X 1.0 内部针对跨分片的查询会有一个Parallel Query执行，例如涉及32个分片，针对每个用户查询，会有节点CPU内核数大小的并发度，例如分布式下单个节点规格为16core时，默认并发数就是16个，即32个分片会分成2批才能执行完成...
离线同步并发和限流之间的关系
分布式处理能力 阅读此部分，您可以解决和理解如下问题：问题一：什么场景下需要配置分布式模式运行同步作业？问题二：为什么使用分布式模式运行同步作业，任务速率还是跑的慢？不开启分布式时，配置的并发数仅仅是单机上的进程并发，无法...
ZooKeeper的使用场景和MSE ZooKeeper的优势
分布式锁：在分布式环境中，程序都分布在独立的节点中，分布式锁是控制分布式系统之间同步访问共享资源的一种方式，分布式锁主要有如下2种类型：排他锁（Exclusive Locks）：又称为独占锁，利用ZooKeeper在一个具体路径下只能创建一个节点...
什么是企业级分布式应用服务EDAS
企业级分布式应用服务EDAS（Enterprise Distributed Application Service）是一个应用托管和微服务管理的云原生PaaS平台，提供应用开发、部署、监控、运维等全栈式解决方案，同时支持Spring Cloud和Apache Dubbo（以下简称Dubbo）等微服务...
应用场景
场景一：问题分析快速定位 在分布式场景下，服务调用错综复杂，问题分析与定位非常困难，分布式链路跟踪系统能迅速定位到有问题的服务，协助快速解决问题节点。完整的应用调用拓扑关系：自动发现该服务之前的调用以及对所有中间件的调用，...
技术原理
分布式线性扩展 PolarDB-X将数据表以水平分区的方式，分布在多个存储节点（DN）中。数据分区方式由分区函数决定，PolarDB-X支持哈希（Hash）、范围（Range）等常用的分区函数。以下图为例，shop库中的orders表根据每行数据的ID属性的哈希，...
不同性能压测工具对比
开源支持的分布式能力无法大规模应用到生产环境，部署成本高。不支持测试用例管理、压测脚本管理等功能。ApacheBench ApacheBench（ab）是一款针对HTTP协议做性能压测的命令行工具。ApacheBench具备如下特性：具有较好的扩展性。支持协议...
2019年
本文介绍了SchedulerX产品在2019年发布涉及的新增功能、功能优化、重要问题修复及对应的文档。客户端发布记录 1.1.0，2019-12-17 变更类型 功能描述 相关文档 优化 修复问题：调整默认依赖的log4j2至2.15.0版本。无 变更类型 功能描述 相关...
创建同步任务
不限流：在不限流的情况下，任务将在所配置的并发数的限制基础上，提供现有硬件环境下最大的传输性能。说明 流量度量值是数据集成本身的度量值，不代表实际网卡流量。通常，网卡流量是通道流量膨胀的1至2倍，实际流量膨胀取决于具体的数据...
通过脚本模式配置离线同步任务
在不限流的情况下，任务将在所配置的并发数的限制基础上，提供现有硬件环境下最大的传输性能。说明 流量度量值是数据集成本身的度量值，不代表实际网卡流量。通常，网卡流量是通道流量膨胀的1至2倍，实际流量膨胀取决于具体的数据存储系统...
序言
基于云原生架构的核心金融系统，还应面对并解决机房级的扩展能力、地区级的容灾能力、高并发条件下的分布式事务并做到灵活资源调度以保证成本最优化。同时，蚂蚁集团将持续把多年的积累的经验和科技向行业分享和开放，提供架构转型的可落地...
- 产品推荐
- 这些文档可能帮助您