分布式训练框架StarServer
分布式训练框架是深度学习和大规模机器学习中用于加速模型训练、处理海量数据以及提高系统稳定性和资源利用率的关键技术。它通过将复杂的模型分布在多个计算节点上实现并行计算，从而显著缩短训练时间，适应日益增长的数据集规模和大模型的...
分布式通信框架gRPC+
本文介绍如何开启分布式通信框架gRPC+。gRPC+通过Sharing Nothing架构、BusyPolling机制、用户态零拷贝及Send/Recv融合等多种优化技术，降低了E2E的通信延时，提高了Server的吞吐能力，从而可以支持更大的训练规模和训练性能。针对典型业务...
分布式事务框架和事务模式
GTS 定义了一套事务框架以便描述分布式事务，在框架下支持不同事务模式运行。核心组件定义 分布式事务包含以下 3 个核心组件：Transaction Coordinator（TC）：事务协调器，维护全局事务的运行状态，负责协调并驱动全局事务的提交或回滚。...
分布式训练产品DLC支持MPI训练框架
DLC支持MPI框架，用户可以提交MPI类型分布式任务。优化内容 PAI 支持 MPI 的分布式训练任务，支持用户通过 Horovod、DeepSpeed 等基于 MPI 封装的训练框架发起任务。
依赖与配置项
分布式事务不仅支持 SOFABoot 框架，也支持纯 Spring 的应用场景。本文将分别介绍针对不同的服务框架所要预先完成的依赖与配置项操作。无论是事务发起方还是参与者均需要完成本文的依赖与配置项操作。环境要求 必须使用 JDK 1.7 或以上版本...
应用场景
对于传统企业的服务化转型来说，使用分布式框架不是银弹，在解决了传统的单块架构系统随着业务需求的快速变化而面临的挑战后，分布式架构也为研发和运维增加了更大的复杂度和管理成本，基于分布式框架来进行架构改造的应用和业务通常会面临...
概述
任务调度 SOFAStack 任务调度提供分布式任务调度框架，实现任务的分布式处理，并能规范化、自动化、可视化和集中化地对金融企业不同业务系统的任务进行统一调度和全方位监控运维管理，达到所有任务有序、高效运行的目的，极大降低开发和运...
基础术语
术语 说明 应用 泛指用于组成业务系统的应用，可以为单体应用也可以为基于分布式框架构成的微服务应用。应用拓扑 拓扑是对应用间调用关系和依赖关系的可视化展示。SOFATracer SOFATracer 是一个用于分布式系统调用跟踪的组件，通过统一的 ...
应用场景
分布式技术能力 提供金融级分布式框架和金融级分布式数据库，支持多租户，支持海量用户的高业务并发场景。提供大数据和人工智能的中台能力建设，支持分布式金融核心系统的异地多活架构。金融级云原生应用 说明 满足金融业务发展和严苛场景...
全场景解决方案
金融级高可靠性 深度集成 OceanBase 分布式数据库以及 SOFA 金融级云原生分布式框架，保证应用和数据弹性扩展，同时具备高可用（RTO=0，RPO）和一致性，通过蚂蚁集团自身业务沉淀的“资金核对体系”、“全链路压测”等技术风险防控组件，...
基本概念
分支事务 action，一个分布式事务可能包含多个数据库本地事务，在分布式事务框架下，分支事务可能是一个分库上执行的 SQL 语句，或是一个自定义模式服务的调用。分支事务记录 Action Record，又叫 Action 记录，用于标识分支事务。它记录了...
基础术语
分支事务 action 一个分布式事务可能包含多个数据库本地事务，在分布式事务框架下，分支事务可能是一个分库上执行的 SQL 语句，或是一个自定义模式服务的调用。发起方 initiator 分布式事务的发起方负责启动分布式事务，通过调用参与者的...
全面兼容和支持 Seata
分布式事务框架和事务模式 GTS 和 Seata 定义的分布式事务框架是完全一致的，详情请参见 分布式事务框架和事务模式。TM、RM 和应用部署在一起，应用根据业务需求，选择合适的分布式事务模式来解决数据一致性问题。无论使用哪处模式，都离不...
天弘基金
业务挑战 在大规模分布式应用中，曾经的单体应用按横向和纵向的维度被拆分到集群的各个节点之中，为了解决服务及数据调用的问题，引入了分布式服务框架、分布式消息集群、分布式文件存储、分布式缓存等一系列服务。应用的拆分及分布式中间...
网商银行
网商银行之所以能够顺利完成分布式的云计算架构建设，主要依托三方面的优势：承袭了蚂蚁集团的两项核心技术——分布式事务框架 XTS 和 OceanBase 数据库。完善的分布式架构辅助支撑平台。高度互联网化的研发运维体系。这三方面共同构筑了...
AI加速概述
EPL（大规模分布式训练框架）PAI-EPL是一款高效易用的分布式模型训练框架，可以实现低成本、高性能分布式模型训练。更多关于使用EPL实现训练加速的操作，请参见 AI加速：使用EPL实现AI训练加速。Rapidformer（Transformer训练加速）PAI-R...
典型客户案例
实现分布式云原生架构体系 实现分布式云原生架构体系，需要从技术规范、基础设施、生产力工具、组织流程等各个方面进行持续革新：需要一个面向分布式架构的开发平台和运行平台，结合分布式数据库、分布式缓存、微服务框架、服务管理和发布...
数据科学计算概述
MaxFrame是由阿里云自研的分布式科学计算框架，是对历史相关产品功能（PyODPS、Mars）的重大升级，在MaxCompute之上提供一套完全兼容Pandas接口的API，让用户用更为熟悉、更符合Python社群习惯的方式使用MaxCompute。本文为您介绍...
功能特性
微服务有高性能分布式服务框架、微服务治理中心、高可靠的轻量级配置中心、多活数据中心等特性，本文主要介绍这些特性。高性能分布式服务框架 提供高性能和透明化的 RPC 远程服务调用，具有高可伸缩性、高容错性的特点。支持多协议、多序列...
SOFAStack 常见问题
分布式服务框架现在支持哪些协议？支持 Bolt（默认自有协议）、Dubbo、Restful、WebService、gRPC、Hessian、JSON 等。为什么说 SOFA 微服务具有高可用性？SOFA 微服务支持客户端限流、集群容错，服务熔断、故障注入、服务降级等，保障服务...
MaxFrame概述
MaxFrame是由阿里云自研的分布式计算框架，支持Python编程接口、兼容Pandas接口且自动进行分布式计算，同时可直接使用MaxCompute计算资源及数据接口，与MaxCompute Notebook、镜像管理等功能共同构成了MaxCompute完整的Python开发生态。...
业务调研
应用架构兼容性特征 集中式/分布式架构 应用是否分布式架构，以及使用的分布式架构框架，是否有对应的PAAS产品支持兼容 源代码可控性 源代码是否可操作及维护，是否有能力支持上云迁移或改造；技术组件上云兼容性 包含数据库、存储、中间件...
什么是 SOFAStack 微服务
SOFARPC 是一个分布式服务框架，为应用提供高性能、透明化、点对点的远程服务调用方案，具有高可伸缩性、高容错性。动态配置 动态配置（Distributed Resource Management，简称 DRM）可以实现在应用运行时，动态修改配置的功能。提供动态...
附录：SOFAStack 产品目录
任务调度 任务调度（Task Scheduler，简称 TS）提供分布式任务调度框架，实现任务的分布式处理，并能规范化、自动化、可视化和集中化地对金融企业不同业务系统的任务进行统一的调度和全方位的监控运维管理。产品架构 产品优势 支持集群任务...
基础术语
中文 英文 释义 Dubbo Dubbo Dubbo 是一个分布式服务框架，致力于提供高性能和透明化的 RPC 远程服务调用方案，是阿里巴巴 SOA 服务化治理方案的核心框架，每天为 2,000+个服务提供 3,000,000,000+次访问量支持，并被广泛应用于阿里巴巴...
概述
SOFARPC 是一个分布式服务框架，为应用提供高性能、透明化、点对点的远程服务调用方案，具有高可伸缩性、高容错性。SOFARPC 提供服务发布与订阅、服务调用、服务路由、服务限流、服务管控、服务链路跟踪等一系列稳定实用的功能。应用依赖 ...
错误码
确保运行框架是分布式事务能支持的。SDK 与事务云服务通信相关 错误码 错误消息 错误说明 解决方案 DTX-301 There must be one address registry,but found none.未找到事务云服务的地址。检查事务云服务是否健康运行。DTX-302 init dtx-...
功能特性
高性能分布式服务框架 提供高性能和透明化的 RPC 远程服务调用，具有高可伸缩性、高容错性的特点。支持多协议/多序列化/多语言 包括 Bolt（默认自由协议）、Dubbo、RESTful、WebService、Protobuf、Hessian、JSON 等。服务自动注册与发现 ...
基本概念
高速服务框架 高速服务框架HSF（High-speed Service Framework）是一款面向企业级互联网架构的分布式服务框架，以高性能网络通信框架为基础，提供了诸如服务发布与注册、服务调用、服务路由、服务鉴权、服务限流、服务降级和服务调用链路...
概述
Dubbo：开源分布式服务框架 H2C：开放的网络通信框架。实现原理 SOFARPC 中的远程调用是通过服务模型来定义服务调用双方的。服务分为：服务消费方：对应 RPC 的调用端，可以理解为调用客户端，即“引用(Reference)”。服务提供方：对应 RPC...
中间件产品总览
提供高可用消息云服务 任务调度 提供分布式任务调度框架 提供自动化任务调度服务 分布式事务 金融级分布式事务中间件 支持跨数据库、跨服务以及混合分布式事务 数据访问代理 通过 MySQL 协议与 RDS\OceanBase 通信 通过触发 DDL 任务管理...
应用场景
快速开发分布式应用 SOFABoot 框架集成了所有 SOFA 中间件，以“依赖即服务”的调用形式实现快速配置，轻松搭建稳定、可靠、安全、可扩展的分布式应用，减少开发、测试、集成成本。兼容 Spring Boot 工程 对于基于 Spring Boot 框架开发的...
产品优势
微服务平台 提供了既支持 SOFA 框架又支持 Service Mesh 架构的微服务管理和治理能力，致力于帮助企业快速构建高可扩展、高性能、低成本、轻量无侵入的分布式系统。消息队列 基于 Apache RocketMQ 构建的金融级分布式消息中间件，为分布式...
组件中心
任务调度 提供分布式任务调度框架，实现任务的分布式处理，并能规范化、自动化、可视化和集中化地对金融企业不同业务系统的任务进行统一的调度和全方位的监控运维管理。消息队列 在蚂蚁集团关键链路中历经十年实战打磨，是一款具备高可靠、...
使用限制
SOFAStack微服务是高性能分布式微服务框架，在使用时具有以下环境要求和限制。限制项 限制范围 限制说明 微服务开发框架 Dubbo、Spring Cloud、SOFA 服务注册中心 SDK 支持这三种框架的兼容 SOFA SDK 语言限制 Java SOFA SDK 支持 Java ...
基于MySQL 5.6的分布式事务
或rollback()常见问题 如何在Spring框架中使用分布式事务？如果使用Spring的@Transactional 注解开启事务，可以通过扩展事务管理器来开启 PolarDB-X 1.0 分布式事务。代码示例：import org.springframework.jdbc.datasource....
HSF概述
高速服务框架HSF（High-speed Service Framework），是在阿里巴巴广泛使用的分布式RPC服务框架。概述 HSF连通不同的业务系统，解耦系统间的实现依赖。HSF从分布式应用的层面，统一了服务的发布与调用方式，从而帮助用户更加方便、快速地...
合作伙伴及开源生态
（数据统计截止时间为 2021 月 7 月 22 日）SOFAStack 目前涵盖的开源项目有：主要项目：基于 Spring Boot 的研发框架 SOFABoot、生产级 Java RPC 框架 SOFARPC、分布式链路跟踪系统 SOFATracer、高可用服务注册中心 SOFARegistry。...
概述
任务调度 TS（Task Scheduler）提供分布式任务调度框架，实现任务的分布式处理，并能规范化、自动化、可视化和集中化对金融企业不同业务系统的任务进行统一的调度和全方位监控运维管理，达到所有任务有序、高效运行的目的，极大降低开发和...
HSF概述
高速服务框架HSF（High-speed Service Framework），是在阿里巴巴广泛使用的分布式RPC服务框架。概述 HSF连通不同的业务系统，解耦系统间的实现依赖。HSF从分布式应用的层面，统一了服务的发布与调用方式，从而帮助用户更加方便、快速地...
- 产品推荐
- 这些文档可能帮助您