附录:SOFAStack 产品目录

分布式事务支持 数据访问代理结合中间件分布式事务套件,可以支持分布式事务,保证分布式数据数据一致性。应用场景 海量数据读写 提供灵活的数据拆分机制,代码侵入性低,可以非常方便地实现数据的水平拆分与扩容,从而解决数据库单机...

多语言版本分片模型

动态分片:主要场景是分布式处理未知数据量的数据,例如一张大表在不停变更,需要分布式跑批。主流的框架为SchedulerX提供的MapReduce模型,目前还没有对外开源。功能特性 多语言版本分片模型还具有以下特性。兼容elastic-job的静态分片...

分布式事务

当提交一个分布式事务时,PolarDB-X 1.0 服务器会作为事务管理器的角色,等待所有数据节点(MySQL服务器)PREPARE成功,之后再向各个数据节点发送COMMIT请求。关于如何使用分布式事务,详情请参见 基于MySQL 5.7的分布式事务。

与云服务器ECS对比

如果您需要使用更丰富的实例类型,如通用型、计算型、大数据型、弹性裸金属服务器、GPU/FPGA/NPU异构计算型等,支持高并发网站、视频编解码、大型游戏、复杂分布式集群应用等业务场景,请使用云服务器ECS产品。关于云服务器ECS的更多实例...

技术架构

基于共享存储的基础上,结合分布式的多点写入能力,可以在不迁移数据的前提下提供秒级弹性的能力,给到用户完全不一样的弹性体验。开放生态 PolarDB-X 1.0 全面拥抱和坚定MySQL的开源生态,做到代码完全自主可控的同时满足分布式MySQL的...

PolarDB技术内幕

PolarDB 就是在这种背景下出现的,由阿里巴巴自主研发的下一代关系型分布式云原生数据库。在兼容传统数据库生态的同时,突破了传统单机硬件的限制,为用户提供大容量、高性能、高弹性的数据库服务。核心技术之共享存储 PolarDB 采用了共享...

应用场景

下文以支付转账为场景说明消息队列如何实现以下功能:异步解耦 分布式事务的数据一致性 削峰填谷 异步解耦 传统处理方式 最常见的一个场景是支付转账成功后,需要生成交易双方的账单,并更新用户权益,发送用户通知。传统的做法有以下两种...

多语言版本分片模型

动态分片:主要场景是分布式处理未知数据量的数据,例如一张大表在不停变更,需要分布式跑批。主流的框架为SchedulerX提供的MapReduce模型,暂时还没有对外开源。功能特性 多语言版本分片模型还具有以下特性。兼容elastic-job的静态分片...

新增数据同步任务

本文以 RDS 数据源到分布式搜索服务(云搜 ZSearch)的实时同步为例,介绍如何新增数据同步任务。操作步骤 进入数据同步服务控制台,在左侧导航栏中,选择 数据同步任务。单击 添加任务,选择 RDS 数据源同步到分布式搜索服务 的场景。开始...

离线同步并发和限流之间的关系

限制和最佳实践:分布式执行模式下,配置较大任务并发度可能会对您的数据存储产生较大的访问压力,请评估数据存储的访问负载。如果您的独享资源组机器台数为1,不建议使用分布式执行模式,因为执行进程仍然分布在一台Worker节点上,无法...

基本概念

分支事务 action,一个分布式事务可能包含多个数据库本地事务,在分布式事务框架下,分支事务可能是一个分库上执行的 SQL 语句,或是一个自定义模式服务的调用。分支事务记录 Action Record,又叫 Action 记录,用于标识分支事务。它记录了...

创建PolarDB-X 2.0数据订阅任务

本文介绍如何创建 PolarDB分布式数据订阅任务。前提条件 已创建 PolarDB分布式版 实例和数据库,具体操作请参见 创建实例 和 创建数据库。说明 PolarDB分布式版 中的数据库须基于RDS MySQL创建,DTS暂不支持基于 PolarDB MySQL版 创建的...

金蝶K/3 WISE接入阿里云RDS SQL Server

本文介绍如何将ECS实例上的金蝶K/3 WISE 15.0/15.1的账套数据恢复到RDS SQL Server上,并在ECS实例和RDS实例中进行分布式事务设置,以此实现事务的一致性和隔离性。操作流程 恢复账套数据到RDS:将本地金蝶K/3 WISE账套数据库的全量数据...

客户案例

优化结果 利用 OceanBase 数据库先进的分布式的特性,把单表数据自动分布到数十台廉价微型服务器上,这数十台服务器同时支持每天的高强度写入,轻松化解写入压力。利用 OceanBase 出色的容灾特性,三个机房部署,即使某个机房整体异常,也...

基本概念

云盘 数据块级别的块存储产品,采用分布式三副本机制,为ECS实例提供99.9999999%的数据可靠性保证。本地盘 ECS实例所在物理机上的本地硬盘设备,存储I/O性能、海量存储的性价比极高,但数据可靠性取决于物理机的可靠性,存在单点故障风险。...

选择存储卷类型

阿里云 NAS 阿里云文件存储 NAS(Apsara File Storage)是面向云服务器 ECS 实例、容器服务等计算节点的文件存储服务,是一种可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。它的读写性能相较于对象存储 OSS 而言较高。使用说明 ...

备份恢复

备份数据 登录 PolarDB分布式版控制台,选择目标实例所在地域。在实例列表页面单击实例名称。在左侧导航栏中单击 备份恢复。单击 数据备份。选择备份方式和备份级别。说明 PolarDB-X 1.0 只支持RDS级别的备份,如果所有库都在一个RDS上,...

Join优化

表S数据不移动,表R数据根据分区计算的结果发送到S表扫表的节点 Colocation Join 对于多个相关联的表,在建表时确保表的数据分片数量一致,相同Hash分桶在分布式系统中的分布一致,那么实际查询时就可以跳过数据的Shuffle过程,直接进行...

基本概念

分布式链路跟踪 EDAS鹰眼监控系统能够分析分布式系统的每一次系统调用、消息发送和数据库访问,从而精准发现系统的瓶颈和隐患。分布式任务管理 SchedulerX 是阿里巴巴中间件团队开发的一款分布式任务调度产品。用户在应用中依赖SchedulerX-...

产品架构

时序引擎 LindormTSDB 是面向海量时序数据设计的分布式时序引擎,兼容开源OpenTSDB等标准接口,其基于时序数据特点和查询方式,采用Timerange+hash结合的分区算法,时序专向优化的LSM架构和文件结构,支持海量时序数据的低成本存储、预降...

计费项

重要 若源数据库为分布式实例(PolarDB分布式版、DMS LogicDB、MongoDB),则DTS同步和数据校验功能的价格还与分布式数据库节点数量有关。实例 计费项 计费规则 数据迁移实例 链路配置费用 数据迁移实例仅支持按量付费,计费规则如下:仅在...

创建同步任务

部分数据源支持分布式模式执行任务,详情请参见各插件配置文档:支持的数据源与读写插件。配置任务依赖关系。双击当前 业务流程,设置 insert_data 节点为 write_result 节点的上游节点。任务配置完成后,单击工具栏的 图标,保存任务。...

什么是GPU云服务器

AI分布式训练通信优化库AIACC-ACSpeed 阿里云推出的AI分布式训练通信优化库。可实现分布式训练在兼容性、适用性和性能加速等方面的升级。计算优化编译器AIACC-AGSpeed 阿里云推出的一个基于PyTorch深度学习框架研发的计算优化编译器,可以...

从Kafka同步数据

创建视图将Kafka消费表的数据同步到 云数据库ClickHouse 的分布式表。说明 如果您同步的目的表是本地表,请将分布式表名更换为本地表名,再进行同步。创建视图语法如下。CREATE MATERIALIZED VIEW[view.name]ON CLUSTER default TO[dest_...

任务管理

登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏,选择 任务管理。在 任务管理 页面,选择目标命名空间,单击 创建任务。在 基本配置 配置向导页,配置调度任务的相关信息,然后单击 下一步。基本配置参数说明如下:配置名称...

常见问题

由于分布式DDL是基于ZooKeeper构建任务队列异步执行,执行等待超时并不代表查询失败,只表示之前发送还在排队等待执行,用户不需要重复发送任务。如何处理max_execution_time超时问题 一般查询的执行超时时间,DMS平台上默认设置是7200s,...

Cassandra数据建模

Cassandra是一款分布式、去中心化、高可用的列存储(Wide Column Store)的No SQL数据库。分布式层面主要依靠一致性Hash算法把数据分布在整个集群中,单机主要实现了基于LSM-Tree的引擎。集群中的每个节点将整个Hash范围均匀地分担,每个...

产品概述

通过云原生架构、软硬件一体化、共享分布式存储的设计,主节点和只读节点使用物理复制、RDMA网络低时延,能够快速同步数据,彻底解决了主从异步复制所带来的备库数据非强一致的问题,使得整个数据库集群在应对任何单点故障时,都可以保证...

通过脚本模式配置离线同步任务

部分数据与支持分布式模式执行任务,详情请参见具体插件配置文档。concurrent(任务期望最大并发数)用于定义当前任务从源端并行读取或并行写入目标端的最大线程数。说明 由于资源规格等原因,实际执行时并发数可能小于等于此处配置的并发...

行业趋势与背景

传统的“IOE”系统为集中式系统,但是随着“摩尔定律”的逐渐失效,单台服务器上的性能极限已经慢慢显露,在这种情况下,技术人员逐渐开始探索将原有的集中式系统改造为分布式系统,通过多台中低端服务器的水平扩展方式替换一台高性能...

通过向导模式配置离线同步任务

部分数据源支持分布式模式执行任务,详情请参见各插件配置文档:支持的数据源与读写插件。说明 任务整体同步速度除受到上述配置影响外,还受源端数据源性能,同步网络环境等多方面影响,关于同步速率说明与调优,详情请参见 离线同步任务调...

离线同步能力说明

分布式执行任务 部分数据源支持分布式执行任务,分布式执行模式可以将您的任务切片分散到多台执行节点上并发执行,进而做到同步速度随执行集群规模做水平扩展,突破单机执行瓶颈。如果您对于同步性能有比较高的诉求可以使用分布式模式。...

部署数据库

SQL Server SQL Server是美国Microsoft公司推出的一种关系型数据库系统,是一个可扩展的、高性能的、为分布式客户机和服务器计算所设计的数据库管理系统,实现了与WindowsNT的有机结合,提供了基于事务的企业级信息管理系统方案,SQL ...

创建应用

分布式事务控制台页面,在左侧导航栏选择 应用事务>应用配置。单击 创建应用,在新页面输入以下信息。应用名称:选择开启分布式事务的应用。事务数据存储位置:选择 异库存储,表示事务存储在事务服务器端。异库存储下,无需进行发起方、...

新功能发布记录

2023-07-06 轻量应用服务器数据迁移至ECS实例 2023年03月 功能名称 功能描述 发布时间 相关文档 健康诊断 新增健康诊断项。同一台轻量应用服务器实例的两次健康诊断时间的间隔修改为1分钟。健康诊断时间范围修改为最近12小时。2023-03-22 ...

基本概念

M MaxCompute 大数据计算服务MaxCompute(原名ODPS)是一种快速、完全托管的TB、PB级数据仓库解决方案,提供了完善的数据导入方案以及多种经典的分布式计算模型,能够快速地解决海量数据计算问题。通过数据集成服务,可将Lindorm数据导入...

分布式链路概述

分布式链路(原 SOFAStack 中间件中的 概述)会逐步融合到业务智能可观测服务中,实现监控和链路分析一体化,方便用户对问题进行跟踪定位,对应用性能、调用链路进行实时分析。背景信息 分布式链路是面向分布式架构、微服务(比如 Spring ...

连接到数据库

操作步骤 登录 PolarDB分布式版控制台。在页面左上角选择目标实例所在地域。在 实例列表 页,单击 PolarDB-X 2.0 页签。找到目标实例,单击实例ID。在左侧导航栏中,单击 配置与管理>数据库管理。在页面右上角,单击 登录数据库。在弹出的...

如何重刷数据

登录 分布式任务调度平台。在 任务管理 页面,单击目标任务 操作 列下的 更多,然后单击 重刷任务。在 重刷任务 面板,设置 起止日期 和 数据时间,单击 确定。起止日期:指定重刷的日期区间。数据时间:指定重刷日期区间内的重刷时间。...

如何重刷数据

登录 分布式任务调度平台。在 任务管理 页面,单击目标任务 操作 列下的 更多,然后单击 重刷任务。在 重刷任务 面板,设置 起止日期 和 数据时间,单击 确定。起止日期:指定重刷的日期区间。数据时间:指定重刷日期区间内的重刷时间。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云服务器 ECS 云数据库 RDS 数据库备份 DBS 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用