集群版-双副本
代理模式的服务架构图和组件说明如下。图 1.集群版代理模式服务架构 表 1.集群版代理模式组件说明 组件 说明 代理服务器（proxy servers）单节点配置，集群版结构中会有多个Proxy组成。数据分片（data shards）每个数据分片均为双副本...
产品整体介绍
技术架构 以下为 AnalyticDB PostgreSQL版 的架构图，主要包含Master Node和Compute Node两大组件，中间通过Interconnect进行互联通信和数据交换传输。Master Node和Compute Node提供多副本保障服务高可用和数据高可靠，同时均支持通过...
容量规划
也有部分公司会存在更大的数据容量和数据挖掘需求，同时会引入分布型数据库，分析型数据库和大数据库分析工具等。完成数据库选型后，需要针对业务特性了解不同数据库所需要关注的指标，以常见的MySQL和Redis数据库为例，主要需要关注到业务...
参与者接入模式
FMT 模式架构如下：Saga 模式 Saga 模式是 SEATA 提供的长事务解决方案，适用于业务流程长、业务流程多、参与者包含其它公司或老系统服务等场景。在 Saga 模式中，业务流程中每个参与者都提交本地事务。当出现某一个参与者失败则补偿前面...
如何基于LSM-tree架构实现一写多读
其次是数据组织方式不一样，LSM-tree引擎采用分层存储，追加写入新数据，需要解决多个计算节点一致性物理快照以及Compaction问题。最后，作为数据库引擎，还需要解决一写多读模式下DDL的物理复制问题。同时，为了产品化，充分发挥B+tree...
功能概述
实现原理 分析型数据库MySQL版的向量分析旨在帮助您实现非结构化数据的近似检索和分析，其实现原理是通过AI算法提取非结构化数据的特征，然后利用特征向量唯一标识非结构化数据，向量间的距离用于衡量非结构化数据之间的相似度。...
序言
数字金融时代的云原生架构转型 步入数字金融时代，“云原生架构”作为金融 IT 架构的关键发展趋势已经成为业界共识，但 IT 架构转型绝不是一蹴而就的，在积极探索和应用以“云原生”为代表的新兴技术的同时，必须考虑与传统模式和技术融合...
Multi-Master基础架构
背景信息 Hybrid Transaction Analytical Processing（HTAP）是著名信息技术咨询与分析公司Gartner在2014年提出的一个新的数据库系统定义，特指兼具OLTP（事务能力）和OLAP（分析能力）的数据库系统。在传统场景中，承担OLTP任务和OLAP任务...
应用架构管理
我的应用 在CADT控制台 我的应用 页面，您可以对应用架构进行以下操作：复制架构图：复制一份新的架构图到CADT画布页面进行架构设计，新架构图中保留了原架构图的全部资源及配置。查看架构图：打开本架构图到CADT画布中。另存为模板：将...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
技术架构选型
根据阿里巴巴OneData方法论最佳实践，在设计数据模型前，您需要完成技术架构的选型。本教程中使用阿里云大数据产品Dataphin配合MaxCompute，完成整体的数据建模和研发流程。完整的技术架构如下图所示。其中，Dataphin的数据集成及同步负责...
应用场景
数据库网关与数据管理DMS搭配可为您提供高稳定性、低成本、统一的非阿里云数据库（例如本地IDC自建、其他云厂商的云数据库、其他云厂商云服务器上自建的数据库）的通用管理方案，实现多云统一的数据库管理服务，架构图如下所示。...
应用场景
数据库网关与数据管理DMS搭配可为您提供高稳定性、低成本、统一的非阿里云数据库（例如本地IDC自建、其他云厂商的云数据库、其他云厂商云服务器上自建的数据库）的通用管理方案，实现多云统一的数据库管理服务，架构图如下所示。...
附录：SOFAStack 产品目录
数据访问代理 数据访问代理（Open Database Proxy，简称 ODP）能够解决海量请求下的数据访问瓶颈和数据库的容灾问题，提供水平拆分、平滑扩缩容、读写分离的在线分布式数据库服务，为海量数据访问提供低消耗、高性能、高可用的轻量级解决...
设计方案
基于稳定性支柱设计原则，整体稳定性设计方案可参考如下：架构设计原则 软件系统从所有的功能都在一个应用程序内运行的单体应用架构，到不同的功能模块分别部署在不同的服务器上的传统分布式应用架构，再到服务细分通过轻量级的通信机制...
构建运营模型
运营模型是指组织和业务团队使用云计算平台支持业务的过程中，根据业务需求、企业架构、组织文化、现有的技术水平和工具等构建的模型。每个企业的运营模型都是独特的，本文将介绍四种常见的运营模型以供参考。构建运营模型的目的是为了实现...
实例介绍
用户专享的数据访问代理集群的架构图如下所示：专享的数据访问代理实例旨在满足金融级用户的业务需求，通常用于以下场景：资源隔离，数据安全性要求高；业务压力大，对数据库性能要求高；业务压力存在阶段性变化，需要动态变更配置来适配...
管理数据架构待发布对象
导入的发布包文件中存在数据架构变更对象时，将在待发布数据架构页面为您展示，您可在待发布数据架构页面对数据架构对象进行管理和发布。前提条件 数据架构对象所在的数据板块已经发布。待发布数据架构对象入口 请参见 发布包总览入口，...
管理数据架构待发布对象
导入的发布包文件中存在数据架构变更对象时，将在待发布数据架构页面为您展示，您可在待发布数据架构页面对数据架构对象进行管理和发布。前提条件 数据架构对象所在的数据板块已经发布。待发布数据架构对象入口 请参见 发布包总览入口，...
应用场景
表格存储 有互联网应用架构（包括数据库分层架构和分布式结构化数据存储架构）、数据湖架构和物联网架构三种典型应用架构。本文结合 表格存储 的典型应用架构介绍了不同应用架构下的应用场景。互联网应用 目前互联网已在日常生活中广泛应用...
DataWorks V3.0
图计算服务：图计算服务（Graph Compute，简称GCS）是新一代一站式图数据管理和分析平台，具有数据加载快、规模可扩展、查询延时低（毫秒级）、离线在线混合引擎和共享存储等优势。DataWorks V3.0全新推出图计算开发平台Graph Studio，为图...
合作伙伴及开源生态
战略合作伙伴 蚂蚁集团除了与众多行内 ISV 进行合作外，还与众多的金融机构达成了战略合作协议，在场景、技术上进行深度合作，特别是在金融科技、分布式架构上与各金融机构进行联合创新，形成金融科技开放生态。目前，蚂蚁集团对外开放的...
E-MapReduce支持倚天云服务器
大数据场景下倚天架构与X86架构对比 在相同规格下X86架构的ECS实例和基于倚天架构的ECS实例上进行了基准测试，可以看到在大数据业务场景下倚天架构实例比基于x86架构实例算力性价比更高。降低硬件成本 相比于X86架构ECS实例成本，倚天架构...
未来规划
云计算架构的核心逻辑就是通过虚拟化技术带来池化资源，云原生数据库采用分布式数据库架构，实现大规模扩展，每套数据库系统横跨多台服务器和虚拟机，带来了全新的系统管理挑战。其中最核心的挑战就是如何实现弹性以及高可用，实现按需按量...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
高压缩引擎（X-Engine）介绍
挑战和诉求：历史数据归档 历史数据归档的挑战 大部分业务数据的读写特征，都是最新产生的数据会被更频繁地读取或更新，而更久之前的数据（如1年前的聊天记录或订单信息）很少被访问。随着业务发展，数据库系统中会积累大量访问频率很低...
整体架构
Transaction Table2.0的增量存储和处理架构的特殊设计主要集中在五个模块：数据接入、计算引擎、数据优化服务、元数据管理、数据文件组织，其他部分与MaxCompute通用的架构一致。本文为您介绍Transaction Table2.0的核心架构要点。...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
内部架构
本节为您展示 PolarDB PostgreSQL版（兼容Oracle）内部架构图。架构组件 说明 shared_buffer_pool 共享缓冲区，用于缓冲数据，加快数据处理的速度。wal buffer 日志缓冲区，写入WAL日志时，需要先写入到日志缓冲区，根据日志产生的大小或者...
一键生成我的架构
在 阿里云控制台首页，您可以通过云速搭CADT，基于在阿里云部署的已有资源，一键生成云产品资源架构...全部资源移出成功后如下图所示：全部资源移出成功后，在云上架构下可以看到此时应用状态为 释放成功，单击 删除架构图 即可完成删除操作。
产品架构
从上图可以看出EMR由四部分组成：社区开源产品 集成Apache社区开源大数据组件，例如Hadoop、Hive和HBase，随着EMR版本更新，开源软件也会相应的升级，详情请参见 版本概述 下各版本的版本说明。注意 已经创建好的EMR集群不支持组件升级。...
关系图
DataWorks智能数据建模的关系图，帮助您快速构建数据仓库模型架构图，直观展示数据仓库中维度、维度表、明细表、汇总表、应用表等各模型之间的关系。一个关系图承载一个数据仓库模型，一个账号支持创建多个关系图。本文为您介绍关系图的...
概述
总体流程 本指南涉及的总体操作流程如下图：架构规划：进行单元化技术架构规划和应用架构规划，输出部署架构图和应用架构图，指导研发运维人员初始化环境和应用研发改造。初始化环境：根据架构规划初始化单元化环境，为后续的应用发布做...
Data API功能简介
架构图 安全认证体系 RDS Data API Service使用AK/SK+ARN（Aliyun Resource Name）的鉴权模式。用户无需在应用程序中存储数据库凭证，仅需要使用Secrets Manager来存储调用RDS Data API时需要传入的ARN。RDS Data API会透明地调用Secrets ...
持久内存型
除了降低成本之外，持久内存型还能带来应用架构的简化，可将目前流行的应用+缓存+持久存储的架构模型，演进为更加简洁的应用+具备持久能力的内存数据库的架构模型，如下图所示。产品优势 持久内存型基于持久内存技术，提供大容量、兼容...
持久内存型
除了降低成本之外，持久内存型还能带来应用架构的简化，可将目前流行的应用+缓存+持久存储的架构模型，演进为更加简洁的应用+具备持久能力的内存数据库的架构模型，如下图所示。产品优势 持久内存型基于持久内存技术，提供大容量、兼容...
金融大数据
业务架构 架构说明：大数据仓库调用外部数据和数据集市的信息，通过数据获取层、数据模型层、数据加工层、数据应用层和分析集市的层层筛选、分析、加工，由大数据服务接口向内部源数据输出适用于多种用户场景的有效数据。大数据仓库功能...
Hive元数据说明
图 1.DLF统一元数据在单集群部署架构图 图 2.DLF统一元数据在多集群部署架构图 自建RDS 元数据存储在RDS中。自建RDS元数据类型和内置MySQL类型在架构上是一致的，区别只是存储由本地的MySQL，变成了RDS（云上的MySQL）。如 自建RDS在多集群...
创建自定义应用
参考 应用架构示例 中的架构设计图，从左侧产品列表或通过关键字搜索，分别查找到云服务器ECS、安全组、云数据库RDS和弹性公网EIP，将其拖拽至架构图中对应的位置。说明 每个阿里云资源都有对应的资源级别，在拖拽资源进行架构设计时，CADT...
Spark概述
架构 Spark架构如下图所示，基于Spark Core构建了Spark SQL、Spark Streaming、MLlib和Graphx四个主要编程库，分别用于离线ETL（Extract-Transform-Load）、在线数据分析、流计算、机器学习和图计算等场景，详情请参见 Apache Spark官网。...
- 产品推荐
- 这些文档可能帮助您