读写分离简介
读写分离模块会自动对只读实例进行健康检查，当发现某个实例发生宕机或延迟超过阈值时，系统将不再向该实例分配读请求，而是在剩余的健康实例间进行分配，以此确保单个只读实例发生故障时，不会影响应用的正常访问。当实例被修复后，RDS会...
查询结果不符合预期的常见原因
只要写入过程中没有出现报错，相应的数据一定会写入成功，即使遇到机器宕机等情况，都可以通过恢复WAL的方式恢复数据，保障数据的持久性，不会出现数据写入后非预期不可见的情况。但是由于宽表引擎的特性比较多，例如数据版本号、时间戳、...
读写分离
读写分离模块将自动对主节点和只读节点进行健康检查，当发现某个节点出现宕机或者延迟超过阈值时，将不再分配读请求给该节点，读写请求在剩余的健康节点间进行分配。以此确保单个只读节点发生故障时，不会影响应用的正常访问。当节点被修复...
EMR元数据迁移公告
本文为您介绍迁移E-MapReduce（简称EMR）元数据至数据湖元数据DLF（Data Lake Formation）中的原因及迁移流程。迁移原因 2020年阿里云EMR推出全新的数据湖构建和统一元数据服务，为EMR用户提供了更好的统一元数据服务方案。阿里云EMR团队...
什么是云原生数据库PolarDB分布式版
金融级高可用 PolarDB-X 采用数据多副本架构，为了保证副本间的强一致性（RPO=0），采用Paxos的多数派复制协议，每次写入都要获得超过半数节点的确认，即便其中1个节点宕机，集群也仍然能正常提供服务。Paxos算法能够保证副本间的强一致性...
技术原理
为了保证副本间的强一致性，现代数据库往往采用以Paxos算法为代表的多数派复制协议，它要求实例中至少存在3个节点，每次写入都要获得超过半数节点的确认，即便其中1个节点宕机实例也仍然能正常提供服务。PolarDB-X采用X-Paxos复制协议，X-...
大数据安全治理的难点
通常，大数据系统中的工作流涉及多部门、多责任人且跨系统的数据，如何才能协调好这些业务系统准时、保质保量地产出数据，避免出现因业务系统宕机/脏数据导致数据延时产出、产出脏数据，关乎到企业数据业务的连续性问题甚至高层的信任问题...
扩展性原理
针对这类在线数据库上复杂SQL的处理，PolarDB-X 1.0 额外扩展了单机并行处理器（Symmetric Multi-Processing，简称SMP）和多机并行处理器（DAG）。前者完全集成在 PolarDB-X 1.0 内核中；而对于后者，PolarDB-X 1.0 构建了一个计算集群，...
互联网服务：小打卡
小打卡上有几百万活跃用户，业务发展较快，高并发读是小打卡的数据库强需求。在单机RDS的情况下，由于单表数据量大，会出现读性能瓶颈导致APP卡顿甚至崩溃。基于 PolarDB-X+RDS的分布式数据库解决方案能在表拆分成小的物理表后，提供海量...
深度解析Lindorm搜索索引（SearchIndex）特性
WAL保序 通过隐藏的时间戳属性，保证在宽表中先写入的数据先写入搜索，后写入的数据后写入搜索，确保宽表和搜索的数据一致性，彻底解决LilyIndexer存在的数据错乱问题。全量构建快 对于已有的历史数据，可以借助LTS的全量任务运行机制，...
PolarDB PostgreSQL版：ePQ架构详解
其中最本质的原因是传统mpp数据库的数据默认是哈希分布的，当两张表的join key是各自的分布键时，可以不用shuffle直接进行本地的Wise Join。而 PolarDB PostgreSQL版 的底层是共享存储池，PxScan算子并行扫描出来的数据等价于随机分布，...
应用示例：数据开发过程触发事件检查
在DataWorks开放平台，成功注册、上线并启用扩展程序后，在该扩展程序所生效的工作空间中，使用页面部分功能（即触发扩展点事件）时，DataWorks会将事件消息发送至您的扩展程序，根据扩展程序返回的结果，您可以决定该操作是否生效。...
PolarDB PostgreSQL版：ePQ架构详解
其中最本质的原因是传统mpp数据库的数据默认是哈希分布的，当两张表的join key是各自的分布键时，可以不用shuffle直接进行本地的Wise Join。而 PolarDB PostgreSQL版（兼容Oracle）的底层是共享存储池，PxScan算子并行扫描出来的数据等价于...
实例介绍
主实例 PolarDB-X 1.0 主实例专注于解决单机关系型数据库扩展性问题，用于处理实时高并发的在线事务业务。只读实例 PolarDB-X 1.0 只读实例是对主实例的补充，您可以将复杂SQL计算或有并发诉求的普通查询在只读实例上执行。通过物理资源...
版本发布记录
数据字典 资源队列 解决开源版中单个大查询消耗资源过多导致实例宕机问题。ClickHouse资源队列 2020年07月 功能名称 描述 相关文档 接入Quick BI 支持在Quick BI中添加ClickHouse数据源并通过Quick BI构建BI系统。Quick BI 2020年06月 功能...
通过脚本模式配置离线同步任务
离线同步支持的数据源及其配置详情请参见 支持的数据源与读写插件。说明 数据源相关能力介绍详情请参见：数据源概述。已购买合适规格的独享数据集成资源组。详情请参见：新增和使用独享数据集成资源组。独享数据集成资源组与数据源网络已...
授权和回收数据板块权限
授权原因 填写授予数据板块权限的原因。单击 确定，完成数据板块权限的授权。回收数据板块权限 按照下图操作指引，进入 数据板块回收 对话框。在 数据板块回收 对话框，配置参数。参数 描述 回收用户 选择需要回收数据板块权限的用户。逻辑...
授权和回收数据板块权限
授权原因 填写授予数据板块权限的原因。单击 确定，完成数据板块权限的授权。回收数据板块权限 按照下图操作指引，进入 数据板块回收 对话框。在 数据板块回收 对话框，配置参数。参数 描述 回收用户 选择需要回收数据板块权限的用户。逻辑...
创建同步任务
本文为您介绍如何通过创建同步任务，导出MaxCompute中的数据至MySQL数据源中。前提条件 已通过RDS创建MySQL实例，获取RDS实例ID，并在RDS控制台添加白名单。详情请参见 快速创建RDS MySQL实例 和 添加白名单。说明 如果是通过自定义资源组...
适用场景
若当前数据库中任意一个维度出现瓶颈，或出于对业务不断高速发展提前规划数据库选型的考虑，当下选用 PolarDB-X 1.0 构建分布式数据库，可有效降低后期数据库的扩展及运维压力。在业务发展初期，选择单机数据库还是分布式数据库，需要考量...
新建 OceanBase 数据源
oblogproxy Port（可选）_oceanbase_inner_drc_user 密码（可选）本用户主要用于 OceanBase 数据库内无唯一键表的数据迁移。请注意：您需要在当前数据源所在的租户下创建本用户。选择的 实例类型 为 OceanBase Serverless 实例 时，配置...
新零售：杭州数云信息技术有限公司
PolarDB 采用存储和计算分离的架构，提供分钟级的配置升降级、秒级的故障恢复、全局数据一致性和免费的数据备份容灾服务，既融合了商业数据库稳定可靠、高性能、可扩展的特征，又具有开源云数据库简单开放、自我迭代的优势。本文介绍杭州...
离线同步并发和限流之间的关系
如果您的独享资源组机器台数为1，不建议使用分布式执行模式，因为执行进程仍然分布在一台Worker节点上，无法最大化享受分布式多机的好处。小数据量的同步任务，不建议配置分布式，建议配置单机小并发任务。并发数大于等于8个才能开启分布式...
搭建高可用架构
独占型：是 独享型 的顶配，也称为独占主机型，完全独占一台物理机的所有资源。设置自动备份 为减少误操作或数据库异常时的不可用时间，建议您设置实例每隔一段时间 自动备份，以便出现问题时及时恢复到最近的数据。跨地域容灾 RDS MySQL...
开发前准备：绑定数据源或集群
若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发（DataStudio）模块。绑定后，才可读取数据源或集群中的数据，并进行相关开发操作。前提条件 您需根据后续要开发和调度...
Tair助力厦门真有趣游戏业务从容应对流量洪峰
数据闪回确保用户数据不丢失：业务可能由于服务器重启或者意外故障、游戏中出现漏洞等原因，需要将游戏数据恢复到此前某个时间点，Tair 支持将实例整体或指定Key的数据恢复至指定的秒级时间点，同时也支持选择将数据恢复至新实例或当前实例...
使用简介
本文介绍Ganos GeomGrid扩展中使用的数据类型。GeomGrid GeomGrid是Ganos GeomGrid扩展中用于表示一个地理网格对象的数据类型。地理网格是一种再现地球表面的多边形网格单元集合，可以用于表示地物在地理空间中的位置信息，融合其他各类...
使用简介
本文介绍Ganos GeomGrid扩展中使用的数据类型。GeomGrid GeomGrid是Ganos GeomGrid扩展中用于表示一个地理网格对象的数据类型。地理网格是一种再现地球表面的多边形网格单元集合，可以用于表示地物在地理空间中的位置信息，融合其他各类...
使用简介
本文介绍Ganos GeomGrid扩展中使用的数据类型。GeomGrid GeomGrid是Ganos GeomGrid扩展中用于表示一个地理网格对象的数据类型。地理网格是一种再现地球表面的多边形网格单元集合，可以用于表示地物在地理空间中的位置信息，融合其他各类...
授权与回收数据源权限
③ 列表区 为您展示授权的数据源账号、权限类型、有效期至、权限来源信息，同时，您可以在 操作 列下对数据源进行 回收 操作。回收：回收单个账号的整体数据源权限。在 数据源回收 对话框，填写 回收原因。单击 确定。④ 批量操作区 回收：...
授权与回收数据源权限
③ 列表区 为您展示授权的数据源账号、权限类型、有效期至、权限来源信息，同时，您可以在 操作 列下对数据源进行 回收 操作。回收：回收单个账号的整体数据源权限。在 数据源回收 对话框，填写 回收原因。单击 确定。④ 批量操作区 回收：...
PolarDB Serverless实现了哪些突破
例如，一个被修改过的数据页不应该读取到旧的数据，即使跨节点也是如此。我们使用全局的缓存一致的机制（类似于多核CPU之间缓存一致性机制）来实现。当主节点正在分裂或合并一个 B+Tree 索引，其他节点不应看到中间不一致的 B-Tree 结构，...
2022年
2022年11月 V1.1.27 内核小版本 类别 名称 描述 相关文档 发布时间 新增 新增实时物化视图 PolarDB新增实时物化视图功能，当依赖表进行DML操作时，实时物化视图的数据始终和依赖表的数据保持一致，同时可以大幅提升查询性能。实时物化视图 ...
东软案例
在互联网服务场景下，运维监控数据量激增，采集监控的数据类型更加多样（时序指标、日志、代码链路等），现有运维系统采用的单模引擎（如RRD数据库、openTSDB时序数据库、ElasticSearch检索类数据库）应对这些实时、高并发采集，且价值密度...
管理Dataphin数据源权限
如果需要查看字段的数据，则选择 查询权限。权限账号 系统默认选择为 应用。权限账号所属项目 系统默认选择为默认项目。应用 选择应用的分组及应用。有效期至 选择权限的截至时间。您也可以选择自定义后，指定截至时间。申请原因 填写申请...
恢复SQL Server数据
功能介绍 您可以通过多种方式恢复RDS SQL Server实例的数据。恢复到已有实例 恢复到新实例 通过临时实例恢复到原实例 说明 本文适用于恢复全部数据到同地域的实例上，如需跨地域恢复数据或恢复RDS备份文件至自建数据库，请参见 恢复方案...
新建集群
本文介绍如何新建 云数据库ClickHouse 集群。前提条件 已注册阿里云账号。具体操作，请参见 注册阿里云账号。通过RAM用户（子账号）创建 云数据库ClickHouse 集群时，该RAM用户（子账号）必须拥有AliyunClickHouseFullAccess和...
新建集群
当您面对业务扩展需要构建 云数据库ClickHouse 集群时，本文档为您提供了在 云数据库ClickHouse 控制台上新建集群的详细步骤，帮助您快速搭建起 云数据库ClickHouse 集群。前提条件 已注册阿里云账号。具体操作，请参见 注册阿里云账号。...
聚合支付方案
阿里云从业务扩展性、数据流动性、服务高可用三方面入手，通过多款云数据库产品为利楚扫呗制定聚合支付方案，解决利楚扫呗在业务扩展期遇到的数据存储空间不足、读写性能下降以及大数据分析空缺等问题。业务痛点 武汉利楚商务服务有限公司...
PolarDB PostgreSQL版架构介绍
数据一致性 传统数据库的内存状态同步 传统share nothing的数据库，主节点和只读节点都有各自的内存和存储，只需要从主节点复制WAL日志到只读节点，并在只读节点上依次回放日志即可，这也是复制状态机的基本原理。基于Shared-Storage的内存...
- 产品推荐
- 这些文档可能帮助您