开启SQL独享版
当您使用SQL分析时，如果数据量较大，SQL普通版无法在一次查询中完整扫描指定时间段内的所有日志，返回的结果可能不包括所有匹配的数据，增加Shard可以提升读写能力，但只对新写入的数据生效。您可以通过开启SQL独享版，增加计算资源，提升...
应用场景
物联网存储IoTstore作为物联网的统一数据存储平台，可应用于车联网、智能家居、工业物联网等场景。车联网 车联网是物联网技术在智能交通领域的典型应用。在智能交通领域通过使用物联网、云计算、传感器、大数据、无线通信等技术对交通信息...
行业趋势与背景
PolarDB-X 技术发展 产品前言 PolarDB-X 是由阿里巴巴自主研发的云原生分布式数据库，融合分布式SQL引擎DRDS与分布式自研存储X-DB，基于云原生一体化架构设计，可支撑千万级并发规模及百PB级海量存储。专注解决海量数据存储、超高并发吞吐...
执行引擎
全异步执行 端到端的全异步处理框架，可以避免高并发系统的瓶颈，充分利用资源，并且最大可能地避免存储计算分离系统带来的读数据延迟的影响。向量化和列处理 算子内部处理数据时最大可能地使用向量化执行，与存储引擎深度集成，通过灵活的...
离线同步数据质量排查
任务配置并发读取时会切分出多个分片查询SQL，由于数据库事务一致性策略，每个查询SQL查询的都是当前提交时的数据快照，并且多个SQL并不在一个事务上下文内。因此在源头数据变化时会同步不到查询SQL之后的变化。这类原因导致的问题一般是...
计算层变量
XPROTO_MAX_DN_CONCURRENT 否 500[1-8192]单个存储节点最大并发请求数（私有协议）。XPROTO_MAX_DN_WAIT_CONNECTION 否 32[1-8192]单个存储节点最大请求等待数（私有协议）MERGE_SORT_BUFFER_SIZE 否 2048[1024-81920]TableScan层做归并...
方案背景
本文介绍了表格存储结合实时计算Flink实现大数据分析的样例场景、架构设计等。背景信息 云数据库RDS MySQL基于阿里巴巴的MySQL源码分支，经过双十一高并发、大数据量的考验，拥有优良的性能。RDS MySQL支持实例管理、账号管理、数据库管理...
实例选型和集群规划
规格节点 云原生数据仓库AnalyticDB PostgreSQL版 采用MPP并行架构，在节点角色上区分为Master节点和Segment节点，其中Master节点是实例的入口，负责SQL请求、路由分发和结果集处理，Segment节点为计算节点，负责SQL处理和数据存储，每个...
新功能发布记录
无 Spark Distribution SQL Engine AnalyticDB for MySQL Spark提供Spark开源原生能力Distribution SQL Engine的托管服务，支持通过Spark Distribution SQL Engine开发Spark SQL作业，从而更方便地利用SQL分析、处理和查询数据，提升SQL...
使用流程
表格存储 提供了控制台、命令行工具（Tablestore CLI）和Tablestore SDK三种访问方式。本文介绍通过控制台和命令行工具快速使用宽表模型和时序模型的流程。背景信息 使用表格存储前，您需要了解表格存储相关介绍，例如产品概述、基本概念等...
2022年
本文介绍2022年 云原生数据仓库AnalyticDB PostgreSQL版 存储弹性模式的内核功能发布记录。您可以在 云原生数据仓库AnalyticDB PostgreSQL版 控制台将实例升级至最新发布的小版本。升级小版本的具体操作，请参见 版本升级。2022年07月28日...
数据库备份到OSS
背景 对象存储OSS 对象存储OSS 提供了标准类型存储，作为移动应用、大型网站、图片分享或热点音视频的主要存储方式，也提供了成本更低、存储期限更长的低频访问类型存储和归档类型存储，作为不经常访问数据的备份和归档。对象存储OSS非常...
方案背景
本文以车联网场景中车辆元数据为例介绍基于设备接入平台与表格存储Tablestore搭建车辆元数据管理平台的场景需求以及方案架构。场景需求 车辆在行驶的过程中会定时上报大量的状态数据，例如车辆识别代码、行驶速度、发动机转速、车内温度等...
概述
PolarDB-X 列存索引的存储采用Delta+Main（类LSM结构）二层模型+标记删除的技术，确保列存索引使用对象存储OSS也具备高并发更新能力。同时，在列存读取对象存储OSS的链路上，采用多层数据Local Cache、以及多级统计信息机制，尽量减少不必...
PolarDB HTAP实时数据分析技术解密
因此要达到最极致的分析性能必须使用列式存储，而列式存储中索引稀疏导致的索引精准度问题决定它不可能成为TP场景的存储格式，如此行列混合存储成为一个必选方案。但在行列混合存储架构中，行存索引和列存索引在处理随机更新时存在性能鸿沟...
列存索引技术架构介绍
同时，结合 PolarDB 基于共享存储一写多读的架构特征，其包含如下几个关键的技术创新点：存储引擎（InnoDB）支持存储列式索引（Columnar Index），用户可以通过DDL语句为一张表中的全部列或者部分列创建列索引，列索引采用列压缩存储，其...
监控指标常见问题
执行 insert、insert on conflict 或 update 命令时，耗时比较长即写入性能较差，通常原因是因为SQL没有走Fixed Plan，没有走Fixed Plan的SQL命令存在表锁，并发执行时会等锁，导致耗时较长，实时写入RPS 监控指标会显示写入类型为 insert...
Cost-based SQL诊断引擎
在阿里巴巴集团内部，我们已经对数据库实例上全部SQL进行实时采集和存储，借助阿里巴巴这个大平台业务的丰富性和SQL场景的丰富性，以特征化形式描述为抓手对线上海量全量SQL资源分析搜寻符合指定特征的真实案例，抽取测试案例所需的信息，...
RDS SQL Server空间不足问题
SQL Server中提供了一个专用的存储过程 sp_estimate_data_compression_savings 可以帮助您快速评估在指定的表或索引上开启压缩可以节省多少数据存储空间。说明 修改表或索引上的压缩选项设置是DDL操作，大表执行此类操作会造成长时间锁表，...
使用须知
问题与解决方法 使用云数据库HBase的SQL功能（Phoenix）的过程中可能会遇到以下问题，为您提供解决以下问题的方法。meta可能存在不同步。问题描述：在同一时间多个连接访问Phoenix的场景下，一个连接进行DDL操作后（例如创建表，删除表，...
表批读写
有关Delta Lake SQL命令的信息，请参见 Databricks Runtime 7.0及更高版本：Databricks Runtime 7.x SQL参考 Databricks Runtime 6.x及以下版本：Databricks Runtime 5.5 LTS和6.x SQL参考 建立表格 Delta Lake支持使用DataFrameWriter...
RDS术语
集群系列 RDS SQL Server 2017支持集群系列，基于SQL Server源生AlwaysOn技术，实现计算与存储分离，并且可以购买只读实例实现读写分离。集群系列可申请只读连接地址实现业务读写分离，同时每个只读实例默认也有独立的内网连接，以便单独...
离线同步任务调优
本文为您介绍影响数据同步速度的因素、如何通过调整同步任务的并发配置来实现同步速度最大化、作业的限速选项，以及数据同步过慢的场景。文档概述 同步速度受同步任务本身配置、数据库、网络等多方面影响，详情请参见：数据同步速度的影响...
迁移时源库为SQL Server的注意事项及限制
如果迁移的源数据库类型为SQL Server，如自建SQL Server、RDS SQL Server，您需要在配置具体的迁移任务前，参考本文的注意事项及限制，以保障数据迁移任务的正常运行。源库为SQL Server的迁移方案概览 根据如下迁移方案，查看迁移任务的...
写入或更新调优指南
SQL为普通OLAP写入，那么就会走左侧的链路，会经过优化器（QO）、执行引擎（QE）等一系列组件，数据写入或更新时会整个表拿锁即表锁，如果是并发执行 INSERT、UPDATE 或 DELETE 命令，那么SQL间会相互等锁，导致延迟较高。SQL为点查点写，...
企业版和标准版功能对比
SQL洞察和审计由数据库自治服务DAS提供，在全量请求和安全审计的基础上，融合了搜索、SQL洞察、安全审计以及流量回放和压测等功能，帮助您更好地获取SQL语句的具体信息、排查各种性能问题、识别高危风险来源。支持 支持 DB for AI PolarDB ...
索引介绍
使用宽表模型的表引擎查询数据时存在依赖主键以及根据属性查询效率低的问题，表格存储提供了二级索引和多元索引用于解决宽表模型的数据查询问题。您也可以为数据表创建映射关系后，像使用传统数据库一样使用SQL查询表中数据。表引擎 宽表...
监控报警
在使用MaxCompute过程中，您可能需要通过监测MaxCompute包年包月资源、按量计费作业消费 及Tunnel上传下载情况等，了解资源的运行状况，以便及时升级资源或规划作业。您也可以通过设置报警规则，当资源状况符合报警规则时，云监控自动发送...
离线同步并发和限流之间的关系
上面任务期望最大并发数：即是任务配置的并发数，由于数据集成资源组或者任务本身特性等原因，任务实际执行的并发数可能小于等于任务配置并发数，如涉及任务并发数计费场景（数据集成调试资源组）会按照任务实际并发数计费。数据集成会尝试...
玄武分析型存储
高吞吐实时写入 AnalyticDB通过三层并行架构实现了极强的吞吐能力，从接入层、到存储节点层再到持久分布式存储层，都可以并行扩展，再结合行列混合存储引擎，增量和全量的异步转换实现了高吞吐高并发实时写入。在实时可见性方面，...
备份SQL Server
为避免灾难、硬件故障、数据丢失、损坏和意外删除事故发生，建议您通过 云备份 及时对SQL Server数据库进行备份。云备份 支持备份云服务器ECS实例或本地服务器中部署的SQL Server数据库，将数据 备份至云端。您可以随时根据时间点 恢复数据...
产品概述
什么是PolarDB PolarDB 是阿里巴巴自研的新一代云原生数据库，在计算存储分离架构下，利用了软硬件结合的优势，为用户提供具备极致弹性、高性能、海量存储、安全可靠的数据库服务。100%兼容MySQL和PostgreSQL生态，高度兼容Oracle语法。...
创建SQL Server只读实例
RDS SQL Server当前对于满足条件的主实例支持只读实例快速初始化能力，该能力将有效缩短只读实例的创建时间至分钟级别，且该过程对主实例I/O无任何影响。具体详情，请参见 只读实例快速初始化能力简介。前提条件 您已创建SQL Server主实例...
创建SQL Server只读实例
RDS SQL Server当前对于满足条件的主实例支持只读实例快速初始化能力，该能力将有效缩短只读实例的创建时间至分钟级别，且该过程对主实例I/O无任何影响。具体详情，请参见 只读实例快速初始化能力简介。前提条件 您已创建SQL Server主实例...
引擎类型
云原生多模数据库 Lindorm 内含宽表引擎、时序引擎、搜索引擎、文件引擎、计算引擎和流引擎，兼容HBase/Cassandra/S3、OpenTSDB、Solr、HDFS、Kafka等多种开源标准接口，同时提供SQL查询、时序处理、文本检索分析等能力。为应对动态变化的...
计费方式
11,000条SQL/秒 150 Mbps数据库流量峰值 4亿条在线SQL语句存储 默认1 TB存储空间 默认150 MB带宽 实例数与存储支持弹性扩容 10~19个数据库实例 吞吐量峰值：12,000条SQL/秒 350 Mbps数据库流量峰值 6亿条在线SQL语句存储 默认1.5 TB存储...
产品架构
其基于数据自动分区+分区多副本+LSM的架构思想，具备全局二级索引、多维检索、动态列、TTL等查询处理能力，支持单表百万亿行规模、高并发、毫秒级响应、跨机房强一致容灾，高效满足业务大规模数据的在线存储与查询需求。面向海量半结构化、...
Presto FAQ
但是在实际使用过程中，如果文件不是很大，或者文件不小但是表的列很多的情况，节省扫描量的效果会不起作用，因为ORC_TINY_STRIPE_THRESHOLD参数会控制Presto只扫描单个列还是整个文件。示例代码如下。dataSizeSessionProperty(ORC_TINY_...
物化视图自动查询改写
AnalyticDB PostgreSQL版 提供了普通物化视图和实时物化视图自动查询改写功能，可以大幅提升JOIN、聚合函数、子查询、CTE以及高并发场景下SQL的执行性能。最佳实践：使用实时物化视图加速带可变参数的查询 功能介绍 早期使用普通物化视图和...
删除数据库
说明 对于RDS SQL Server 2012及更高版本的 高可用 系列实例，如果您执行以上 drop 命令报错，请使用以下存储过程。该存储过程会删除指定的数据库，移除关联的镜像，并且KILL在该数据库上的连接。EXEC sp_rds_drop_database 'database name...
- 产品推荐
- 这些文档可能帮助您