质量评估
质量评估通过用户自定义质量检查计划，根据用户设置的数据质量规则执行面向不同计算资源的质量检查任务，通过数据质量监控报告展现系统整体数据质量概览及多维度细分数据的质量情况。质量评估通过完整性、准确性、一致性、唯一性、时效性、...
产品概述
什么是E-MapReduce 开源大数据开发平台E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理...
产品简介
开源大数据开发平台E-MapReduce（简称EMR）是运行在阿里云平台上的一种大数据处理系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理数据。EMR还可以与阿里云...
名词解释
COMPACTION 〇 〇 Compaction（数据压缩）是一种数据管理技术，用于优化和减小数据库文件的大小，从而提高数据库性能。不同的存储引擎实现中存在不同的Compaction策略。INDEX 〇 ✖️ Index（索引）是一种数据结构，用于加快数据库中数据的...
逻辑结构说明
业务对象 人们观察事物的角度，是指一种视角，是确定事物的多方位、多角度、多层次的条件和概念。业务活动 业务过程即企业的业务活动事件，通常为不可拆分的事件，是一个或者多个业务对象在某个时间或时间段，为了达成某种目的所进行的活动...
概述
数据备份物理空间大小如下图所示：说明 PolarDB 集群 数据备份物理空间大小（上图中①所示）：指数据备份的收费对象，物理空间大小是指所有数据备份（快照）独占的物理空间大小之和，PolarDB集群的数据与多个数据备份（快照）会复用相同的...
模式
由于未经限定的名称在查询中以及在本数据库内部的广泛使用，在 search_path 中增加一个方案实际上是信任所有在该方案中具有 CREATE 特权的用户。在你运行一个普通查询时，恶意用户可以在你的搜索路径中的以方案中创建能够夺取控制权并且...
概述
数据备份物理空间大小如下图所示：说明 PolarDB 集群 数据备份物理空间大小（上图中①所示）：指数据备份的收费对象，物理空间大小是指所有数据备份（快照）独占的物理空间大小之和，PolarDB集群的数据与多个数据备份（快照）会复用相同的...
核心概念
维度 人们观察事物的角度，是指一种视角，是确定事物的多方位、多角度、多层次的条件和概念。从业务层，通常维度是指业务对象的属性，业务对象是业务的参与者。例如零售业务中的买家，商品、类目和地域等可以具象化的业务对象，买家的性别...
什么是RDS MySQL
本文简单介绍RDS MySQL及相关概念。声明 本文档中描述的部分产品特性或者服务可能不在您的购买或...RDS XX（XX 为 MySQL、SQL Server、PostgreSQL或MariaDB）指代某一数据库类型的RDS，如RDS MySQL是指在RDS上开通的数据库引擎为MySQL的实例。
如何基于LSM-tree架构实现一写多读
从上述的X-Engine架构图可以看到，X-Engine的数据实际上包括了内存和磁盘两部分，不同于InnoDB引擎内存中page是磁盘上page的缓存，X-Engine中内存数据与磁盘数据完全异构，一份 快照 需要对应的是内存以及磁盘数据。X-Engine采用追加写方式...
列存索引中TopK算子的实现
背景 业务系统中普遍存在这样一种场景：根据给定条件筛选一批记录，这些记录按用户指定的条件排序，以分页的方式展示。例如，筛选出某个商家在售的商品，按商品销量排序，以分页的方式展示。上述场景在数据库中，通常以 ORDER BY column ...
什么是RDS PostgreSQL
本文简单介绍RDS PostgreSQL及相关概念。声明 本文档中描述的部分产品特性或者服务可能不在您的...RDS XX（XX 为 MySQL、SQL Server、PostgreSQL或MariaDB）指代某一数据库类型的RDS，如RDS MySQL是指在RDS上开通的数据库引擎为MySQL的实例。
设置连接池
如果您的应用连接创建频繁（例如短连接场景）或者连接数量很大（大于MySQL数据库的连接数限制），您可以参考本文使用合适的RDS MySQL数据库代理连接池，降低应用与数据库建立连接的频率来减少MySQL数据库主线程的开销，减少数据库上的总...
恢复MariaDB数据
如果拥有RDS MariaDB实例的备份数据，您可以通过按备份集恢复的方式将备份数据恢复到一个新的实例上，可用于误操作后恢复以及分析历史数据等场景。功能介绍 RDS MariaDB支持按备份集恢复数据。恢复数据的过程如下：恢复原实例备份数据到...
恢复PostgreSQL数据
如果拥有RDS PostgreSQL实例的备份数据，您可以将备份数据恢复到一个新的实例上，可用于误操作后恢复以及分析历史数据等场景。功能介绍 RDS PostgreSQL支持按备份集或时间点恢复数据。恢复数据的过程如下：恢复原实例备份数据到一个新实例...
计费方式2：按量付费
按量付费是指在新建数据库集群时您无需预先支付费用，而是等实际使用数据库的计算和存储的服务时，再扣除费用。如果不购买固定规格计算包和存储包，集群的计算节点和存储空间（根据实际数据量）均按小时计费，并从账户中按小时扣除。适用...
RDS SQL Server空间不足问题
数据压缩会增加CPU开销，因此需要根据实际业务情况进行评估，建议只在大表上启用数据压缩。整理索引碎片 索引碎片率较高会导致实际占用的数据存储空间过大，因此对索引执行碎片整理可以降低数据空间大小。您可以在控制台的 自治服务>性能...
术语表
M MapReduce MapReduce是处理数据的一种编程模型，通常用于大规模数据集的并行运算。您可以使用MapReduce提供的接口（Java API）编写MapReduce程序，来处理MaxCompute中的数据。编程思想是将数据的处理方式分为Map（映射）和Reduce（规约）...
常见问题
此处的任务并行度，实际上是指单个Routine Load拆分成的子任务个数。实际的任务并行度参照如下的计算公式。concurrent_num=Min(Min(partition_num,Min(desired_concurrent_num,alive_be_num)),Config.max_routine_load_task_concurrent_num...
混合负载HTAP
说明 分析型查询指的是涉及数据量较大、计算比较复杂的查询，例如对一定时间区间内的数据进行聚合，相比于业务中常见的简单查询，这类查询往往要执行数秒甚至数分钟，需要消耗较多的计算资源。为了提高复杂分析型查询的速度，PolarDB-X 将...
如何将一棵LSM-Tree塞进NVM
X-Engine是一种基于LSM-tree架构的OLTP数据库存储引擎。我们以X-Engine为基础结合非易失内存的优势与限制，重新设计并实现了存储引擎的主要内存数据结构、事务处理和持久化内存分配器等基础组件，最终实现了不需要记录预写式日志的高性能...
验证分析型查询请求能力
概念介绍 OLAP（Online Analytical Processing）是一种面向分析的、多维数据分析技术。它适用于处理大规模、多维的数据集，能够帮助用户进行数据分析、数据挖掘、业务决策等。并行执行 OceanBase 数据库的并行执行指的是在分布式架构下进行...
创建集群
通过阿里云E-MapReduce（简称EMR），您可以轻松构建和运行Hadoop、Spark、Hive、Presto等开源大数据框架，以进行大规模数据处理和分析等操作。本文为您介绍在EMR on ECS上创建集群的操作步骤和相关配置，帮助您快速搭建和管理大数据集群。...
列存索引如何实现高效数据过滤
这些优点使Bloom filter成为处理大规模数据集中的元素存在性问题的一种非常有用的数据结构。Bloom filter与minmax也可以结合使用，IMCI会根据两者的综合结果来判断是否要跳过某个数据块。Nullable列优化 由于Null值处理逻辑比较特殊，数据...
实时同步任务延迟解决方案
由于在Flush间隔内待写入MaxCompute表的数据实际是在实时同步任务的一组队列中保存，每个队列会缓存一个MaxCompute的写入数据，队列的默认最大个数是5个，如果对应于MaxCompute表分区列的源端列在配置的Flush间隔内可枚举值个数超过了缓存...
调度依赖配置指引
DataWorks的调度依赖是指周期调度节点间的上下游依赖关系。通过节点的依赖关系有序调度运行上下游节点，即当上游节点运行成功后，下游节点才会启动运行，保障适时的产出有效业务数据。本文为您介绍调度依赖的配置指引，避免因调度依赖配置...
术语
硬件压缩盘（Smart-SSD）Smart-SSD是存储物理硬盘层的一种高压缩技术，SSD硬盘内嵌专用FPGA/ASIC压缩计算芯片，在数据读写访问过程中由内嵌专用芯片实时对数据进行解压缩、压缩，大幅降低了数据存储成本。同时，面向 PolarDB 专用场景进行...
通过RAM角色授权模式配置数据源
数据同步时，一个任务只能使用一种资源组。您需要测试每种资源组的连通性，以保证同步任务使用的数据集成资源组能够与数据源连通，否则将无法正常执行数据同步任务。如果您需要同时测试多种资源组，请选中相应资源组后，单击 批量测试连通...
创建 MySQL 租户
创建 tutorial_mysql01 租户，在弹出框中填写租户信息：配置参数 说明 租户名称 tutorial_mysql01 租户模式 选择 MySQL 模式 字符集 建议默认的 uft8mb4_general_ci，utf8mb4_general_ci 是一种 MySQL 数据库的字符编码集，其中 utf8mb4 ...
术语
可用区（Zone）可用区是指在某一地域内，具有独立电力和网络的物理区域。同一可用区内实例之间的网络延时更小。集群（Cluster）PolarDB 采用多节点集群的架构，集群中有一个主节点和多个只读节点。单个 PolarDB 集群支持跨可用区，但不能跨...
术语
可用区（Zone）可用区是指在某一地域内，具有独立电力和网络的物理区域。同一可用区内实例之间的网络延时更小。集群（Cluster）PolarDB 采用多节点集群的架构，集群中有一个主节点和多个只读节点。单个 PolarDB 集群支持跨可用区，但不能跨...
克隆集群
冷数据指访问频次较低的数据，存储在OSS上，性价比高。弹性IO资源 创建集群时，AnalyticDB MySQL版 将自动按照您购买的计算资源配备免费的存储IO资源。若需要单独扩容存储资源，选择需要增加的 弹性IO资源 数量即可。弹性IO资源规格 固定为...
如何对JSON类型进行高效分析
列式JSON 半结构化数据是介于结构化数据和非结构化数据之间的一种数据形式，具有部分结构化的特点，但不像结构化数据那样具有明确的数据模式。半结构化数据可以通过标签、标记、元数据等方式进行描述和组织，但其结构与组织方式也可以随着...
下载备份
把备份上传到您的OSS RDS备份存放于备份空间，不占用存储空间，如需在您的OSS上存放备份，您可以选择以下其中一种方式：符合条件的云盘实例可参见本文创建高级下载任务并在任务配置过程中，选择直接将下载的数据写入您的OSS中；其余云盘...
克隆集群
数据库代理类型 PolarDB 支持 企业通用版 和 企业独享版 两种数据库代理类型。企业通用版：配套集群子系列的 通用规格。它可以共享CPU物理资源，可根据业务负载，提供智能秒级资源弹性扩展能力。企业独享版：配套集群子系列的 独享规格。它...
专业术语
本文档主要介绍了时序数据库 InfluxDB®版的常见术语。aggregation（聚合）InfluxQL函数，能够返回一组数据点的聚合结果。想要获得现有的和即将支持的聚合函数的完整列表，请查看文档 InfluxQL函数。相关术语：function，selector，...
全量恢复方式1：从备份集恢复
全量恢复是指将 PolarDB 全量历史数据恢复至一个新的集群，验证新集群数据后，您可以再将恢复后的数据迁移至原集群。全量恢复支持从备份集恢复和恢复到过去时间点两种恢复方式。本文介绍如何从备份集恢复全量历史数据。注意事项 恢复后的...
全量恢复方式2：恢复到过去时间点
全量恢复是指将 PolarDB 全量历史数据恢复至一个新的集群，验证新集群数据后，您可以再将恢复后的数据迁移至原集群。全量恢复支持从备份集恢复和恢复到过去时间点两种恢复方式。本文介绍如何将全量历史数据恢复到过去时间点。注意事项 恢复...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
- 产品推荐
- 这些文档可能帮助您