应用场景
实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...
数据质量教程概述
完整性 完整性是指数据的记录和信息是否完整、不缺失。数据的缺失包括数据记录的缺失（表行数异常）和记录中某字段信息的缺失（字段出现空值）。在本教程中，您需要重点关注数据的生产环节（MaxCompute外部表引用的表格存储数据）和加工...
数据质量教程概述
完整性 完整性是指数据的记录和信息是否完整、不缺失。数据的缺失包括数据记录的缺失（表行数异常）和记录中某字段信息的缺失（字段出现空值）。在本教程中，您需要重点关注数据的生产环节（MaxCompute外部表引用的表格存储数据）和加工...
新功能发布记录
2021-12-21 模型查看器 v6.0 DataV发布全新V6.0版本 发布五大新功能 适用用户：数据集及BI映射：企业版及以上用户 区块管理：专业版及以上用户 设计资产：企业版及以上用户 空间构建平台：需线下咨询购买 数据映射系统；BI分析功能帮助用户...
Oracle数据源
支持的版本 离线读写 版本 离线读（Oracle Reader）离线写（Oracle Writer）Oracle 11.2 or 11gR2 支持 支持 Oracle 12.1 or 12cR1 支持 支持 Oracle 12.2 or 12cR2 支持（新版本特性不支持）支持（新版本特性不支持）Oracle 18.3 支持（新...
文档修订记录
开放平台概览 2023年4月更新记录 时间 特性 类别 描述 产品文档 2023.4.23 新增功能 数据集成 数据集成的MaxCompute同步任务默认使用公共传输资源上传、下载数据至MaxCompute，为满足您业务增长对传输资源的更高要求，MaxCompute推出了独享...
RDS术语
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
质量评估
准确性：数据准确性是指数据准确的反映其所建模的“真实世界”的实体。一致性：数据一致性是指确保两个数据集之间或一个数据集内部不同字段间数值或信息的一致。唯一性：数据唯一性是指在一个数据集中，没有重复的记录或信息。时效性：数据...
RDS术语
AliPG 阿里云支持一系列兼容PostgreSQL的云数据库服务产品，这些云数据库服务采用统一的数据库内核（简称AliPG），AliPG兼容PostgreSQL开源数据库，于2015年正式商用，支持PostgreSQL主流大版本，已稳定运行多年，支撑了大量阿里巴巴集团...
功能简介
准确性：数据准确性是指数据准确的反映其所建模的“真实世界”的实体。一致性：数据一致性是指确保两个数据集之间或一个数据集内部不同字段间数值或信息的一致。唯一性：数据唯一性是指在一个数据集中，没有重复的记录或信息。时效性：数据...
功能简介
准确性：数据准确性是指数据准确的反映其所建模的“真实世界”的实体。一致性：数据一致性是指确保两个数据集之间或一个数据集内部不同字段间数值或信息的一致。唯一性：数据唯一性是指在一个数据集中，没有重复的记录或信息。时效性：数据...
概述
PolarDB 是阿里巴巴自研的新一代 云原生数据库，在存储计算分离架构下，利用了软硬件结合的优势，为用户提供具备极致弹性、高性能、海量存储、安全可靠的数据库服务。100%兼容MySQL 5.6/5.7/8.0，PostgreSQL 11，PostgreSQL 14，高度兼容...
高维向量相似度搜索（pgvector）
相关概念及实现原理 嵌入 嵌入（embedding）是指将高维数据映射为低维表示的过程。在机器学习和自然语言处理中，嵌入通常用于将离散的符号或对象表示为连续的向量空间中的点。在自然语言处理中，词嵌入（word embedding）是一种常见的技术...
概述
PolarDB 是阿里巴巴自研的新一代 云原生数据库，在存储计算分离架构下，利用了软硬件结合的优势，为用户提供具备极致弹性、高性能、海量存储、安全可靠的数据库服务。100%兼容MySQL 5.6/5.7/8.0，PostgreSQL 11，高度兼容Oracle。PolarDB ...
技术发展趋势
生产处理实时化 从数据的3V特性（体积，速度和变化）来看，大数据强调数据量，PB级以上，是静态数据；而Fast Data在数据量的基础上，意味着速度和变化，客户可以更加实时化、更加快速地进行数据处理。IDC在新发布的一份白皮书中表示，随着...
版本发布说明
发布日期：2023-11-22 大版本：V5.4.18 小版本：17004745 类别 说明 新增&优化 优化AUTO模式数据库中表数据量较大时创建表的效率。新增plan_cache视图返回默认库下的执行计划。优化AUTO模式数据库中并发建表的效率。缺陷修复 修复 alter ...
管理健康报告
Tablet数据大小变异系数 是指同一个分区内的tablet数据大小变异系数，代表了一个表的数据的tablet分布均衡程度。计算方式为：同一个分区内tablet数据大小的标准差除以平均值。一般来说，变异系数越大，这个分区越有可能存在数据倾斜的情况...
RDS SQL Server空间不足问题
数据空间的回收通常有如下几种方式：归档数据 删除数据库中不常用的数据（例如早期的历史数据），或者根据需要迁移到其他数据库实例中，或者以其他形式归档保存，通过直接减少数据量来降低已使用数据空间大小。这种方式是控制数据空间增长...
实时同步常见问题
这是Postgres本身数据库的特性，如果接受不了延迟，您可以停止任务，并重新启动任务做一次全增量数据同步。报错信息与解决方案 Kafka实时同步报错：Startup mode for the consumer set to timestampOffset,but no begin timestamp was ...
时空引擎版本发布记录
4.8 新特性 增强 ST_Union 函数，支持按内存使用量分批次执行，避免大数据量造成OOM。新增 ST_SetValue 函数，支持指定像素位置设置像素值。栅格数据支持对HDFS文件系统支持。增强 ST_CreateRast 函数，支持基于HDFS栅格数据创建。增强 ST_...
2021年
无 时空数据库（V4.1）类别 名称 描述 相关文档 优化 ST_ImportFrom函数 增强ST_ImportFrom函数，增加OSS文件映射为内存文件功能，提升数据导入速度。ST_ImportFrom、ganos.raster.memory_oss_file_max_size Gist/TrajGist索引 GisT索引和...
社交行业
在社交领域之中，有很多数据的存储，使用数据的形态也多种多态。目前主流的社交都带推荐模块会把新闻/消息/短文推动给适合的用户。本文简述社交类的基本架构。社交领域的基本架构及流程流 以上是社交领域的基本架构，分为以下基本部分：...
常见问题
4.大数据专家服务范围是覆盖阿里云所有大数据产品技术栈吗？答：服务范围仅包含阿里云MaxCompute｜DataWorks｜Hologres｜DataHub｜PAI｜Flink｜EMR｜ES｜ABM产品技术专家服务。阿里云其它产品、非阿里云产品、客户软件问题、基础网络问题、...
立即备份
逻辑备份：逻辑备份是指数据库对象级备份，支持表、库两种维度的备份。库级备份时，针对不同模式的数据库，具体支持的数据库对象如下：MySQL 模式：表、视图、触发器、序列、同义词、类型、包、函数、存储过程。Oracle 模式：表、视图、...
DescribeDBInstanceDataSkew-查看数据倾斜的相关信息
接口说明 数据倾斜会影响数据库的运行速度，AnalyticDB PostgreSQL 版实例提供了 DescribeDBInstanceDataSkew 接口帮助您查看实例的数据倾斜情况，便于您及时消除数据倾斜。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名...
时序引擎版本说明
3.4.19 发布日期 类型 说明 2022年07月29日 新特性 避免数据乱序，支持配置丢弃写入数据中过去或者将来的数据。创建时序数据库时数据库 partition_interval 属性的默认为开启30天时间分区。支持异常检测算法。支持预降采样功能。支持时间线...
UpsertCollectionData-上传向量数据
上传向量数据到指定的向量集中。接口说明 注意 SDK 于 2023-11-8 日升级，从最大 512KB 数据请求量升级到 10MB。请使用最新版 SDK 或不低于此版本：Java：1.2.1 Go：v3.3.1 Python：3.3.1 调试 您可以在OpenAPI Explorer中直接运行该接口，...
版本说明
V2.6.12 2021年4月9日 设计优化 添加数据写入的审计日志（由于会对写入性能有影响，只接受提交工单开启，且仅支持后台运维查询）V2.6.11 2021年4月2日 新特性 api/mquery 和 api/query/mlast 增加 roffset 与 rlimit 查询接口,其语义与原有...
产品优势
适合云上自建数据库使用，提供企业级存储特性。数据库基于DBFS构建可享受到的优势：对比项 DBFS 云盘 共享云盘 NAS 高性能 支持原子写、用户态、数据库关键IO加速等。为数据库基于云端存储构建的最佳解决方案，性能高于其单纯基于云盘构建...
新建租户
OceanBase 数据库 V3.x 和 V4.x 版本的集群实例支持创建 1C4GB 的租户。所有租户 CPU 与内存大小之和不可超过所属集群实例规格；V4.x 版本所有租户的日志盘大小之和不可超过所属集群的日志盘容量。租户的总可使用资源=单节点分配资源量*...
快照备份
RDS SQL Server支持快照备份功能，相对于常规的物理备份方式，快照备份可大幅缩短数据库的恢复时间，同时支持更大的备份数据量。功能介绍 RDS SQL Server提供了快照备份和物理备份两种备份方式。物理备份恢复速率受限于20 MB/s，最大仅支持...
基本概念
单可用区是指云数据库MongoDB实例副本集中的三个节点处于相同的可用区。如果ECS和MongoDB部署在相同的可用区，网络延迟更小。实例 云数据库MongoDB实例，或简称实例，是用户购买云数据库MongoDB服务的基本单位。实例是阿里云数据库MongoDB...
RDS术语
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
SQL洞察和审计
当您的数据库实例支持企业版 V3时，您可以将DAS企业版 V1或V2的数据迁移至企业版 V3，以获得更加优惠的费用，详情请参见 DAS企业版间数据如何迁移？警告 迁移操作无法终止和回退，请仔细阅读迁移说明。常见问题 Q：SQL洞察 的 全量请求统计...
基本概念
DTS 数据传输服务（Data Transmission Service，简称DTS）支持关系型数据库（RDBMS）、非关系型数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，帮助您构建安全、可扩展、高可用的...
RDS术语
A AliPG 阿里云支持一系列兼容PostgreSQL的云数据库服务产品，这些云数据库服务采用统一的数据库内核（简称AliPG），AliPG兼容PostgreSQL开源数据库，于2015年正式商用，支持PostgreSQL主流大版本，已稳定运行多年，支撑了大量阿里巴巴集团...
源为PolarDB-X的功能规范和约束说明
概览 业务设计规范 数据库架构规范 运维变更规范 数据质量风险声明 业务开发的数据质量工作 业务设计规范 表都需要有主键，否则可能会造成数据不一致（造成目标库有重复数据）。因为 PolarDB分布式版 的GSI全局二级索引（Global Secondary ...
源为PolarDB-X的功能规范和约束说明
概览 业务设计规范 数据库架构规范 运维变更规范 数据质量风险声明 业务开发的数据质量工作 业务设计规范 表都需要有主键，否则可能会造成数据不一致（造成目标库有重复数据）。因为 PolarDB分布式版 的GSI全局二级索引（Global Secondary ...
分区表简介
本文详细介绍了 PolarDB PostgreSQL版 分区表功能的优势和特性。概述 在 PolarDB PostgreSQL版 数据库中，分区表(Partitioned Table)是将一个表或索引物理地分解为多个更小、更便于管理的部分，这个部分称为分区(Partition)。每个分区都是...
DB2数据源
DB2数据源作为数据中枢，为您提供读取和写入DB2数据库的双向通道，能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DB2数据同步的能力支持情况。支持的版本 DB2 Reader和DB2 Writer使用的DB2驱动版本为 IBM Data Server Driver ...
- 产品推荐
- 这些文档可能帮助您