TairVector性能白皮书
以下为不同数据集下，TairVector HNSW索引的内存占用量，可以得出：相比较FLOAT32，FLOAT16数据类型可以显著减少内存占用量，最大可以减少40%以上。开启AUTO_GC功能后，内存占用量有小幅上升，但是幅度不大。说明 您在使用过程中可以根据...
创建Kudu数据源
数据源描述 对数据源的简单描述。不得超过128个字符。数据源配置 选择需要配置的数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可...
如何支持超大事务
执行SQL语句数量 2048 每条语句携带的数据量 约256 KB～8 MB 数据修改总量 512 MB～16 GB 数据修改条数 2048 测试过程 测试中，每一条SQL语句形如：INSERT INTO `tb` VALUES(id,c)数据表中 c 列的数据类型为longblob，c 的大小从256 KB到8 ...
新增消费组
注意事项 若您需要消费的单行数据超过16MB，则可能会导致消费客户端内存OOM（Out of Memory）。一个数据订阅实例最多可以创建20个消费组，通过创建多个消费组可以实现数据的重复消费。一个消费组只能创建一个消费者（consumer），并通过该...
概述
查询数据时，若查询结果中包含需要脱敏的列，且单行数据超过16 MB时，执行该查询命令的连接会断开。例如，若已有一张包含了 name 和 description 列的表 person，其中 name 列需要脱敏，且 description 列中的数据超过了16 MB。当执行 ...
自定义RDBMS数据库及同步数据
地域 IP白名单 华东2（上海）100.104.228.128/26、100.104.115.192/26 华南1（深圳）100.104.48.128/26 华北2（北京）100.104.238.64/26 华东2（上海）、华南1（深圳）、华北2（北京）100.104.0.0/16 创建同步数据的源数据表和目标数据表。...
自定义RDBMS数据库及同步数据
地域 IP白名单 华东2（上海）100.104.228.128/26、100.104.115.192/26 华南1（深圳）100.104.48.128/26 华北2（北京）100.104.238.64/26 华东2（上海）、华南1（深圳）、华北2（北京）100.104.0.0/16 创建同步数据的源数据表和目标数据表。...
文档修订记录
创建数仓分层 配置及使用数仓分层检查器 2023.3.16 新增功能 数据建模 DataWorks智能数据建模联合具备丰富行业建模经验的数据架构师，总结阿里云百万用户最全面的业务场景，结合阿里巴巴技术创新能力，提供零售电子商务、金融、制造等多个...
添加白名单
保障资源组与数据源之间网络连通后，您还需保障资源组与数据源之间不会因为白名单的限制而无法进行数据访问，例如，部分数据源设置白名单后会不允许白名单外的IP访问，您需要将资源组的IP添加至数据源的白名单中。本文为您介绍白名单相关...
订阅方案概览
数据订阅功能可以帮助您获取数据库的实时增量数据，您可以根据自身业务需求自由消费增量数据，并写入目标端，实现各类业务场景，例如缓存更新、业务异步解耦、异构数据源数据实时同步及含复杂ETL的多种业务场景。数据订阅方案 说明 是否...
订阅方案概览
数据订阅功能可以帮助您获取数据库的实时增量数据，您可以根据自身业务需求自由消费增量数据，并写入目标端，实现各类业务场景，例如缓存更新、业务异步解耦、异构数据源数据实时同步及含复杂ETL的多种业务场景。数据订阅方案 说明 是否...
计费方式
350 Mbps数据库流量峰值 6亿条在线SQL语句存储 默认1.5 TB存储空间 实例数与存储支持弹性扩容 12,000元/月 16,000元/月 企业版25实例 支持审计的数据库个数：25个 吞吐量峰值：35,000条SQL/秒 650 Mbps数据库流量峰值 8亿条在线SQL语句存储...
支持的数据库
数据同步 数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、查询与报表分流、云BI及实时数据仓库等多种业务场景。同步支持的数据库、版本和同步类型以及配置文档，请参见...
数据归档
参数名称 默认值 说明 innodb_oss_ddl_threads 16 该参数为归档数据转换的并发线程数。在达到带宽上限前，增大该参数能够提高归档数据转换的速度，但同时也会有更大的内存消耗和带宽消耗。innodb_oss_files_limit 10240 该参数为内存中缓存...
新功能发布记录
OceanBase 数据库之间的数据迁移 支持 TiDB 数据库至 OceanBase 数据库 MySQL 租户的结构迁移、全量迁移、增量同步、全量校验和反向增量 迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户 支持 PolarDB-X 1.0 数据库至 OceanBase ...
管理内置数据集
加载内置数据集耗时约6~8分钟，加载数据集期间会占用user_default资源组中的计算预留资源，确保user_default资源组中至少预留16 ACU的计算资源用于数据初始化。请确保集群具有至少24 ACU的存储预留资源，否则加载内置数据集会失败。集群中...
独享数据集成资源组
性能指标 规格 离线同步最大并发线程数 4c8g 8 8c16g 16 12c24g 24 16c32g 32 24c48g 48 规格 单任务建议需要的资源规格 MySQL来源实时同步数据库数1 4c8g MySQL来源实时同步数据库数[2-5]8c16g MySQL来源实时同步数据库数6以上 12c24g ...
概述
本教程将以集群实例为例，带您体验云数据库 OceanBase 的低存储成本和实时分析能力。更多特性，详情参见 OceanBase 数据库概述。特性介绍 低存储成本 数据压缩是降低海量数据存储空间的关键手段。OceanBase 通过 LSM-Tree 的存储架构和自...
Oracle数据源
使用限制 当前数据集成同步数据时，仅支持UTF8、AL32UTF8、AL16UTF16及ZHS16GBK编码格式。Oracle单实例，当天实时同步最大支持同步500G增量数据。DataWorks的数据集成实时同步Oracle数据是基于Oracle Logminer日志分析工具实现的，Oracle仅...
数据归档功能介绍及开启方法
5.4.14-5.4.16之间版本创建的冷数据归档表无法执行DDL。绑定归档表后，原TTL表的部分DDL操作会受到限制，可以先通过 unarchive table {source_table_name} 命令进行解绑（解绑后不可再次绑定同一张归档表），DDL操作执行完成后重新绑定一张...
迁移方案概览
数据迁移功能帮助您实现同构或异构数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景。本文将介绍数据迁移功能支持的数据库、版本和迁移类型，以及具体的配置文档。说明 数据迁移在某些场景...
同步方案概览
数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。本文将介绍数据同步功能支持的数据库、同步类型和同步拓扑。说明 数据同步在某些...
数据变更最佳实践
建议如下：通过每条INSERT或者REPLACE语句写入的数据行数大于1000行，但写入的总数据量不宜太大，不超过16MB。通过批量打包方式写入数据时，单个批次的写入延迟相对会高一些。写入报错时，需要做重试确保数据被写入，重试导致的数据重复...
规格及选型
8C32G ESSD云盘 PL1 16C64G ESSD云盘 PL2 表 2.Serverless 实例系列 调度模式 节点规格/计算资源阈值（ACU）存储磁盘类型 适配场景 高可用 手动调度 4C16G 共享存储 新产品形态，支持秒级变配、按需存储及数据共享。适合如下场景：业务负载...
功能特性
数据库文件存储 功能集 功能 功能描述 参考文档 DBFS特性 原子写 支持DIRECT IO的原子写，需按4K，8K，16K对齐-共享读写 一份数据可共享式多点挂载并进行读写，读写可线性扩展-存储加密 通过对数据库文件存储实施加密，可以确保数据库文件...
增量数据同步
通过选择已注册的数据源端数据和目标端，实现增量任务自动建表的方式创建离线同步周期任务，本文介绍如何创建MySQL to MaxCompute离线增量数据同步周期调度的任务。前提条件 已新建工作组“信息中心（xxzx）”，具体操作，请参见 新建工作...
功能发布记录 2022年之前
您可以购买该功能模块，将数据模型设计管控、引标落标等能力融入DataWorks规范化开发流程，助力您实现数据资产价值化输出，在数据全生命周期上夯实数据基础，为数据价值化提供有力支撑。2021.02.20 全部地域。DATABLAU数据建模计费标准 ...
产品计费
本文介绍 数据库自治服务DAS 不同版本的费用、到期、欠费以及续费说明。计费详情 重要 实际价格以产品购买页为准。企业版 V3 说明 支持企业版 V1和V2免费迁移至企业版 V3，迁移完成前按照当前版本计费，迁移完成后按照迁移目标版本计费。...
导入与导出
数据同步过程中，可以修改源表中的字段类型，目前仅支持整型数据类型之间、浮点数据类型之间的列类型更改，并且只能将取值范围小的数据类型更改为取值范围大的数据类型，或者将单精度数据类型更改为双精度数据类型。整型数据类型：支持...
实时消费Kafka数据
当您需要将Kafka数据写入 云原生数据仓库AnalyticDB PostgreSQL版，且不希望使用其他数据集成工具时，可以通过实时数据消费功能直接消费Kafka数据，减少实时处理组件依赖，提升写入吞吐。Apache Kafka是一个容错、低延迟、分布式的发布-...
03创建数据元
通过配置数据元的类型、长度、质量校验函数和引用数据字典，为模型标准化设计及数据治理过程中的质量监控提供规则依据，本章节为您介绍如何新建数据元。前提条件 已新建工作组“信息中心(xxzx)”，具体操作，请参见 新建工作组。已在工作组...
概述
AnalyticDB PostgreSQL版 向量分析可以通过AI算法提取非结构化数据的特征，并利用特征向量作为非结构化数据的唯一标识，帮您快速且低成本地实现对非结构化数据检索和对结构化数据关联分析。向量数据库简介 在现实世界中，绝大多数的数据都...
API概览
本产品（数据库自治服务/2020-01-16）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，...
如何处理Tair集群数据倾斜
当用户写入或更新数据时，客户端会通过CRC算法计算出Key所属的Slot，具体公式为 Slot=CRC16(key)%16384，并将数据写入Slot所属的数据分片节点。通常情况下，各数据分片节点的Key数量是均匀分布的，同时内存使用率、CPU使用率等性能指标也是...
LTS（原BDS）服务介绍
待补充，目前可联系值班咨询 Lindorm 数据导出 ODPS（MaxCompute）重要 该功能自2023年6月16日下线，2023年6月16日后购买的LTS 不再支持此功能，2023年6月16日前购买的LTS仍可正常使用此功能。支持历史数据和增量数据。全量导出MaxCompute...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
什么是数据管理DMS
DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，致力于帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。视频介绍 功能特性 详情信息，请参见 功能概览。为什么选择数据管理DMS 全域数据...
连接集群
背景信息 DMS是阿里云提供的图形化数据管理工具，可用于管理关系型数据库和NoSQL数据库，支持数据管理、SQL操作、数据方案（数据导入/导出、数据库克隆等）、性能与优化、安全审计等功能。您可以使用DMS实现易用的数据库管理，在线进行 云...
背景信息以及准备工作
单库最多可扩展到16个节点，适用于企业多样化的数据库应用场景。Data Lake Analytics（DLA）作为云上数据处理的枢纽，您可以在DLA中创建PolarDB Schema（PolarDB映射数据库），然后通过MySQL客户端或者MySQL命令行工具连接DLA，使用标准SQL...
购买流程
数据传输服务DTS（Data Transmission Service）支持先配置再购买和先购买再配置两种创建任务方式。若您需要随用随配，建议您选择先配置再购买的方式；若您需要先锁定财务预算而不需要配置任务，建议您选择先购买再配置的方式。本文介绍数据...
- 产品推荐
- 这些文档可能帮助您