字段安全级别
为了根据数据的敏感程度对数据进行不同策略的脱敏和管理，数据管理DMS将敏感数据分为3个安全级别。根据数据的敏感程度，数据分为3个安全级别。说明 字段安全级别只针对阿里云 DMS 或通过 DMS 安全访问代理生效，对其他第三方工具不生效。低...
数据合并
背景信息 OceanBase 数据库的存储引擎基于 LSM-Tree 架构，将数据分为静态基线数据（放在 SSTable 中）和动态增量数据（放在 MemTable 中）两部分，其中 SSTable 是只读的，一旦生成就不再被修改，存储于磁盘；MemTable 支持读写，存储于...
发起合并
背景信息 OceanBase 数据库的存储引擎基于 LSM-Tree 架构，将数据分为静态基线数据（放在 SSTable 中）和动态增量数据（放在 MemTable 中）两部分，其中 SSTable 是只读的，一旦生成就不再被修改，存储于磁盘；MemTable 支持读写，存储于...
敏感数据保护概览
根据数据的敏感程度，将数据分为3个安全级别：低敏感：对应DMS的原分类为内部。安全协同管控模式的数据默认为低敏感。中敏感：对应DMS的原分类为敏感。高敏感：对应DMS的原分类为机密。说明 设置安全级别后，对使用数据的影响：SQL Console...
数据导入方式介绍
使用方法 通过DataWorks导入数据分为3个步骤。配置源端数据源。支持的数据源包括：RDS MySQL、Oracle、SQL Server、OSS、MaxCompute及HDFS。通过DataWorks导入数据 Oracle数据导入 通过DataWorks导入数据 通过DataWorks导入数据 通过...
二进制数据类型
名称 存储大小 说明 BINARY 二进制字符串的长度。定长二进制字符串，取值范围：1~8300。BLOB 实际二进制字符串加1字节（如果二进制字符串小于127字节）或4字节（如果二进制字符串大于等于127字节）。可变长度的二进制字符串。VARBINARY ...
SQL其他常见问题
但您需要注意，MaxCompute支持的DECIMAL类型数据的最大长度为38位，但实际业务处理过程中如果数据存储为最大长度，在数据处理过程中很容易出现数据溢出问题，建议调小数据长度。新创建的MaxCompute项目不支持数据类型自动隐式转换，如何...
2023年
ListJobInfos-查看作业列表 2023-12-04 新增SKEWJOIN HINT 新说明 当两张表Join存在热点，导致出现长尾问题时，您可以通过取出热点key，将数据分为热点数据和非热点数据两部分处理，最后合并的方式，提高Join效率。SkewJoin Hint可以通过...
字段标准
字段标准是对含义相同但字段名称不同的数据进行统一规范管理的数据准则，字段标准可定义字段的取值范围、度量单位等内容。当字段标准发生变化时可快速定位或变更对应的表，极大地提升了应用效率和准确率。本文将为您介绍字段标准的创建方法...
DBMS_LOB
112233AABBCCDDEE TRIM 截断LOB数据中从第一位置开始指定长度的部分数据的过程。语法 DBMS_LOB.TRIM(lob_loc IN OUT BYTEA,newlen IN INTEGER);DBMS_LOB.TRIM(lob_loc IN OUT TEXT,newlen IN INTEGER);参数说明 参数 说明 lob_loc 目标LOB...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
项目启动成功后，PolarDB-X 1.0 数据库至 OceanBase 数据库 MySQL 租户的数据迁移项目会自动删除，数据传输会保存 PolarDB-X 1.0 数据库下挂载的数据库至 OceanBase 数据库 MySQL 租户的数据迁移项目，并自动创建相应的数据源。您可以在弹...
备份恢复计费说明
备份文件所占的空间分为数据备份和日志备份，不同类型的备份文件的存储空间免费额度不同。本地一级备份：数据备份和日志备份的存储空间有一定的免费额度。当超过该免费额度时，将根据超过的存储容量和保存时长收取一定费用。说明 标准版...
迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库...
本文为您介绍如何使用数据传输迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
数据管理DMS中出现“Data truncated for column”的...
例如，字段原长度为128字节，存储了一些数据后，希望更新字段长度为64字节，由于存储的数据中，部分数据已经超过64字节，更新字段长度为64字节时便会出现此错误。解决方案 请确认您是否确实需要改小字段的长度。如果确实需要，先在表中查找...
离线同步数据质量排查
如果写出数据和目标存储已有数据发生数据约束（主键冲突、唯一键约束、外键约束等），数据库则使用来源数据update更新目标表已有数据行，在目标表存在多个数据约束的情况下，数据替换可能会失败并产生脏数据 如果写出数据和目标存储已有...
数据存储冷热分离
存储策略 AnalyticDB MySQL版 的数据存储冷热分离策略分为全冷存储、全热存储、冷热混合存储。全冷存储指数据全部存储在OSS中，是一种较为经济的存储策略。全热存储指数据全部存储在SSD盘，满足高性能访问的需求。冷热混合存储指一定数量的...
数据类型
云数据库 SelectDB 版 的数据类型与MySQL的数据类型高度兼容。本文为您介绍SelectDB支持的数据类型。概述 云数据库 SelectDB 版 支持标准SQL语法，采用MySQL网络连接协议，高度兼容MySQL相关生态。目前SelectDB版本支持的数据类型是MySQL的...
数据类型支持
date 日期类型，取值范围：'1000-01-01'到'9999-12-31'，支持的数据格式为'YYYY-MM-DD'，存储长度为4字节。time 时间类型，取值范围：'1000-01-01 00:00:00.000000'到'9999-12-31 23:59:59.999999'。支持的数据格式为：'YYYY-MM-DD HH:MM:...
新建数据元
数据元管理通过分析业务流程，抽象关键业务对象和业务对象属性，并把关键业务对象新建为数据元，并配置数据元的类型、长度、质量校验函数和引用数据字典，为模型标准化设计及数据治理过程中的质量监控提供规则依据。本文介绍如何新建数据元...
新建数据元
数据元管理通过分析业务流程，抽象关键业务对象和业务对象属性，并把关键业务对象新建为数据元，并配置数据元的类型、长度、质量校验函数和引用数据字典，为模型标准化设计及数据治理过程中的质量监控提供规则依据。本文介绍如何新建数据元...
数据归档
业务数据通常分为冷数据和热数据，将对象存储（OSS）作为归档冷数据的存储介质，能够大幅降低用户的存储成本。功能简介 在开启RDS MySQL数据归档OSS功能后，用户可通过执行下面的DDL语句实现数据在ESSD和OSS之间的转换。通过数据归档OSS...
什么是文件存储NAS
通用型NAS 通用型NAS用于存储频繁访问的热数据，分为通用容量型NAS、通用高级型NAS和通用性能型NAS。适用于Linux或Windows企业应用、Web内容管理、数据库备份、日志存储、主目录等通用类文件共享业务。极速型NAS 极速型NAS是基于阿里云最新...
数仓分层
基于阿里巴巴OneData方法论最佳实践，在阿里巴巴的数据体系中，建议将数据仓库分为三层：数据引入层（ODS，Operational Data Store）、数据公共层（CDM，Common Dimensions Model）和数据应用层（ADS，Application Data Store）。数据仓库...
概述
数据备份 数据备份按照存储类型可以分为两种情况：存储类型为标准版ESSD云盘。备份类型 是否默认开启 保留时长 特点 查看备份大小 数据备份 是 3天～7300天。备份文件保存在本地的称为数据备份。数据备份是保存在分布式存储集群上的快照，...
搭建订单系统
步骤四：读取数据 数据读取分为两类：主键读取 基于原生表格存储的主键列获取，例如getRow、getRange、batchGetRow等。主键读取用于索引（自动）反查，用户也可以提供主键（订单md5）的单条查询的页面，亿量级下查询速度极快。单主键查询...
添加维度属性
通过添加维度属性，配置维度属性的字段类型、长度、质量校验函数和引用数据字典，为数据模型标准化设计及数据治理过程中的质量检测提供依据。本文介绍如何添加维度属性。前提条件 已新建维度，具体操作，请参见 新建维度。背景信息 在模型...
添加维度属性
通过添加维度属性，配置维度属性的字段类型、长度、质量校验函数和引用数据字典，为数据模型标准化设计及数据治理过程中的质量检测提供依据。本文介绍如何添加维度属性。前提条件 已新建维度，具体操作，请参见 新建维度。背景信息 在模型...
方案实现
店铺（md5）（主键）类型 店铺名称 店铺位置 店铺评分 人均消费 o0057022192 0000000f470ef0ef0f0f548b925ceffela7e3 杭帮菜 韩村杭帮菜 36.76613，111.41461 2.87 63.67 步骤四：读取数据 数据读取分为两类：主键读取 基于原生表格存储的...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
概述
数据备份 数据备份按照存储类型可以分为两种情况：存储类型为标准版ESSD云盘。备份类型 是否默认开启 保留时长 特点 查看备份大小 数据备份 是 3天～7300天。备份文件保存在本地的称为数据备份。数据备份是保存在分布式存储集群上的快照，...
概述
数据备份 数据备份按照存储位置可分为一级备份和二级备份。备份存储位置 是否默认开启 保留时长 特点 查看备份大小 一级备份（数据备份）是 3~14天。一级备份采用ROW（Redirect-on-Write）快照的方式，直接保存在 PolarDB 分布式存储系统上...
0041-00000116
问题描述 访问源站获取的数据长度不正确。问题原因 请求触发镜像回源时，访问源站获取的数据长度与Content-Length不一致。问题示例 无 解决方案 排查源站异常。相关文档 镜像回源
数据膨胀诊断
AnalyticDB PostgreSQL版 提供的智能诊断数据膨胀功能，可以定期自动诊断数据库内的所有表，并生成诊断信息表。您可以通过诊断信息表，查看表的膨胀情况并获得相应的处理建议（如执行VACUUM或VACUUM FULL操作）。注意事项 智能诊断数据膨胀...
安全算法示例
加密数据长度必须为16的倍数 3DES CBC PKCS5Padding 长度必须为8位 无 3DES CBC PKCS7Padding 长度必须为8位 无 3DES CFB NoPadding 长度必须为8位 无 3DES CFB PKCS5Padding 长度必须为8位 无 3DES CFB PKCS7Padding 长度必须为8位 无 3...
安全算法示例
加密数据长度必须为16的倍数 3DES CBC PKCS5Padding 长度必须为8位 无 3DES CBC PKCS7Padding 长度必须为8位 无 3DES CFB NoPadding 长度必须为8位 无 3DES CFB PKCS5Padding 长度必须为8位 无 3DES CFB PKCS7Padding 长度必须为8位 无 3...
概述
使用场景 典型的应用场景如下：近实时计算场景 时间序列数据的场景 预测建模 与存量数据共存 通常生产环境中会有大量的存量数据，数据可能存储在HDFS、RDBMS或Kudu中。如果您只是想访问和查询这些存量数据，可以使用Impala访问和查询，而...
使用限制
本文介绍在使用EMR Serverless StarRocks服务时的相关限制。...1048578（行最大值）-2（长度标识位，记录实际数据长度）=1048576 支持的编码：StarRocks仅支持UTF8编码，不支持GB等编码。子查询个数：一个查询中子查询的最大个数默认为10000。
数据类型
本文描述 云数据库ClickHouse 的数据类型。数据类型列表 ClickHouse完整数据类型介绍，请参考 开源官方数据类型介绍。分类 关键字 数据类型 取值/取值范围 整数类型 Int8 Int8 取值范围：128-127。Int16 Int16 取值范围：32768-32767。Int...
冷热分层
本文介绍冷数据的特点和适应场景，通过表格存储Tablestore和Delta Lake结合示例，演示数据的冷热分层。冷热分层可以充分利用计算和存储资源，以低成本承载更优质服务。背景信息 在海量大数据场景下，随着业务和数据量的不断增长，性能和...
- 产品推荐
- 这些文档可能帮助您