备份集最小保留策略
方法如下：通过控制台：配置备份计划、修改备份生命周期 通过API接口：CreateAndStartBackupPlan-创建并配置启动备份计划、ModifyStorageStrategy-修改存储数据的生命周期 配置备份计划时，如果将备份数据存储至 用户OSS，将不会产生DBS...
数据表-数据概况
功能说明 在数据表详情的数据概况标签页，基于对元数据及存储数据的统计，为您提供了数据表更加详细的指标信息，比如表存储大小、表文件总数、DDL最后更新时间、数据最后更新时间、访问次数、分区存储大小，分区文件数，分区最后更新时间等...
基本概念
EIU EIU，全称为Elastic IO Unit，中文名称为弹性IO资源，是 AnalyticDB for MySQL 弹性模式集群版（新版）的存储节点，负责数据存储，还提供数据写入、数据查找和数据扫描等能力。一组EIU，也就是一个存储节点组，其中包含三个存储节点。...
公共规范
将出现大量空值和零值的统计汇总表，依据其空值和零值分布状况可以做适当的水平和垂直切分，以减少存储和下游的扫描数据量。空值处理原则 汇总类指标的空值：空值处理，填充为零，当前MaxCompute基于列存储的压缩技术不会由于填充大量空值...
资源分析
说明 副本 指的是一份数据可以在不同的节点上存储，这些节点上存储的每份数据相同，数据副本是增加数据存储冗余来防止数据丢失。计算分：项目粒度的计算健康分。存储分：项目粒度的存储健康分。管理员：当前项目的管理员信息。待治理项：待...
资源分析
说明 副本 指的是一份数据可以在不同的节点上存储，这些节点上存储的每份数据相同，数据副本是增加数据存储冗余来防止数据丢失。当计算引擎为Impala时，数据表为Kudu表，Dataphin将无法为您获取存储量信息。计算分：项目粒度的计算健康分。...
产品架构
整体架构如下：LDFS 提供性能型、标准型、容量型等多种规格，并且面对真实场景的数据冷热特点，支持性能型/标准型、容量型多种存储混合使用的形态，以适应真实场景的数据冷热特点，可结合多模引擎的冷热分离能力，实现冷热存储空间的自由...
创建文档库
vector real[]固定字段 向量数据ARRAY，长度对应指定的Embedding模型的维度。doc_name text 固定字段 文档名称。content text 固定字段 单条Chunk文本，由文档在Loader和Splitter后得到。loader_metadata json 固定字段 文档在Loader解析时...
备份集下载功能概览
数据库备份DBS 为云数据库、ECS自建数据库提供灵活的备份与恢复功能，同时也支持将云上备份集下载到本地，进一步增强数据的安全性。您可通过手动或自动模式进行数据下载，下载的备份集可用于恢复到本地数据库、Excel分析与审计、备份到本地...
选型配置说明
即便如此，还是建议您存储数据到OSS或者OSS-HDFS上，集群中的HDFS仅作为YARN任务分发的临时存储空间使用。您可以使用通用机型配合ECS云盘的方式来作为Core节点的机型配置。例如，g7.4xlarge+4*100 GiB。Task节点选型 Task节点主要用来补充...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
引擎类型
流引擎是面向流式数据处理的引擎，提供了流式数据的存储和轻计算功能，帮助您轻松实现将流式数据存储至 云原生多模数据库 Lindorm，满足基于流式数据的处理和应用需求。结合宽表引擎的Ganos时空服务，可以实现基于流式数据的实时轨迹分析...
数据安全
数据备份与恢复 云原生多模数据库 Lindorm 宽表引擎支持数据备份恢复功能，该功能基于数据生态服务中的数据迁移，将数据存储至阿里云对象存储服务OSS（Object Storage Service，简称OSS）中，定期全量备份数据，实时增量同步数据，来满足对...
产品系列
标准版（历史库）随着业务发展，当您的数据库系统中积累了大量访问频率低却仍需要保持的数据，为节约成本，可选择购买标准版（历史库），将长期不使用的数据迁移至以文件形式存储的廉价存储设备上。标准版（历史库）具有如下特点：大容量...
高效数据治理实施指南
DataWorks数据治理中心可协助数据治理团队建立数据治理框架、优化治理过程、提升治理效率，从而实现治理目标的高效突破。本文通过治理负责人的实操过程，为您介绍如何通过数据治理计划能力，高效设定和达成数据治理目标。背景信息 在多人...
添加维度属性
通过添加维度属性，配置维度属性的字段类型、长度、质量校验函数和引用数据字典，为数据模型标准化设计及数据治理过程中的质量检测提供依据。本文介绍如何添加维度属性。前提条件 已新建维度，具体操作，请参见 新建维度。背景信息 在模型...
概述
使用场景 典型的应用场景如下：近实时计算场景 时间序列数据的场景 预测建模 与存量数据共存 通常生产环境中会有大量的存量数据，数据可能存储在HDFS、RDBMS或Kudu中。如果您只是想访问和查询这些存量数据，可以使用Impala访问和查询，而...
添加维度属性
通过添加维度属性，配置维度属性的字段类型、长度、质量校验函数和引用数据字典，为数据模型标准化设计及数据治理过程中的质量检测提供依据。本文介绍如何添加维度属性。前提条件 已新建维度，具体操作，请参见 新建维度。背景信息 在模型...
Kafka集群的数据存储格式
DTS支持选择迁移或同步到Kafka集群的数据存储格式，本文为您介绍数据格式的定义说明，方便您根据定义解析数据。数据存储格式 DTS支持将写入至Kafka集群的数据存储为如下三种格式：DTS Avro：一种数据序列化格式，可以将数据结构或对象转化...
0041-00000116
问题描述 访问源站获取的数据长度不正确。问题原因 请求触发镜像回源时，访问源站获取的数据长度与Content-Length不一致。问题示例 无 解决方案 排查源站异常。相关文档 镜像回源
常见问题
PolarDB MySQL版 默认使用X-Engine，可以提供强大的数据压缩能力，以满足归档数据库低存储成本的要求。更多详情，请参见 历史库概述。Q：是否支持自建Slave实例，是否有推荐的实现方式？A：支持。启用Binlog后可以将 PolarDB MySQL版 同步...
产品系列
支持按需弹性扩容计算资源和存储资源，提供数据冷热分层存储能力，以降低存储成本。同时提供离线业务与在线业务的计算资源物理隔离的能力。适用场景包含构建海量数据实时写入和复杂ETL计算的实时数据仓库、大数据量的复杂查询、历史数据...
DAS企业版介绍
说明 SQL洞察 功能中分析和统计数据（不包括SQL明细数据）的存储时长最长为90天：如果对应实例DAS专业版设置的存储时长小于等于90天，则SQL洞察功能中分析和统计数据（不包括SQL明细数据）的存储时长以DAS专业版设置的存储时长为准。...
资产全景
资产全景介绍 资产全景页面仅为您展示生产环境中的元数据及加工所得的应用数据，包括以下三种模式：全局模式：以星球形式为您展示存储数据量大于0的业务板块及其概要信息。流动模式：展示数据的流入、整合与输出过程，更直观的体现数据加工...
迁移时源库为PolarDB MySQL版的注意事项及限制
如果迁移的源集群为 PolarDB MySQL版，您需要在配置具体的迁移任务前，参考本文的注意事项及限制，以保障数据迁移任务的正常运行。源库为PolarDB MySQL版的迁移方案概览 根据如下迁移方案，查看迁移任务的注意事项及限制：PolarDB MySQL版...
资产全景
资产全景介绍 资产全景页面仅为您展示生产环境中的元数据及加工所得的应用数据，包括以下三种模式：全局模式：以星球形式为您展示存储数据量大于0的业务板块及其概要信息。流动模式：展示数据的流入、整合与输出过程，更直观的体现数据加工...
时序模型计量计费
分析存储 数据存储 按量付费 资源包 按照容量型存储计费。分析存储相比时间线数据具有更高的压缩率。按量写吞吐量 按量读吞吐量 按量付费 资源包 按照容量型读写计费。按照SQL引擎访问分析存储实际产生的数据扫描量计算CU，其中读取4 KB...
技术原理
扩展性原理 扩展性本质在于分而治之，PolarDB-X 1.0 计算资源通过水平拆分（分库分表）和垂直拆分，将数据分散到多个存储资源MySQL以实现获取数据读写并发和存储容量分散的效果。水平拆分（分库分表）PolarDB-X 1.0 具备数据水平拆分的能力...
对象存储优化
为了更有效地管理存储数据，您还可以使用标签对OSS对象进行分类，并在生命周期规则中对这些标签进行过滤。了解数据详细信息 存储空间清单 可以帮助您更好地了解对象的状态，简化并加速工作流和大数据作业任务等。存储空间清单功能以周为...
冷热分层
Tablestore中的热数据只有最近30天的数据，而Delta中依旧保留的是全量数据，以达到冷热分层的目的。冷热分层后，再次查询源表（order_source）和目的表（delta_orders）。冷热分层后热数据为1017004条，冷数据（全量数据）保持不变，仍然为...
概述
企业和组织一般将数据存储视为辅助服务，在数据上云后不会优化存储，也不会清理未使用的存储，从而使这些服务以巨额成本长期运行。根据 RightScale的博客文章，大约有7％的云上支出浪费在未使用的存储卷和旧快照（存储卷的副本）上。阿里云...
功能特性
按时间点恢复RDS数据 按时间点恢复PolarDB数据 按时间点恢复MongoDB数据 按时间点恢复Redis数据 按时间点恢复Tair数据 存储能力 温备份存储 提供性能适中、价格适中的备份存储。DBS内置存储 备份数据清理 支持TTL过期系统自动删除备份数据...
数据归档概述
归档链路文档 数据归档至专属存储 数据归档至AnalyticDB MySQL 3.0 数据归档至Lindorm 数据归档至AnalyticDB PostgreSQL版 数据归档至RDS MySQL 数据归档至PolarDB MySQL版 数据归档至用户OSS 数据归档至DBS内置OSS 常见问题 Q：如果在数据...
存储加密
数据存储加密机制如下：MaxCompute以项目为单位，通过KMS加密或解密存储在MaxCompute的数据。KMS生成和管理您的主密钥CMK（Customer Master Key），并保障密钥的安全性。MaxCompute支持的加密算法为AES256、AESCTR和RC4。MaxCompute支持...
JindoFS介绍和使用
JindoFS块存储模式（Block）JindoFS存储模式（Block），不仅提供缓存加速能力，还可以组织、存储数据和管理文件元数据，类似Apache Hadoop HDFS。在此模式下JindoFS是个独立的存储系统，只是文件块数据存储在OSS上。Cache模式和Block模式...
半结构化分析
JSONB数据类型则是以二进制格式来存储用户JSON格式数据，不会保存JSON数据中语义无关的空格，也不会保存用户JSON格式数据中对象键的顺序。对于用户输入JSON对象中具有重复键的情况，不保存重复键的对象，如果有重复键输入的话，只有最后...
OSS数据安全防护最佳实践
背景信息 敏感数据主要包括个人隐私信息、密码、密钥、敏感图片等高价值数据，这些数据通常会以不同的格式存储在您的OSS Bucket中，一旦发生泄漏，会给企业带来重大的经济和名誉损失。DSC 在您完成数据源识别授权后，从您存储在OSS的海量...
生命周期管理概述
假设用户A在华东1（杭州）创建了一个性能型的文件系统，每月存储数据为1 PiB时，该用户的每月成本说明如下：说明 以下案例单价来自2024年04月17日阿里云官网公布的NAS详细价格信息。因统计的价格日期不同，各个计费项的单价可能存在差异，...
Oracle逻辑备份
安全加密 传输数据HTTPS加密，存储数据AES256加密。创建备份计划 具体操作，请参见 购买备份计划。说明 购买时，选择数据库类型为 Oracle，并选择备份方式为 逻辑备份。配置备份计划 登录 DBS控制台。单击左侧导航栏中的 备份计划，然后在...
什么是备份数据量
存储数据量 存储数据量指存放存储介质的实际数据大小。与备份数据量不同，存储数据量取决于备份数据量、备份数据存储格式、压缩算法等因素。空间大小 在单次全量备份情况下，数据库磁盘空间（RDS/ECS）>数据文件空间（实际使用）>备份数据...
- 产品推荐
- 这些文档可能帮助您