为什么文件系统容量和快照大小不一致
文件系统与快照之间的关系如下图所示：说明 上图中，只要被写过数据的数据块，即使在磁盘中的相关文件已经被删除，数据块仍会被记录到快照中。文件系统中所谓删除只是在需要删除的文件属性做个标记，让您知道这块空间可以利用了，不会减少...
产品优势
背景信息 云原生多模数据库 Lindorm 兼容HBase、Cassandra、S3、TSDB、HDFS、Solr等多种标准接口，支持宽表、时序、对象、文本、队列、空间等多种数据模型，适用于日志、账单、标签等多种数据的存储及分析，具有高性能、低成本等特点。...
入门概述
通过NFSv3协议访问CPFS文件系统 协议服务 在服务器中卸载挂载的文件系统 卸载文件系统 删除文件系统 删除文件系统 与对象存储OSS之间实现数据流动 数据流动 监测文件的使用量 数据监控 备份文件系统中的数据 文件存储CPFS（NFS协议）备份 ...
基本概念
术语 描述 文件系统实例 一个拥有全局命名空间，可用来存储数据的文件系统。您可以通过挂载点访问文件系统实例中的数据。挂载点 挂载点是文件系统实例在专有网络或经典网络内的一个访问目标地址。每个挂载点都对应一个域名，您需要修改 ...
添加数据
空间数据提供对矢量、栅格、矢量瓦片、栅格瓦片、三维模型、倾斜摄影、BIM、点云等数据的添加，支持通过上传文件和对象存储两种通用的方式添加数据。本文主要介绍如何添加各类空间数据。前提条件 已在云存储上存储了数据文件。背景信息 ...
查看快照容量
本文为您介绍如何查看单个数据库文件系统所有快照的容量。前提条件 您已经为某个文件系统至少创建过一份快照。具体操作，请参见 创建快照。根据快照链查看快照容量 快照链是一个数据库文件系统中所有快照组成的关系链，一个文件系统对应一...
导出结构和数据
注意事项 Web 版 ODC 对导出的数据大小有限制，最大支持导出 2GB 的数据（压缩前），超出部分无法导出。如需导出大量数据，请使用 OceanBase OBDUMPER。最大支持 5 个导出任务并行运行，后续任务在队列中等待运行。导出任务涉及的文件默认...
基本概念
L 流引擎 面向流式数据处理的引擎，提供了流式数据的存储和轻计算功能，帮助您轻松实现流式数据存储至 云原生多模数据库 Lindorm，构建基于流式数据的处理和应用。更多信息，请参见 流引擎介绍。逻辑I/O 由应用程序发给文件系统的读写操作...
快照链
一个数据库文件系统（以下简称文件系统）对应一条快照链，快照链有以下信息：快照容量：快照链中所有快照占用的存储空间。快照个数：文件系统当前快照数量。每个文件系统最多只能创建256份快照，包括手动快照和自动快照。更多详情，请参见 ...
数据下载配置
下载文件配置 Dataphin数据下载支持完整下载文件格式和样例下载文件格式两个方式，并支持设置样例数据的行数。完整下载文件格式：仅支持 CSV 下载格式 样例下载文件格式：支持 CSV 和 Excel 两种文件格式，选择Excel下载格式，支持开启水印...
数据下载配置
下载文件配置 Dataphin数据下载支持完整下载文件格式和样例下载文件格式两个方式，并支持设置样例数据的行数。完整下载文件格式：仅支持 CSV 下载格式 样例下载文件格式：支持 CSV 和 Excel 两种文件格式，选择Excel下载格式，支持开启水印...
将表格存储数据下载到本地文件
表格存储支持通过命令行工具或者DataX工具直接下载数据到本地文件。您也可以通过DataWorks工具将数据同步到OSS后再在OSS侧下载数据到本地文件。下载方式 请根据所需文件格式选择合适的方式进行数据下载，详细说明请参见下表。导出文件格式 ...
概述
数据源为数据服务中自定义存储表的数据：无需配置脚本文件和输出文件，根据表字段 iotId 和 identifier 的值直接映射 value 的值给对应孪生节点的物模型属性。重要 数据服务中自定义存储表映射到IoT孪生引擎的数据类型都是String，IoT孪生...
迁移说明
非阿里云服务存储数据迁移至云上NAS 如果您想将线下数据、IDC数据、本地数据等非阿里云服务存储数据迁移至阿里云文件存储NAS，可参照以下方式进行迁移：配置数据传输中转节点 迁移数据至阿里云NAS OSS和NAS之间的数据迁移 对于NAS与OSS之间...
管理数据流动任务
删除（Evict）将释放CPFS上文件的数据，删除后文件在CPFS上只保留元数据，您仍能看到该文件，但文件的数据块已清除，不占用CPFS上的存储空间，访问该文件数据时，再从源端存储（例如OSS）按需加载。说明 删除前，请务必确认对应文件在OSS上...
HDFS概述
Blocks HDFS将文件拆分成128 MB大小的数据块进行存储，这些Block可能存储在不同的节点上。HDFS可以存储更大的单个文件，甚至超过任何一个磁盘所能容纳的大小。一个Block默认存储3个副本（EMR Core节点如果使用云盘，则为2副本），以Block为...
外部表概述
MaxCompute支持使用外部表功能查询和分析存储于OSS等外部存储系统的数据。该机制使得用户可以无需将数据导入到MaxCompute内部存储，直接对外部数据进行操作，从而提供了数据处理的灵活性和方便性。背景信息 MaxCompute SQL作为分布式数据...
使用OSS控制台上传数据文件
对象存储OSS控制台支持上传大小不超过5 GB的文件，如果您需要导入图数据库GDB实例的数据文件不超过5 GB，您可以将数据文件上传至对象存储OSS的Bucket中，然后从Bucket中将数据文件导入至图数据库GDB实例。本文介绍将数据文件上传至对象存储...
基本概念
通用高级型NAS 通用高级型NAS是通用型NAS的一个细分类型，适用于容器数据持久化、AI训练数据存储、工业仿真、基因计算等时延敏感型且对时延响应要求较高的文件共享业务。通用高级型NAS使用容量支持自动扩容，最大存储容量为1 PiB。通用性能...
基本概念
用户可以根据实际需求，创建不同类型的存储空间来存储不同的数据。同一个存储空间的内部是扁平的，没有文件系统的目录等概念，所有的对象都直接隶属于其对应的存储空间。每个用户可以拥有多个存储空间。存储空间的名称在OSS范围内必须是...
创建同步OSS
准备工作 1.准备OSS Bucket DataHub支持将数据同步到对象存储...确认同步数据同步文件在OSS中的命名格式如下图所示：包含Bucket、目录前缀、二级目录以及文件名等 下载该文件，并查看文件内容，TUPLE同步文件内容为csv数据格式，如下图所示：
设置数据冷热存储策略
冷热分离可以有效提高热数据的查询效率，减少冷数据的存储成本。本文介绍通过开源HDFS客户端设置冷热数据存储策略的方法。前提条件 已开通冷存储功能。具体操作，请参见 开通冷存储。操作步骤 通过开源HDFS客户端访问文件引擎，具体操作，...
添加云产品数据源
重要 不支持输入数组格式的数据。ProtoBuf 单击 上传.desc文件，上传.desc文件，用于解析ProtoBuf格式数据。生成.desc文件方法，请参见 附录：生成.desc文件。选择消息类型后，单击 上传二进制数据文件，配置样例数据。重要 不支持输入数组...
基于OSS外表的单表多文件查询
一般情况下，OSS外表存储的数据是冷数据，数据量比较大，当单个CSV格式的数据文件过大时，对其进行查询会非常耗时。因此 PolarDB 支持单表多文件查询功能，您可以将单个OSS外表的数据文件拆分为多个小的数据文件，以加快查询速度。本文介绍...
导入结构和数据
创建导入任务时在面板中的 导入内容 项中选择了 ZIP 压缩文件 后还需在 数据格式 项中选择压缩包中的数据格式是 CSV 格式 或 SQL 格式。批量导入时支持导入 SQL 文件，SQL 文件是以.sql 结尾包含可直接在数据库中执行的 SELECT、INSERT、...
MySQL存储计算分离实践
文件系统 容量 已用 可用 已用%挂载点 devtmpfs 16G 0 16G 0%dev tmpfs 16G 288K 16G 1%dev/shm dbfs_server 100G 46M 100G 1%mnt/dbfs/hgsrb6i*/dbfs-ytr9rtr9*使用如下命令检查创建好的数据库文件存放目录 ls-lrt 结果如图所示 总用量 0 ...
数据湖投递概述
表格存储 数据湖投递可以全量备份或实时投递数据到数据湖OSS中存储，以满足更低成本的历史数据存储，以及更大规模的离线和准实时数据分析需求。应用场景 利用数据湖投递可以实现如下场景需求：冷热数据分层 数据湖投递结合 表格存储 的 ...
半结构化分析
JSON/JSONB AnalyticDB PostgreSQL版 支持JSON数据格式。JSON格式数据在业务上也可以用text类型来存储，但是使用JSON/JSONB数据类型会在用户写入数据时对输入做JSON规则校验，避免不合法JSON数据写入。同时 AnalyticDB PostgreSQL版 提供...
术语
硬件压缩盘（Smart-SSD）硬件压缩盘使用阿里巴巴自研的Aliflash Smart-SSD技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。硬件压缩盘的压缩引擎集成在盘片内部，通过FPGA/ASIC...
导出标注结果数据
对于导出成功的任务可直接单击 跳转，进入存储标注结果数据文件的OSS Bucket页面，查看导出文件，导出文件是一个后缀为.manifest 格式的文件，文件内容格式请参见 标注数据格式概述。如果您同时将导出结果创建为一个数据集，您可以进入数据...
API概览
本产品（数据库文件存储/2020-04-18）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，...
表设计规范
不合理的数据导入及存储（小文件）会影响整体的存储性能、计算性能、运维稳定性。MaxCompute优先按照业务逻辑对批量数据进行计算，例如，按照分区进行计算。表设计步骤 确定所属项目空间，依据业务过程规划表类型，分析数据层次。定义表...
术语
硬件压缩盘（Smart-SSD）硬件压缩盘使用阿里巴巴自研的Aliflash Smart-SSD技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。硬件压缩盘的压缩引擎集成在盘片内部，通过FPGA/ASIC...
ORC
ORC（Optimized Row Columnar）是Apache开源项目Hive支持的一种经过优化的列存储文件格式，与CSV文件相比，ORC文件不仅节省存储空间，而且数据查询性能更高。本文介绍如何在DLA中为ORC类型的文件创建表。前提条件 请参见文档 文件格式转换...
功能特性
数据存储 功能集 功能 功能描述 参考文档 通用型NAS 容量型 通用型NAS的一个细分存储类型，适用于数据库备份、日志存储、Windows用户目录、Linux home目录等成本敏感型且对时延响应要求不高的文件共享业务。通用型NAS 性能型 通用型NAS的...
ST_ValidateOSGB
对基于对象存储的倾斜摄影项目（OSGB 格式）进行格式验证。语法 record ST_ValidateOSGB(cstring url,cstring options default '{}',out valid boolean,out reason text);返回值 字段 描述 valid 是否为有效的OSGB。reason 失败原因，如果...
ST_ValidateOSGB
对基于对象存储的倾斜摄影项目（OSGB 格式）进行格式验证。语法 record ST_ValidateOSGB(cstring url,cstring options default '{}',out valid boolean,out reason text);返回值 字段 描述 valid 是否为有效的OSGB。reason 失败原因，如果...
RDS SQL Server空间不足问题
整理索引碎片 索引碎片率较高会导致实际占用的数据存储空间过大，因此对索引执行碎片整理可以降低数据空间大小。您可以在控制台的 自治服务>性能优化 页面，单击 索引使用率 页签，可以查看各表的索引碎片率统计结果，并且自治服务会提供...
Serverless存储层
云原生数据仓库AnalyticDB MySQL版 采用计算存储分离的架构，通过云原生技术实现了池化，提供了...支持半结构化、非结构化数据的存储。提供全文检索能力。提供湖加速能力。通过智能采集湖上数据统计信息，改善湖上查询计划，加速湖查询。
访问OSS数据
注意事项 云数据库ClickHouse 支持访问多种格式的OSS文件，除不支持Protobuf和CapnProto外，其他均支持，具体请参见 ClickHouse支持的文件格式。请确认OSS存储空间（Bucket）与您的 云数据库ClickHouse 集群在同一地域，并使用阿里云VPC...
- 产品推荐
- 这些文档可能帮助您