使用UDF处理数据
如果您在表格存储中的数据有着独特的结构，希望自定义开发逻辑来处理每一行数据，例如解析特定的JSON字符串，您可以使用用户自定义函数UDF（User Defined Function）来处理表格存储中的数据。操作步骤 在IntelliJ中安装MaxCompute-Java/...
SQL查询介绍
您可以通过SQL查询功能对表格存储中的数据进行复杂的查询和高效的分析。背景信息 为了满足用户业务平滑迁移到表格存储以及使用SQL方式访问表格存储的需求，表格存储在传统的NoSQL结构化存储之上，提供云原生的SQL引擎能力。SQL查询兼容...
多元索引介绍
当日常业务中有非主键列查询、多列组合查询、模糊查询等多维查询需求以及求最值、统计行数、数据分组等数据分析需求时，您可以将这些属性作为多元索引中的字段并使用多元索引查询与分析数据。背景信息 多元索引可以解决大数据中复杂的查询...
通过Amazon S3协议挂载OSS
执行到storage_class>，选择Object的存储类型。此处以选择default（继承Bucket存储类型）为例，即输入1，然后按下Enter。执行到Edit advanced config?(y/n)，输入n，然后按下Enter。输入q，完成所有配置。挂载存储空间。以将examplebucket...
宽表模型介绍
说明 您也可以通过MaxCompute、Spark、Hive或者HadoopMR、函数计算、Flink等计算引擎分析 表格存储 中的数据。更多信息，请参见 计算与分析概述。计费说明 表格存储 支持预留模式（预付费）和按量模式（后付费）两种计费模式，请根据所用的...
功能发布记录
使用SQL查询分析时序分析存储中的数据。2023-12-20 华东1（杭州）、华东2（上海）、华北2（北京）、华北3（张家口）时序分析存储概述 时序模型限制 时序模型计量计费 使用分析存储 使用SQL查询数据 Instance Policy 如果要针对实例进行访问...
将表格存储数据下载到本地文件
表格存储支持通过命令行工具或者DataX工具直接...通过DataWorks控制台将表格存储中的全量数据或者增量数据同步到OSS。具体操作，请参见 全量导出（脚本模式）和 增量同步（脚本模式）。在OSS侧下载文件到本地。具体操作，请参见 简单下载。
管理版本控制
通过Object的版本管理，在错误覆盖或者删除Object后，您能够将Bucket中存储的Object恢复至任意时刻的历史版本。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。...
上传到OSS的文件存储类型为归档存储无法下载文件
问题原因 OSS文件上传时会继承Bucket的存储类型，因此上传到OSS的文件存储类型为归档存储的原因如下：Bucket的存储类型为标准存储，但是需要下载的文件为归档存储，则说明上传文件时的代码中设置的存储类型为归档存储。Bucket的存储类型为...
数据湖投递概述
数据分层的存储与访问体验 数据投递到OSS后，表格存储 提供数据表、索引表、投递OSS等分层数据。满足不同场景的使用分析需求。注意事项 目前支持使用数据湖投递功能的地域有华东1（杭州）、华东2（上海）、华北2（北京）和华北3（张家口）...
物联网存储介绍
表格存储针对物联网场景中的数据存储需求推出了一站式物联网存储IoTstore解决方案，IoTstore解决方案能为物联网场景中的不同类型数据提供统一数据存储平台。同时，支持多种数据源的数据接入、流批计算引擎的对接以及数据可视化展示。整体...
产品优势
消息模型：表格存储 自研模型，主要用于消息数据，适用于IM、Feed和物联网设备消息下推等消息系统中消息的存储和同步。多元化数据索引 除了支持主键查询，表格存储 还支持二级索引和多元索引的索引方式，提供强大的数据查询能力。二级索引...
功能特性
原子写 支持DIRECT IO的原子写，需按4K，8K，16K对齐-共享读写 一份数据可共享式多点挂载并进行读写，读写可线性扩展-存储加密 通过对数据库文件存储实施加密，可以确保数据库文件存储上的所有数据（包括静态存储和动态传输中的数据）都...
OSS文件处于冻结状态无法正常访问
问题原因 阿里云对象存储OSS中的文件处于冻结状态有以下几种情况：在对象存储OSS中，如果Bucket的存储类型是归档存储或者冷归档存储时，默认存放到该Bucket的文件都是冻结状态。上传文件时设置了文件存储类型为归档存储或者冷归档存储，也...
地域
表格存储 部署在多个地域中，您可以根据自身的业务需求创建不同地域中的 表格存储 实例。表格存储 当前支持的地域与RegionID的对应关系请参见下表。地域名称 RegionID 华东1（杭州）cn-hangzhou 华东1 金融云 cn-hangzhou-finance 华东2...
使用NAS动态存储卷
当配置为Delete时，删除PV后NAS文件系统中的对应目录会默认修改名称（例如，path-name 会被修改为 archived-path-name）。如果需要删除文件系统中对应的存储目录，可在StorageClass中配置 archiveOnDelete 为 false。在StatefulSet中使用...
产品计费
OSS使用费用 云存储网关中的OSS资源归您所有，网关访问OSS产生的费用由OSS产品向您收取，这些费用包括存储费用、流量费用、请求费用和数据取回费用，对应的费用详情，请参见 OSS产品定价。存储费用：写入网关的文件上传到OSS，占用OSS存储...
现代IM系统中的消息系统—架构
本章节主要介绍现代IM系统中的消息系统架构以及基于表格存储（Tablestore）自研的Timeline模型构建的消息系统。基于Timeline构建的现代消息系统能够同时支持消息系统的多种特性，包括多端同步、消息漫游和在线检索，在性能和规模上能够实现...
生命周期配置元素
Prefix元素 基于您指定的元素，将生命周期规则应用于存储空间中的所有或部分Object。Filter元素 Filter元素是生命周期规则的过滤条件，仅当符合Filter下所有条件的Object才会被视为匹配该规则。Not元素 如果您希望按照生命周期规则对与前缀...
资源包选购案例
说明 评估数据存储量资源包时，下表中的数据存储量需要转换为GB单位的相应数值进行近似评估。根据数据透视表中的各数据用量评估所需资源包规格。重要 此处地域以 全国通用（中国内地）为例介绍，实际场景中可以根据实例所属地域结合各地域...
什么是文件存储CPFS
阿里云CPFS特有的 数据流动 功能可以实现将对象存储OSS中的数据合并入CPFS，进行统一命名空间的元数据管理。您可以手动或者通过自动Lazy-load能力，将OSS中的数据复制到CPFS中，实现通过POSIX文件接口高速访问OSS中的数据。在保持海量数据...
常见问题
云存储网关中的数据没有同步上传到OSS Bucket的原因是什么？如何配置文件网关的NFS v4共享路径？文件网关忽略删除的使用场景及配置是什么？文件网关如何加入AD域？块网关FAQ 如何使用块网关创建文件系统并刷新缓存到iSCSI盘？块网关的数据...
表格存储收费方式详解
数据存储量、预留读吞吐量和预留写吞吐量均精确到分钟级别，在计费周期结束时会对该计费周期中的数据存储量、预留读吞吐量和预留写吞吐量分别取平均值，作为该计费周期资源的实际使用量。按量读吞吐量和按量写吞吐量精确到秒级别，统计该...
监控与日志
多元索引计量数据 在数据表的 索引管理 页签，单击多元索引 操作 列的 索引详情，查看多元索引的存储量、预留读CU、行数等计量数据。时序表监控数据 在时序表的 监控指标 页签，查看时序表的表大小监控数据。健康状态监控 建议实时了解云...
使用表格存储过程中返回503错误码
批量读写操作BatchWriteRow和BatchGetRow读写的数据可能属于多张表或者一张表的多个数据分区，有可能某一个分区正在分裂，所以整个操作是非原子性的，只能够保证每个单行操作的原子性，该操作返回码为200时，仍然需要检查response中的 ...
表格存储和HBase的区别
Admin HBase中的接口 org.apache.hadoop.hbase.client.Admin 主要是指管控类的API，而其中大部分API在表格存储中是不需要的。由于表格存储是云服务，运维、管控类的操作都会被自动执行，用户无需关注。其他一些少量接口，目前暂不支持。...
哪些是常用的资源包
存储包 根据文件的不同存储类型，OSS对存储在Bucket中的文件收取对应的存储容量费用，您可以购买不同的存储包用于抵扣对应的存储容量费用。关于OSS支持的存储包类型及抵扣说明，请参见 存储费用。下行流量包 当您通过公网访问或者下载...
卸载并释放CDH6 HDFS服务使用的云盘
背景信息 当CDH已经成功运行在阿里云 文件存储 HDFS 版 上时，ECS挂载的云盘只用来存储运算中的临时Shuffle文件，可以选择卸载原来用于构建CDH HDFS服务的云盘，降低集群的拥有成本。重要 从数据安全性考虑，数据迁移后建议进行数据完整性...
为什么使用表格存储过程中会有少量的500错误
有可能某一个分区正好在分裂，所以整个操作是非原子性的，只能够保证每个单行操作的原子性，该操作返回码为200时仍然需要检查response中的getFailedRows()是否有失败的单行操作。icmsDocProps={'productMethod':'created','language':'zh-...
快速入门（FC）
NAS与函数计算无缝集成，您可以在函数计算的服务、应用上配置NAS，实时存储训练中的数据，也可以通过函数计算中的应用部署NAS浏览器，实现可视化管理NAS文件系统上的文件，包括上传文件/文件夹、下载文件/文件夹、增删改查等。本文介绍如何...
应用场景
物联网存储IoTstore作为物联网的统一数据存储平台，可应用于车联网、智能家居、工业物联网等场景。车联网 车联网是物联网技术在智能交通领域的典型应用。在智能交通领域通过使用物联网、云计算、传感器、大数据、无线通信等技术对交通信息...
关于NAS和CPFS计费项名称调整的公告
存储类型 计费项（调整前）计费项（调整后）通用型NAS 按量计费存储量 通用型存储容量（容量型/性能型）低频存储容量 低频介质存储容量 二级存储读流量 低频存储读流量 二级存储写流量 低频存储写流量 极速型NAS 存储容量 极速型配置容量 ...
转换Bucket的存储冗余类型
Bucket的存储类型必须为标准存储、低频访问存储或归档存储，但Bucket中的文件的存储类型可以为冷归档存储和深度冷归档存储。冷归档存储和深度冷归档存储的文件转换后依然为本地冗余存储。冷归档存储和深度冷归档存储的Bucket不支持转换存储...
如何理解主键、数据分区和数据分区键
主键 表中的每一行由主键（PK）唯一确定。您在创建表的时候必须指定组成主键的列，这些列称为主键列。主键列必须有值。您必须确保主键列的值的组合能够唯一地确定一行。在后续使用的过程中，主键列的类型不能改变。数据分区和分区键 表格...
入门概述
监测文件的使用量 数据监控 限制文件的目录或文件数 目录配额 备份文件系统中的数据 备份和恢复文件 回收站 快照 将文件系统中的冷数据转存储 低频介质 设置生命周期策略 对文件系统中的数据加密访问 服务器端加密 NFS文件系统传输加密 SMB...
如何使OSS文件永久处于解冻状态？
开启归档直读 如果您需要使Bucket中的归档类型的文件永久处于解冻状态，您可以直接为Bucket开启归档直读。该操作无法对处于冻结状态的冷归档、深度冷归档类型的文件生效。具体操作，请参见 归档直读。重要 相较于解冻后再读取归档类型的...
概述
您可以根据业务需求使用DataX、DTS或者canal工具将MySQL数据库中的数据同步迁移到表格存储（Tablestore）中。使用场景 数据架构变化 随着业务的变化，如果现有业务对数据库并发读写需求、扩展性和可用性需求较高，或需要复杂的检索，原有...
基本概念
如无特殊说明，本文档中的对象、文件称谓等同于Object。ObjectKey 在各语言SDK中，ObjectKey、Key以及ObjectName是同一概念，均表示对Object执行相关操作时需要填写的Object名称。例如向某一存储空间上传Object时，ObjectKey表示上传的...
时序模型介绍
时序模型在车联网场景中主要用于车辆轨迹数据的存储、查询和分析。说明 关于时序模型的更多信息，请参见 时序模型。模型介绍 在表格存储的时序模型中，采用一张二维的时序表来存储时序数据。每行代表一个时间线在某个时间点的数据，该行的...
错误处理
400 FilePartStale 文件分片过时 400 InvalidArgument 参数格式错误 400 InvalidAccessKeyId AccessKey ID不存在 403 InvalidBucketName 无效的存储空间名称 400 InvalidDigest 无效的摘要 400 InvalidObjectName 无效的文件名称 400 ...
- 产品推荐
- 这些文档可能帮助您