E-MapReduce数据迁移
本文介绍如何将E-MapReduce HDFS上的数据迁移到 文件存储 HDFS 版 文件系统。背景信息 阿里云E-MapReduce是构建在阿里云云服务器ECS上的开源Hadoop、Spark、Hive、Flink生态大数据PaaS产品。提供用户在云上使用开源技术建设数据仓库、离线...
文件存储HDFS版
数据持久性和服务可用性 和文件存储NAS一样，文件存储HDFS版的数据在后端进行多副本存储，每份数据都有多份拷贝在故障域隔离的不同设备上存放，提供99.999999999%（11个9）的数据可靠性，能够有效降低数据安全风险。扩展性和弹性 文件存储...
应用场景
物联网存储IoTstore作为物联网的统一数据存储平台，可应用于车联网、智能家居、工业物联网等场景。车联网 车联网是物联网技术在智能交通领域的典型应用。在智能交通领域通过使用物联网、云计算、传感器、大数据、无线通信等技术对交通信息...
常见问题
本文列举了阿里云 表格存储 的常见问题，帮助您快速了解 表格存储。一般性常见问题 什么是 表格存储？表格存储 面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM...
功能特性
数据存储 功能集 功能 功能描述 参考文档 通用型NAS 容量型 通用型NAS的一个细分存储类型，适用于数据库备份、日志存储、Windows用户目录、Linux home目录等成本敏感型且对时延响应要求不高的文件共享业务。通用型NAS 性能型 通用型NAS的...
文件存储NAS
阿里云文件存储NAS（Apsara File Storage）是面向阿里云ECS实例、E-HPC和容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统，支持NFS和SMB协议。文件存储NAS 目前提供极速型、通用性能型...
监控与日志
监控与日志可有效保障您文件存储NAS资源的可用性、业务的正常运行和健康度。您可通过对应的监控能力，持续收集监控数据。阿里云提供了各种监控与日志审计相关的服务，例如云监控、配置审计等，帮助您实时监控云资源的使用情况和业务运行...
如何优化高并发IM系统架构
使用扩散写而非扩散读，主要由于以下两点原因：群组内成员一般都不多，存储成本并不高，而且有压缩，成本更低。消息扩散写到每个人的存储表（收件箱）后，为每个接收方推送消息时，只需要检查自己的收件箱即可，此时群聊和单聊的处理逻辑...
0014-00000053
问题原因 Transition 的子节点 ReturnToStdWhenVisit 用于指定Object转为非标准存储后，再次访问时是否将Object转为标准存储。只有当IsAccessTime设置为true时才有效。取值如下：true：Object由非标准存储转为标准存储。false（默认值）：...
数据安全
表格存储提供服务器端加密和客户端加密，可有效防止数据在云端的潜在安全风险。表格存储支持同城冗余功能，可实现多可用区数据容灾，确保数据的高可用性和容灾能力。表格存储支持通过云备份服务对重要数据进行备份，可防止数据误删除或者...
常见问题
云存储网关中的数据没有同步上传到OSS Bucket的原因是什么？如何配置文件网关的NFS v4共享路径？文件网关忽略删除的使用场景及配置是什么？文件网关如何加入AD域？块网关FAQ 如何使用块网关创建文件系统并刷新缓存到iSCSI盘？块网关的数据...
操作指南FAQ
云存储网关中的数据没有同步上传到OSS Bucket的原因是什么？如何配置文件网关的NFS v4共享路径？文件网关忽略删除的使用场景及配置是什么？文件网关如何加入AD域？为什么云存储网关与OSS上的文件不一致？块网关FAQ 如何使用块网关创建文件...
SA混合云存储阵列
阿里云混合云存储阵列作为软硬一体的存储设备，集成了阿里云存储服务，融合了公共云存储和传统存储阵列的优点：简单 客户无需更改原有的IT架构，就可以像使用本地存储设备一样使用阿里云混合云存储阵列，同时使用本地存储空间和云端存储...
同城冗余
为了实现实例数据的机房级容灾，表格存储 提供了同城冗余功能。通过创建使用同城冗余的实例存储数据，即使当由于断网、断电或者灾难事件导致某个机房不可用时，表格存储 仍能继续提供强一致性的服务。同城冗余功能确保了数据的高可用性和容...
集成OSS应用示例
为了保证数据或文件的不变性，我们提供了一个应用示例程序，将文件存储在OSS上，并在Hyperledger Fabric上记录文件的哈希值。该示例程序基于Hyperledger Fabric Go SDK，运行示例程序前请确保Go开发环境已经正确配置。具体配置方法可以参考...
将表格存储的增量数据转换为全量数据格式
通过DataWorks控制台，您可以在MaxCompute中使用merge_udf.jar包将 表格存储 的增量数据转换为全量数据格式。前提条件 已导出 表格存储 全量数据到MaxCompute，且已配置同步 表格存储 增量数据到MaxCompute。具体操作，请分别参见 全量导出...
监控服务概览
使用方法请参见：云监控SDK参考 访问监控数据 监控、诊断和故障排除 监控诊断和故障排除 通过详细介绍以下各个方面的内容帮助您更好地了解OSS服务的运行状态并进行自主诊断和故障排除：服务监控 介绍如何使用监控服务持续监控OSS存储服务的...
冷热分层存储
并不是所有OSS-HDFS中存储的数据都需要频繁访问，但基于数据合规或者存档等原因，部分数据仍然需要继续保存。针对以上问题，OSS-HDFS服务支持数据的冷热分层存储，对于经常需要访问的数据以标准类型进行存储，对于较少访问的数据以低频、...
PutBucket
调用 PutBucket 接口创建存储空间（Bucket）。注意事项 要创建存储空间，您必须有 oss:PutBucket 权限。具体操作，请参见 为RAM用户授权自定义的权限策略。同一阿里云账号在同一地域（Region）内最多支持创建100个存储空间。每个地域都有...
功能特性
数据存储 功能集 功能 功能描述 参考文档 元数据存储 宽表模型 宽表模型（WideColumn）是类Bigtable/HBase模型，可应用于元数据、大数据等多种场景。宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、...
什么是OSS-HDFS服务
导出审计日志 冷热分层存储 并不是所有OSS-HDFS中存储的数据都需要频繁访问，但基于数据合规或者存档等原因，部分数据仍然需要继续保存。针对以上问题，OSS-HDFS服务支持数据的冷热分层存储，对于经常需要访问的数据以标准类型进行存储，...
0032-00000010
问题原因 您发起了PutBucketLogging请求，但是请求体XML配置有误，/BucketLoggingStatus/LoggingEnabled/TargetBucket 节点表示日志转存的目标Bucket，生成日志的源Bucket和存储日志的目标Bucket可以相同也可以不同，但是必须属于同一账号...
产品优势
本文介绍了 表格存储 的优势，包括多模型数据存储、多元化数据索引、多计算生态接入、访问安全性等。多模型数据存储 表格存储 支持宽表（WideColumn）模型、时序（TimeSeries）模型、消息（Timeline）等多种数据存储模型，能实现多种类型...
二级索引简介
建议将时间列进行哈希，然后在哈希后的列上创建索引，如果有需求请使用钉钉联系表格存储技术支持。由于会导致索引表水平扩展能力受限，影响索引表写入性能，不建议将取值范围非常小，甚至可枚举的列作为索引表主键的第一列，例如性别。使用...
CDH6数据迁移
本文介绍如何将CDH中本地HDFS的数据迁移到 文件存储 HDFS 版，实现存储计算分离。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已在阿里云上创建ECS实例并安装CDH6集群。...
文件存储CPFS
文件存储CPFS（Cloud Paralleled File System）是一种并行文件系统。CPFS的数据存储在集群中的多个数据节点，并可由多个客户端同时访问，从而能够为大型高性能计算机集群提供高IOPS、高吞吐、低时延的数据存储服务。适用场景 文件存储CPFS ...
事件告警
告警的处理方式 元数据空间不足 告警原因 元数据空间指的是SMB或NFS共享所对应的缓存盘中用于存储元数据的空间，主要包括目录结构等信息，文件数目越多，使用的元数据空间也就越大。共享使用的缓存盘由数据空间和元数据空间组成，默认20%的...
PutBucketLifecycle
您可以基于最后一次修改时间以及最后一次访问时间的策略创建生命周期规则，定期将存储空间（Bucket）内的多个文件（Object）转储为指定存储类型，或者将过期的Object和碎片删除，从而节省存储费用。本文为您介绍如何调用 ...
AbortMultipartUpload
降低存储费用 建议您及时完成分片上传或者取消分片上传，原因是已上传但未完成或未取消的分片会占用存储空间，从而产生存储费用。请求语法 DELETE/ObjectName?uploadId=UploadId ...
背景
了解表格存储表设计最佳实践的背景。选择使用表格存储后，根据实际业务场景，选择直接使用表格存储提供的数据模型或者根据最佳实践进行表设计。为什么选择表格存储 如上图所示，表格存储提供了丰富、通用的功能，并具有如下优势：零运维，...
通过HTTP请求存储在OSS的图片时出现403错误
问题原因 无法正常访问图片的报错原因如下：Bucket为私有权限 防盗链配置异常 解决方案 当通过HTTP访问存储在OSS中的图片发生报错时，请参见以下操作进行排查处理：确认Bucket权限。如果为私有权限，请按以下方式处理：通过签名访问，签名...
通过控制台投递数据到OSS
通过表格存储控制台创建投递任务，将表格存储数据表中的数据投递到OSS Bucket中存储。前提条件 已开通OSS服务且在表格存储实例所在地域创建Bucket，详情请参见 开通OSS服务。说明 数据湖投递支持投递到和表格存储相同地域的任意OSS Bucket...
0026-00000005
问题原因 您对某个Object发起了删除或修改操作，但是该文件所处的存储空间正处于合规保留策略的保留周期内，因此不允许修改或删除其中的Object。问题示例 比如您发起了如下请求：DELETE/test.txt ...
0013-00000101
问题原因 您发起了 PutBucket 或 CopyObject 等请求，并在请求中通过 x-oss-storage-class 请求头指定存储类型，但是您指定的参数不是合法的OSS存储类型字符串。x-oss-storage-class 支持的取值如下：Standard：标准存储。IA：低频访问。...
0014-00000062
问题原因 可能的原因如下：您提交的PutBucketLifecycle请求配置中 NoncurrentVersionTransition 节点下的 StorageClass 子节点的值不是合法的存储类型的字符串。目前仅支持IA，Archive与ColdArchive。您提交的PutBucketLifecycle请求配置中...
拆分函数概述
否 是 DD 按日期哈希 否 是 WEEK 按周哈希 否 是 MMDD 按月日哈希 否 是 YYYYMM 按年月哈希 是 是 YYYYWEEK 按年周哈希 是 是 YYYYDD 按年日哈希 是 是 拆分函数对全局二级索引的支持情况 PolarDB-X 1.0 支持 全局二级索引，从数据存储的...
计费项检测
背景信息 如果您同时使用了OSS的多种功能，例如使用OSS存储文本、图片、音视频等文件会产生对应类型的存储费用。通过外网浏览或者下载OSS文件时会产生下行流量费用等。关于OSS计费项的更多信息，请参见 计费组成。针对以上情况，您可以通过...
OSS性能与扩展性最佳实践
如果您在上传大量文件（Object）时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间（Bucket）中的某个特定分区的情况。此时如果您的请求次数过多，会导致请求速率下降。出现此类问题时，建议您...
审计日志概述
通过审计日志功能，您可以查询与分析 表格存储 实例中的表、索引相关操作的日志。背景信息 日志服务 SLS（Simple Log Service）是云原生观测与分析平台，为Log、Metric、Trace等数据提供大规模、低成本、实时的平台化服务。更多信息，请...
OSS配置文件生命周期后未生效的原因分析
概述 您可以通过阿里云对象存储OSS的PutBucketLifecycle接口设置生命周期规则（Lifecycle），生命周期规则可以定期将非热门数据转换为低频访问、归档存储或冷归档存储，将不再需要访问的数据删除，让您更高效地管理您存储的数据，节省大量...
- 产品推荐
- 这些文档可能帮助您