如何查看OSS文件被删除的详细操作记录
详细信息 如您需要查看OSS文件被访问、删除等操作的记录，需要开启OSS的Logging日志，详情请参见 访问对象存储OSS的过程中如何查询Object的访问和操作记录。如果要定位删除的操作记录，需要在访问日志中过滤DELETE关键字来定位。示例如下：...
监控审计
日志转存 访问对象存储OSS的过程中会产生大量的访问日志，您可以通过日志转存功能将这些日志按照固定命名规则，以小时为单位生成日志文件写入您指定的Bucket。对于已存储的日志，您可以通过阿里云日志服务或搭建Spark集群等方式进行分析。...
文件存储 HDFS 版和对象存储OSS双向数据迁移
Hadoop兼容文件系统提供单写者多读者并发语义，针对同一个文件，同一时刻可以有一个写者写入和多个读者读出。以 文件存储 HDFS 版 到对象存储OSS的数据迁移为例，数据迁移任务打开 文件存储 HDFS 版 的文件F，根据当前系统状态决定文件F的...
如何理解主键、数据分区和数据分区键
主键 表中的每一行由主键（PK）唯一确定。您在创建表的时候必须指定组成主键的列，这些列称为主键列。主键列必须有值。您必须确保主键列的值的组合能够唯一地确定一行。在后续使用的过程中，主键列的类型不能改变。数据分区和分区键 表格...
生命周期管理概述
全部数据存储在低频存储或归档存储节省的存储费用（费用A）读写低频存储或归档存储中的数据产生的流量费用（费用B）（通用型NAS存储单价-低频存储单价或归档存储）×预估存储容量 文件存储NAS的存储单价，请参见 文件存储NAS产品定价。...
为什么云存储网关与OSS上的文件不一致
基于按需扫描机制的常规反向同步 云存储网关默认采用基于按需扫描机制的 反向同步 功能，将OSS上的变化按需同步至网关本地，这一过程是 由用户访问操作触发、按需执行的。具体而言，云存储网关在文件夹层级上设置了同步时间，当检测到当前...
方案背景
介绍表格存储结合Spark流批处理实现一体化存储和计算的背景、适用场景、样例场景和架构设计。背景 电子商务模式是指在网络环境和大数据环境下基于一定技术基础的商务运作方式和盈利模式。在电商运营中数据的分析和可视化是最重要的部分之一...
存储空间地域属性
✓×同城冗余存储 OSS采用多可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一地域（Region）的多个可用区。当某个可用区不可用时，仍然能够保障数据的正常访问。OSS同城冗余存储提供99.9999999999%（12个9）的数据设计持久性...
logging（日志转存）
访问对象存储OSS的过程中会产生大量的访问日志，您可以通过日志转存功能将这些日志按照固定命名规则，以小时为单位生成日志文件写入您指定的Bucket。您可以通过 logging 命令开启、查询、关闭Bucket的日志转存配置。注意事项 要开启日志...
功能特性
实例 服务地址 每个表格存储实例对应一个服务地址（Endpoint），应用程序进行表和数据操作时需要指定服务地址。服务地址 使用方式 控制台 表格存储通过控制台完成时序模型和宽表模型的实例基础操作、表操作、数据基本操作、SQL查询相关操作...
流计算实现细节
了解对接Structured Streaming的微批模式的过程，以及表格存储对接Spark Structured Streaming的详细接入流程。背景信息 在对接Spark Structured Streaming的微批模式时，以Spark DataSource v1接口为例说明过程。调用GetOffset方法获取...
数据安全
本地冗余 采用单可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一个可用区内多个设施的多个设备上。本地冗余能确保硬件失效时的数据持久性和可用性。重要 本地冗余的数据冗余在某个特定的可用区内。当该可用区不可用时，会...
通过云存储网关挂载OSS
通过云存储网关挂载OSS，您可以将OSS映射为一个共享的文件存储系统，实现多个用户在不同地点和设备上共享访问OSS数据。挂载完成后，您可以像使用本地文件夹和磁盘一样操作OSS资源。前提条件 已开通 云存储网关服务，并授予访问OSS、ECS及...
通过SDK使用时序模型
如果使用过程中遇到问题，请通过钉钉加入用户群11789671（表格存储技术交流群）或23307953（表格存储技术交流群-2）联系我们。接口 接口 描述 CreateTimeseriesTable 创建一张时序表。ListTimeseriesTable 获取当前实例下的时序表列表。...
归档存储服务等级协议
意为存储在归档存储上一百亿个用户文件，每月最多只有1个文件发生数据丢失的可能性。2.2.数据可销毁性 2.2.1.在用户主动删除数据或用户服务期满后需要销毁数据的，阿里云将自动清除对应物理服务器上磁盘和内存数据，使得数据无法恢复。2.2....
OSS与文件系统的对比
对比项 OSS 文件系统 数据模型 OSS是一个分布式的对象存储服务，提供的是一个Key-Value对形式的对象存储服务。文件系统是一种典型的树状索引结构。数据获取 根据Object的名称（Key）唯一的获取该Object的内容。虽然您可以使用类似 test1/...
常见术语
数据湖 数据湖是一个集中式存储库，允许您以任意规模存储所有结构化和非结构化数据，数据湖支持存储EB级别的数据，阿里云数据湖存储以OSS为代表！数据湖分析 数据湖分析就是针对数据湖数据分析的方案。云原生数据湖分析（简称DLA）是新一代...
创建存储空间
在上传文件（Object）到OSS之前，您需要创建一个用于存储文件的存储空间（Bucket）。存储空间具有各种配置属性，包括访问权限、存储类型等。您可以根据实际需求，创建不同类型的存储空间来存储不同的数据。注意事项 创建存储空间本身不收取...
常见问题
以下列场景为例，说明使用版本控制时的存储费用（假定当月有30天）：当月第1天：通过PutObject操作向某一存储空间（Bucket）上传了20 GB大小的Object，存储类型为标准存储（本地冗余）。当月第16天：通过PutObject操作对同一个Bucket中的同...
使用流程
表格存储 提供了控制台、命令行工具（Tablestore CLI）和Tablestore SDK三种访问方式。本文介绍通过控制台和命令行工具快速使用宽表模型和时序模型的流程。背景信息 使用表格存储前，您需要了解表格存储相关介绍，例如产品概述、基本概念等...
存储冗余概述
本地冗余存储（LRS）采用单可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一个可用区内多个设施的多个设备上。本地冗余存储能确保硬件失效时的数据持久性和可用性。重要 本地冗余存储类型的数据冗余在某个特定的可用区内。当...
时序表操作
时序模型通过时序表存储时间序列数据，单表能提供高并发写入和查询以及PB级海量数据的低成本存储。创建时序表时，您可以配置数据生命周期 和为时序表创建分析存储。创建时序表后，您可以根据实际管理时序表，例如获取实例中的所有时序表...
测试模型
表格存储的自动负载均衡机制能够根据表下各个分区的数据量、访问压力对数据分区进行动态的分裂，该过程不需要人工介入，本次测试，选取了具有代表性的1、4和16个分区情况下表的性能数据。新创建的数据表默认为1个数据分区，如果您对表有...
创建同城冗余存储Bucket
OSS 采用多可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一地域（Region）的多个可用区。当某个可用区不可用时，仍然能够保障数据的正常访问。OSS同城冗余存储提供99.9999999999%（12个9）的数据设计持久性。本文介绍如何...
计费常见问题
例如您购买了一个CPFS资源包（100 GiB，1个月），在一个计费周期内，您账号下的CPFS文件系统A实际存储数据180 GiB，那么在这个计费周期内文件系统A先使用资源包抵扣100 GiB，超出的80 GiB存储容量将按量付费，因此会产生欠费。您可以对资源...
概述
基于Tablestore Sink Connector，您可以将Apache Kafka中的数据批量导入到表格存储（Tablestore）的数据表或者时序表中。背景信息 Kafka是一个分布式消息队列系统，不同的数据系统可以通过Kafka Connect工具将数据流输入Kafka和从Kafka获取...
使用教程（宽表模型）
表格存储 支持作为实时计算Flink的源表和结果表使用，您可以将 表格存储 数据表中的数据经过Flink处理后得到的结果保存到 表格存储 的另一张数据表中。背景信息 实时计算Flink能将Tunnel Service的数据通道作为流式数据的输入，每条数据...
基于最后一次访问时间的生命周期规则
您可以通过基于最后一次访问时间（Last Access Time）策略的生命周期规则来自动监测数据的访问模式并识别冷数据，然后将识别出来的冷数据进行存储类型的转换，从而达到数据的冷热分层存储，最终降低存储成本。使用场景 多媒体场景 某网站的...
表格存储建表注意事项
主键的第一列为分区键，可以理解为当表的数据量达到一个设定值时，表格存储会根据分区键列值的范围来进行分区的操作，通过分区来达到数据访问负载均衡的目的。建表时，表内的数据默认拥有一个分区，即该表的所有数据在一个数据分区上。当表...
常见问题
合规性要求：虽然OSS默认对每个存储的对象在物理盘上有多份副本，但合规性要求所规定的数据需要跨一定距离保存一份副本。通过跨区域复制，可以在远距离的OSS数据中心之间复制数据以满足这些合规性要求。最大限度减少延迟：客户处于两个地理...
多元索引介绍
在每个图片中，这些实体占的位置和空间大小都不同，所以每个实体的权重（score）也不一样，这样相当于每个图片都有多个标签，每个标签有一个名字和一个权重分。如果要根据标签中的条件查询，这时候就需要使用到嵌套查询。JSON数据格式 {...
PutBucket
取值范围如下：LRS（默认）本地冗余LRS将您的数据冗余存储在同一个可用区的不同存储设备上，可支持两个存储设备并发损坏时，仍维持数据不丢失，可正常访问。说明 创建无地域属性Bucket时，仅支持LRS类型。ZRS 同城冗余ZRS 采用多可用区（AZ...
E-MapReduce数据迁移
本文介绍如何将E-MapReduce HDFS上的数据迁移到 文件存储 HDFS 版 文件系统。背景信息 阿里云E-MapReduce是构建在阿里云云服务器ECS上的开源Hadoop、Spark、Hive、Flink生态大数据PaaS产品。提供用户在云上使用开源技术建设数据仓库、离线...
方案实现
资源初始化 存储库 消息存储库保存了用户所发送的所有信息，每个用户的发件箱对应一个Timeline。模型初始化如下：Meta：Identifier设置为 Timeline_id，由于各个用户ID唯一，因此可以取值为用户ID。Queue：SequenceId可以设置为自增序列。...
存储类型概述
标准存储-本地冗余（LRS）采用单可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一个可用区内多个设施的多个设备上，确保硬件失效时的数据持久性和可用性。重要 本地冗余存储类型的数据冗余在某个特定的可用区内。当该可用区...
同城冗余
本地冗余 采用单可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一个可用区内多个设施的多个设备上。本地冗余能确保硬件失效时的数据持久性和可用性。重要 本地冗余的数据冗余在某个特定的可用区内。当该可用区不可用时，会...
高级管理FAQ
删除策略之前，如果数据已经转储到低频存储或归档存储，数据仍会继续保存在低频存储或归档存储中，并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间，请参见 创建数据...
控制台快速入门
本地冗余存储 采用单可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一个可用区内多个设施的多个设备上，确保硬件失效时的数据持久性和可用性。同城冗余存储（推荐）采用多可用区（AZ）内的数据冗余存储机制，将用户的数据...
通过SLS完成日志数据入湖OSS
背景信息 数据湖是一个集中式存储库，允许您以任意规模存储所有结构化、半结构化以及非结构化数据。这些数据包括来源于关系型数据库中的结构化数据（行和列）、半结构化数据（例如CSV、日志、XML、JSON等）、非结构化数据（例如email、文档...
计量计费项
使用多元索引功能时，表格存储会根据索引数据规模自动设置一个预留读吞吐量。因此容量型实例中如果使用了多元索引，也会产生预留读吞吐量费用。关于多元索引计费的更多信息，请参见 多元索引计量计费。多元索引的预留读吞吐量费用包含以下...
- 产品推荐
- 这些文档可能帮助您