Kafka数据接入

分区顺序消息:默认情况下,保证相同Key的消息分布在同一个分区中,且分区内消息按照发送顺序存储。集群中出现机器宕机时,仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败,等到分区恢复后即可恢复正常。当 存储引擎 ...

存储空间地域属性

OSS存储空间(Bucket)地域属性分为有地域属性和无地域属性。有地域属性Bucket 有地域属性Bucket适用于OSS通用场景。您在创建Bucket时需选择有地域属性,并指定Bucket所在的具体Region,例如华东1(杭州)。更多信息,请参见 访问域名和...

对象概述

对象(Object)是OSS存储数据的基本单元,也被称为OSS的文件。和传统的文件系统不同,Object没有文件目录层级结构的关系。Object类型 Object包含以下三种类型:通过 简单上传 生成的Object类型为Normal。通过 分片上传 生成的Object类型为...

SQL查询介绍

索引 二级索引、多元索引 为加速数据查询而创建的一种存储结构。功能特性 SQL功能 支持单次请求单条SQL。支持基础的DDL语句,主要包括 创建表的映射关系、创建多元索引的映射关系、更新映射表属性列、删除映射关系 和 查询表的描述信息。...

云备份

抵扣顺序 云备份存储费用的抵扣顺序为:存储资源包>SCU>按量计费 抵扣案例 陈先生2020年6月在华东1(杭州)购买了200 GB的备份库存储容量资源包和50 GB SCU,其6月份在华东1(杭州)地域标备份存储量为300 GB,则陈先生当月的存储费用抵扣...

教程示例:使用RAM Policy控制OSS的访问权限

本教程示例详细演示了如何使用RAM Policy控制用户对OSS存储空间(Bucket)、文件夹以及文件夹下文件(Object)的访问权限。背景信息 RAM Policy是基于用户的授权策略。通过设置RAM Policy,您可以集中管理您的用户(例如员工、系统或应用...

使用教程

说明 表中空白部分无需写入,因为表格存储是schema-free的存储结构,没有值也无需写入NULL。name owner species sex birth death Fluffy Harold cat f 1993-02-04 Claws Gwen cat m 1994-03-17 Buffy Harold dog f 1989-05-13 Fang Benny ...

常见问题

本文列举了阿里云 表格存储 的常见问题,帮助您快速了解 表格存储。一般性常见问题 什么是 表格存储?表格存储 面向海量结构化数据提供Serverless表存储服务,同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM...

功能发布记录

本文介绍了表格存储每次发布涉及的功能变更及对应的文档,帮助您了解 表格存储 的发布动态。2023年 2023年12月 功能名称 功能描述 发布时间 发布地域 相关文档 时序分析存储商业化 使用分析存储(Analytical Store)功能,您可以低成本存储...

模型介绍

消息(Timeline)模型是针对消息数据场景所设计的,能够满足消息数据场景对消息保序、海量消息存储、实时同步的业务需求,同时支持全文检索与多维度组合查询。适用于IM、Feed流等消息场景。模型结构 消息模型以简单为设计目标,核心模块...

导出全量数据到MaxCompute

如果需要使用MaxCompute备份 表格存储 数据或者迁移 表格存储 数据到MaxCompute中使用,您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到MaxCompute后,您可以使用DataWorks数据分析功能查看...

表格存储中表、行、列、值和电子表格的类比

表格存储中的表存储着用户的结构化数据。用户可以在表中查询、插入、修改和删除数据。一个用户可以拥有多个表。数据在表中以行、列、值的形式来组织。上图展示了表格存储中表及其它概念与电子表格的类比:表:类似电子表格中底端的标签,...

列举存储空间

存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。注意事项 本文以华东1(杭州)外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS,请使用内网Endpoint。关于OSS支持的Region与...

表格存储系统权限策略参考

什么是系统权限策略 权限策略是用语法结构描述的一权限的集合,可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制(RAM)产品提供了两种类型的权限策略:系统策略和自定义策略。系统策略统一由阿里云创建,策略的版本...

方案背景

表格存储(Tablestore)是阿里云自研的多模型结构化数据存储,可提供海量结构化数据的存储和查询分析服务。表格存储的分布式存储和强大的索引引擎能够支持PB级存储、千万TPS以及毫秒级延迟的服务能力。更多信息,请参见 什么是表格存储。...

对象存储系统权限策略参考

什么是系统权限策略 权限策略是用语法结构描述的一权限的集合,可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制(RAM)产品提供了两种类型的权限策略:系统策略和自定义策略。系统策略统一由阿里云创建,策略的版本...

文件存储NAS系统权限策略参考

什么是系统权限策略 权限策略是用语法结构描述的一权限的集合,可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制(RAM)产品提供了两种类型的权限策略:系统策略和自定义策略。系统策略统一由阿里云创建,策略的版本...

索引选择策略

表格存储作为海量结构化大数据存储,支持不同的索引结构,便于不同场景的查询分析加速使用。使用SQL查询功能时,您可以通过显式访问二级索引表进行索引查询。对于多元索引,表格存储提供了自动多元索引选择策略和显式访问多元索引两种方式...

DescribeFileSystems-查询文件系统信息

变更历史 变更时间 变更内容概要 操作 2024-03-25 OpenAPI 错误码发生变更、OpenAPI 返回结构发生变更 看变更集 变更项 变更内容 错误码 OpenAPI 错误码发生变更。删除错误码:400 删除错误码:404 出参 OpenAPI 返回结构发生变更。2023-12...

DescribeFileSystems-查询文件系统信息

变更历史 变更时间 变更内容概要 操作 2024-03-25 OpenAPI 错误码发生变更、OpenAPI 返回结构发生变更 看变更集 变更项 变更内容 错误码 OpenAPI 错误码发生变更。删除错误码:400 删除错误码:404 出参 OpenAPI 返回结构发生变更。2023-12...

方案背景

表格存储作为阿里云面向海量结构化数据提供Serverless表存储服务,具有海量数据存储、热点数据自动分裂、海量数据多维检索等功能,可以有效的地解决地理位置数据量大膨胀这一挑战。需求场景 某店铺搜索平台,提供了亿量级的店铺信息。用户...

数据集成服务

数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...

什么是对象存储OSS

数据存储到阿里云OSS以后,您可以选择标准存储(Standard)作为移动应用、大型网站、图片分享或热点音视频的主要存储方式,也可以选择成本更低、存储期限更长的低频访问存储(Infrequent Access)、归档存储(Archive)、冷归档存储(Cold ...

创建投递任务

您可以选择任意字段以任意顺序、名称写入列存文件,OSS的列存数据会按Schema数中的数据列先后顺序分布。重要 投递数据的字段类型必须与数据源的字段类型匹配,否则会作为脏数据丢弃。字段类型映射详情请参见 数据格式映射。TaskType 投递...

创建投递任务

您可以选择任意字段以任意顺序、名称写入列存文件,OSS的列存数据会按Schema数中的数据列先后顺序分布。重要 投递数据的字段类型必须与数据源的字段类型匹配,否则会作为脏数据丢弃。字段类型映射详情请参见 数据格式映射。taskType 投递...

通过控制台投递数据到OSS

通过表格存储控制台创建投递任务,将表格存储数据表中的数据投递到OSS Bucket中存储。前提条件 已开通OSS服务且在表格存储实例所在地域创建Bucket,详情请参见 开通OSS服务。说明 数据湖投递支持投递到和表格存储相同地域的任意OSS Bucket...

基本概念

存储空间(Bucket)存储空间是用户用于存储对象(Object)的容器,所有的对象都必须隶属于某个存储空间。存储空间具有各种配置属性,包括地域、访问权限、存储类型等。用户可以根据实际需求,创建不同类型的存储空间来存储不同的数据。同...

概述

使用Spark计算引擎访问表格存储时,您可以通过E-MapReduce SQL或者DataFrame编程方式对表格存储中数据进行复杂的计算和高效的分析。应用场景 功能特性 对于批计算,除了基础功能外,Tablestore On Spark提供了如下核心优化功能:索引选择:...

PutBucket

调用 PutBucket 接口创建存储空间(Bucket)。注意事项 要创建存储空间,您必须有 oss:PutBucket 权限。具体操作,请参见 为RAM用户授权自定义的权限策略。同一阿里云账号在同一地域(Region)内最多支持创建100个存储空间。每个地域都有...

应用场景

表格存储 有互联网应用架构(包括数据库分层架构和分布式结构化数据存储架构)、数据湖架构和物联网架构三种典型应用架构。本文结合 表格存储 的典型应用架构介绍了不同应用架构下的应用场景。互联网应用 目前互联网已在日常生活中广泛应用...

使用SDK

您可以选择任意字段以任意顺序、名称写入列存文件,OSS的列存数据会按Schema数中的数据列先后顺序分布。重要 投递数据的字段类型必须与数据源的字段类型匹配,否则会作为脏数据丢弃。字段类型映射详情请参见 数据格式映射。taskType 投递...

异常处理

OSS常见错误码 错误码 描述 AccessDenied 拒绝访问 BucketAlreadyExists 存储空间已经存在 BucketNotEmpty 存储空间非空 EntityTooLarge 实体过大 EntityTooSmall 实体过小 FileGroupTooLarge 文件过大 FilePartNotExist 文件分片不存在 ...

时序模型介绍

通过时序模型,您可以对时间序列进行存储、查询和分析。时序模型提供了数据生命周期、时间线索引、冷热存储、数据压缩等功能以满足时序数据的低成本存储以及高性能查询分析的需求。时序模型在车联网场景中主要用于车辆轨迹数据的存储、查询...

功能支持情况

不适用 管理目录 与传统文件系统中的层级结构不同,OSS内部使用扁平结构存储数据。即所有数据均以Object的形式保存在Bucket中。为方便您对Object进行分组并简化权限管理,您可以通过目录的层次来组织Object。支持通过JindoSDK管理目录 数据...

功能概述

表格存储 面向海量结构化数据提供Serverless表存储服务,适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储,提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。基本概念 在使用 ...

OSS性能与扩展性最佳实践

如果您在上传大量文件(Object)时,在命名上使用了顺序前缀(如时间戳或字母顺序),可能会出现大量文件索引集中存储存储空间(Bucket)中的某个特定分区的情况。此时如果您的请求次数过多,会导致请求速率下降。出现此类问题时,建议您...

功能特性

安全控制 文件存储 HDFS 版 具有文件系统标准权限控制、权限访问控制和RAM用户认证等多种安全机制,从而保证文件系统数据安全万无一失。线性扩展 文件存储 HDFS 版 能够为应用负载提供高吞吐量、高IOPS及低时延的存储性能。同时,其性能...

目录和文件访问权限

文件存储 HDFS 版 提供了用户和映射功能来管理用户和的映射关系,您可以通过该功能创建、删除以及查看用户和的映射关系。更多信息,请参见 通过API管理用户和的映射关系。umask 在创建文件或者目录的时候,如果不指定权限会有一个...

错误处理

400 InvalidPartOrder 无效的分片顺序 400 InvalidTargetBucketForLogging 日志转存操作中指定用于存储日志记录的Bucket无效 400 InternalError OSS内部错误 500 MalformedXML XML格式非法 400 MethodNotAllowed 不支持该方法 405 ...

概述

表格存储 表格存储(Tablestore)是阿里云自研的结构化数据存储,提供海量结构化数据存储以及快速的查询和分析服务,具备PB级存储、千万TPS以及毫秒级延迟的服务能力。云存储网关 云存储网关(Cloud Storage Gateway)是一款可以部署在用户...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
对象存储 文件存储NAS 云存储网关 云数据库 RDS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用