计算与分析概述

Spark 宽表模型 使用Spark计算引擎 使用Spark计算引擎时,支持通过E-MapReduce SQL或者DataFrame编程方式访问 表格存储。Hive或者HadoopMR 宽表模型 使用Hive或者HadoopMR 使用Hive或者HadoopMR访问 表格存储 中的数据。函数计算 宽表模型 ...

功能特性

数据存储 功能集 功能 功能描述 参考文档 元数据存储 宽表模型 宽表模型(WideColumn)是类Bigtable/HBase模型,可应用于元数据、大数据等多种场景。宽表模型通过数据表存储数据,单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、...

使用CNFS管理NAS隔离存储卷(推荐)

容器服务 Kubernetes 版 支持以NAS隔离存储卷的方式挂载和使用CNFS。在多租户环境或其他需要数据隔离的场景中,您可以 通过CNFS管理NAS隔离存储卷,在多个应用或Pod之间挂载同一个NAS文件系统的不同目录,使得 每个目录均对应一个存储卷,...

使用限制

000,但在不同的读写方式下,实际能达到的值如下:读写方式 QPS 顺序读写 2,000 非顺序读写 10,000 如果您在上传大量文件时,在命名上使用了顺序前缀(如时间戳或字母顺序),可能会出现大量文件索引集中存储存储空间中某个特定分区的...

安装表格存储Java SDK

安装 表格存储 Java SDK后,即可在编写代码时调用 表格存储 SDK的接口。本文介绍如何安装 表格存储 Java SDK。环境准备 安装 表格存储 Java SDK需使用JDK 6及以上版本。已安装Java开发工具,例如IntelliJ IDEA、Eclipse等。安装方式 重要 ...

使用CNFS管理NAS共享存储卷(推荐)

容器服务 Kubernetes 版 支持以NAS共享存储卷的方式挂载和使用CNFS。通过CNFS管理NAS共享存储卷,您可以在多个应用或Pod之间挂载同一个NAS文件系统的相同目录,以解决Pod之间共享数据的问题。本文以StatefulSet类型应用为例介绍如何使用...

SQL查询介绍

背景信息 为了满足用户业务平滑迁移到表格存储以及使用SQL方式访问表格存储的需求,表格存储在传统的NoSQL结构化存储之上,提供云原生的SQL引擎能力。SQL查询兼容MySQL的查询语法,同时提供基础的SQL DDL建表能力。对于已有数据表,通过...

CDN加速和OSS传输加速的区别

概述 本文主要介绍阿里云对象存储OSS的传输加速功能和CDN加速OSS资源的区别,以便您根据实际业务进行选择。详细信息 阿里云对象存储OSS以海量、安全、低成本、高可靠等特点已经成为用户存储静态资源和文件的首要选择,实际使用中面向全球...

转换存储类型

OSS支持标准、低频访问、归档、冷归档、深度冷归档多种存储类型,您可以通过生命周期规则或者CopyObject的方式随时转换文件(Object)的存储类型。警告 对开通了OSS-HDFS服务的Bucket,建议不要修改OSS-HDFS的数据存储目录.dlsdata/下任意...

安装表格存储Python SDK

安装SDK 您可以通过pip、GitHub或SDK源码方式安装表格存储Python SDK,请根据实际需要选择合适的安装方式。通过pip安装 执行如下命令直接通过pip进行SDK安装。sudo pip install tablestore 通过GitHub安装 通过命令从GitHub下载表格存储SDK...

多元索引计量计费

计费项 计费项 计费方式 描述 数据存储量 按量付费 资源包 单位为GB,不足1 GB的按1 GB向上取整。表格存储对索引的数据总量按小时计费。由于索引中字段类型、索引类型的不同会导致最终占用的系统资源差异极大,索引的存储量未按照数据表的...

表格存储收费方式详解

表格存储支持后付费,根据一个账单周期内各个资源的实际使用量进行计量计费,无需额外购买实例费用。目前表格存储一共有4个维度的计量项。表格存储根据账单周期(小时)中的实际使用量来进行计量计费。数据存储量 预留读吞吐量和预留写吞吐...

转换文件存储类型

OSS提供标准、低频访问、归档、冷归档和深度冷归档多种存储类型,全面覆盖从热到冷的各种数据存储场景。本文主要介绍如何转换文件(Object)的存储类型。注意事项 当您使用webpack或browserify等打包工具时,请通过 npm install ali-oss 的...

部署本地块网关控制台

Hypervisor 支持的安装方式 安装文件的格式 VMware vSphere 使用OVA导入方式安装云存储网关 ova KVM 使用Virt-Manager通过qcow2 安装云存储网关 qcow2 Hyper-V 支持使用现有VHD创建虚拟机的方式安装 vhd 步骤一:下载镜像 登录 云存储网关...

什么是文件存储 HDFS 版

文件存储 HDFS 版和对象存储OSS双向数据迁移 文件存储 HDFS 版和数据库MySQL双向数据迁移 迁移开源HDFS的数据到文件存储 HDFS 版 产品定价 文件存储 HDFS 版 计量项包括标准吞吐、预置吞吐,计费方式支持按量付费方式。详细的计费规则,请...

流计算

使用Spark的DataFrame方式访问表格存储,并在本地和集群上分别进行运行调试。前提条件 了解Spark访问表格存储的依赖包,并在使用时通过Maven方式引入项目中。Spark相关:spark-core、spark-sql、spark-hive Spark Tablestore connector:...

测试模型

编码方式 长度 userid string 4-Byte-Hash+Long.toHexString 20 属性列 属性列名 类型 长度 field0 string 100 field1 string 100 field2 string 100 field3 string 100 field4 string 100 分区数量 表格存储的自动负载均衡机制能够根据表...

批计算

使用Spark的DataFrame方式访问表格存储,并在本地和集群上分别进行运行调试。前提条件 了解Spark访问表格存储的依赖包,并在使用时通过Maven方式引入项目中。Spark相关:spark-core、spark-sql、spark-hive Spark Tablestore connector:...

安装文件系统SDK

本文档主要介绍 文件存储 HDFS 版 文件系统SDK的安装及使用方式。前提条件 已创建 文件存储 HDFS 版 文件系统并添加挂载点。具体操作,请参见 创建文件系统 和 添加挂载点。已为ECS实例安装JDK,且JDK版本不低于1.8。背景信息 本文以hadoop...

动态修改schema

如果由于业务变更、性能优化等情况需要在多元索引中新增、更新或者删除索引列以及修改多元索引的路由键和预排序方式,您可以通过动态修改多元索引的schema实现。动态修改schema操作包括为源索引创建灰度索引并修改多元索引schema、等待表...

加速管理概述

远距离数据传输加速 GB、TB级大文件上传和下载 动态、非热点数据下载加速 OSS存储节点分布在全球主要区域。远距离以及大文件的上传和下载加速。所有的访问都是回源到OSS,占用OSS的服务带宽。同一区域大量用户集中访问资源的情况下,传输...

创建投递任务

format:投递的数据的存储以Parquet列存格式存储,数据湖投递默认使用PLAIN编码方式,PLAIN编码方式支持任意类型数据。eventTimeColumn:事件时间列,用于指定按某一列数据的时间进行分区。如果不设置此参数,则按数据写入表格存储的时间...

创建投递任务

Format:投递的数据的存储以Parquet列存格式存储,数据湖投递默认使用PLAIN编码方式,PLAIN编码方式支持任意类型数据。EventTimeColumn:事件时间列,用于指定按某一列数据的时间进行分区。如果不设置此参数,则按数据写入表格存储的时间...

存储网关软件版公测

存储网关软件版是一款可以安装在阿里云用户ECS上或者用户本地数据中心客户端的产品,提供类似ossfs的功能,使用云存储网关软件版可以将OSS桶挂载到客户端本地以POSIX文件接口进行访问,从而您可以像操作本地文件一样操作OSS里面的文件。...

对象存储OSS

存储类型 OSS提供标准存储、低频访问存储、归档存储、冷归档存储和深度冷归档存储多种存储类型,全面覆盖从热到冷的各种数据存储场景。存储类型 说明 标准存储 提供高可靠、高可用、高性能的对象存储服务,能够支持频繁的数据访问。适用于...

产品技术服务

申请方式 您可以根据业务场景需要通过 专家服务 申请 表格存储 专家一对一支持。申请通过后,我们会尽快通过手机号钉钉联系您。适用场景 表格存储 专家服务适用场景如下:原有产品架构面临性能、扩展性等瓶颈,考虑使用 表格存储 优化或...

通过控制台投递数据到OSS

通过表格存储控制台创建投递任务,将表格存储数据表中的数据投递到OSS Bucket中存储。前提条件 已开通OSS服务且在表格存储实例所在地域创建Bucket,详情请参见 开通OSS服务。说明 数据湖投递支持投递到和表格存储相同地域的任意OSS Bucket...

功能发布记录

本文介绍了表格存储每次发布涉及的功能变更及对应的文档,帮助您了解 表格存储 的发布动态。2023年 2023年12月 功能名称 功能描述 发布时间 发布地域 相关文档 时序分析存储商业化 使用分析存储(Analytical Store)功能,您可以低成本存储...

使用SDK

数据湖投递默认使用PLAIN编码方式,PLAIN编码方式支持任意类型数据。目前仅支持Parquet,一般无需配置,保持默认即可。eventTimeColumn:事件时间列,用于指定按某一列数据的时间进行分区,配置项包括时间列名和时间格式。其中时间格式...

索引介绍

同时,基于共享存储的架构实现了动态负载均衡,不需要数据库层进行副本数据复制。提供了表模型。相比纯粹的Key-value数据库,表格存储具有列和多版本的概念,可以单独对某列进行读写。表模型也是一种比较通用的模型,可以方便与其他系统...

新功能发布记录

本文介绍对象存储OSS每次发布涉及的功能变更及对应的文档,帮助您了解OSS的发布动态。2024年04月 功能名称 功能概述 发布时间 支持地域 相关文档 文档智能处理 由智能媒体管理(IMM)提供的针对文档的AI处理功能,包括文档内容翻译、文档...

监控与日志

日志服务 表格存储集成了阿里云日志服务SLS,您可以在 审计日志 页面开通审计日志功能,通过日志服务收集和处理云产品的操作信息、运行状态、业务动态等日志数据,并进行实时分析和投递,实现对日志的实时监控和审计。关于如何在表格存储中...

对接DataV

通过DataV控制台添加表格存储数据源后,您可以使用DataV可视化展现表格存储的数据。前提条件 首次使用表格存储时,请开通表格存储服务以及创建实例和数据表等。具体操作,请参见 通过控制台使用 或者 通过命令行工具使用。首次使用DataV时...

监控与日志

日志服务 文件存储NAS集成了阿里云日志服务SLS,您可在您可以在 审计日志 页面开通审计日志功能,通过日志服务收集和处理云产品的操作信息、运行状态、业务动态等日志数据,并进行实时分析和投递,实现对日志的实时监控和审计。关于如何在...

配置NAS NFS存储卷容量

仅支持子目录挂载方式设置配额。对于单个文件系统,最多允许对500个目录设置配额。设置限制性配额后,如果文件使用量超过限制会导致增加文件长度,创建文件、目录和特殊文件,移动文件到目录等写入操作失败,应用层会收到IOError。由于限制...

通过SLS完成日志数据入湖OSS

数据湖支持在低存储成本的情况下,更好地满足数据长期存储、查询、分析、读取等需求。本文介绍通过日志服务SLS完成日志数据入湖的操作方式。前提条件 已在日志服务Project所在的地域创建Bucket。具体操作,请参见 控制台创建存储空间。背景...

批计算

对于批计算,Tablestore on Spark提供索引选择、分区裁剪、Projection列和Filter下推、动态指定分区大小等功能,利用表格存储的全局二级索引或者多元索引可以加速查询。前提条件 已创建E-MapReduce Hadoop集群。具体操作,请参见 EMR快速...

计费说明

本文介绍阿里云产品DBFS服务的计量项及计费方式,您可以通过本文了解DBFS服务费用收取详情。计量项 DBFS计费按以下计量项进行:版本类型 计量项 计费标准 企业版 存储空间 按当前文件系统存储空间的容量与使用时长进行计费。标准版/企业版 ...

大文件上传如何续传

归档存储数据的上传方式有两种:一种是直接上传完整的文件,这种方式简单快速直接,但是会限制上传文件最大为 6GB。另外一种方式是分段上传,称为Multipart Upload。将上传文件分块,逐步上传每个分块,最后调用完成文件上传接口。由于 ...

事件告警

方式一 登录 云存储网关控制台。单击左侧 事件告警,进入网关事件告警页面。参数 说明 告警类型 目前文件网关仅支持三种告警类型。元数据空间不足 限流 上传队列堆积 告警级别 当前告警的级别。网关ID 当前告警的网关ID。说明 您可以单击 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
对象存储 云存储网关 混合云存储 文件存储 CPFS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用