for-each节点逻辑原理介绍
内置变量 提供遍历节点（for-each节点）变量取值与遍历次数案例说明 上游赋值节点为Shell时取值示例、上游赋值节点为ODPS SQL时取值示例 应用场景 DataWorks的for-each节点主要用于有循环遍历的场景，且需要与 赋值节点 联合使用，将赋值...
物联网存储介绍
时序引擎：时序引擎针对时间序列数据的特点进行设计，提供高压缩比存储，用于设备时序数据的存储与分析。索引引擎：索引引擎采用了倒排索引、空间索引等存储结构，能够支持全文检索、任意字段组合检索以及统计聚合，用于设备元数据和设备...
数据湖投递概述
数据分层的存储与访问体验 数据投递到OSS后，表格存储 提供数据表、索引表、投递OSS等分层数据。满足不同场景的使用分析需求。注意事项 目前支持使用数据湖投递功能的地域有华东1（杭州）、华东2（上海）、华北2（北京）和华北3（张家口）...
多元索引计量计费
使用多元索引时，索引数据会产生额外的数据存储量，索引查询也会消耗读吞吐量，同时多元索引的各计费项的价格和高性能实例费用一致，因此在容量型实例中使用多元索引时会产生高性能的存储与读写计费。如何查看多元索引的计量数据？您可以...
宽表模型介绍
宽表模型在车联网场景中主要用于车辆元数据的存储与分析。说明 关于宽表模型的更多信息，请参见 宽表模型。模型构成 组成部分 描述 主键（Primary Key）主键是数据表中每一行的唯一标识，主键由1到4个主键列组成。分区键（Partition Key）...
方案实现
在前文的方案与架构基础上，本文介绍如何使用表格存储的Timeline模型实现Feed流系统的存储与同步功能。模型介绍 本文使用表格存储作为存储和同步系统，并主要使用Timeline模型、基于推模式进行同步。表格存储消息（Timeline）模型是针对...
CDH6数据迁移
背景信息 CDH（Cloudera's Distribution,including Apache Hadoop）是众多Hadoop发行版本中的一种，您可以使用 文件存储 HDFS 版 替换CDH6原有的本地HDFS服务，通过CDH6和 文件存储 HDFS 版 实现大数据计算在云上的存储与计算分离，应对...
多元索引介绍
在容量型实例中，使用多元索引时为什么会产生高性能的存储与读写计费？如何查看多元索引的计量数据？多元索引预留读吞吐量支持使用预留CU套餐进行抵扣吗？相关文档 如果要使用SQL查询与分析数据，您可以使用表格存储的SQL查询功能实现。更...
内切圆
您可以通过内切圆参数，将OSS内存储的图片处理成内切圆。本文介绍对象存储OSS图片处理中的内切圆功能参数及示例。参数说明 操作名称：circle 相关参数如下：参数 描述 取值范围 r 指定内切圆的半径。[1,4096]注意事项 如果图片的最终格式是...
应用场景
车联网场景中涉及的车辆数量大、数据规模大、数据种类多、数据来源广，因此需要支持众多车辆数据的高并发写入、存储与统计分析。车联网场景中数据存储与分析的核心需求如下：数据高并发写入：面向众多车辆，需要支持百万级节点实时写入。...
碎片如何计费？
费用说明 Part的存储类型与Object的存储类型一致，但是Part无最小计量限制。即某个Part小于64 KB，仍然按照Part的实际大小计算。关于Part存储费用的更多信息，请参见 存储费用。建议做法 为避免因Part导致的额外存储费用，您可以选择以下...
应用场景
表格存储 数据湖架构能有效的解决大数据领域面临的数据存储与数据分析问题，典型应用场景包括推荐系统和舆情&风控分析场景。推荐系统 推荐系统作为当前所有业务精细化运营的主要手段，广泛应用在电商、短视频、新闻等场景，具有数据量大、...
方案背景
因此车联网场景下车辆元数据存储与分析的需求如下：数据存储：车辆元数据定时上报到数据网关并且转发到下游存储，需要支持大规模数据存储。数据更新：海量车辆元数据会频繁更新，需要支持数据高并发实时更新。数据检索：根据车辆的参数检索...
0014-00000044
问题原因 您发起了PutBucketLifecycle请求，但是请求体XML中通过 Transition 节点指定的存储类型与该接口支持转换的存储类型不相符。问题示例 以下请求体XML第一个 Transition 节点下的 StorageClass 取值为test，取值非法导致请求错误。...
方案背景
因此车联网场景下车辆轨迹数据存储与分析的需求如下：数据存储：车辆轨迹数据会随着时间动态变化，要长期保存车辆轨迹信息，需要单表规模极大以及高性价比存储。数据写入：面向众多车辆，需要支持百万级节点实时写入。数据检索：根据多个...
功能特性
文件存储 HDFS 版 支持的原生文件系统语义被开发人员和用户熟知，您无需在迁移到云时学习新的存储范例。从传统HDFS迁移到 文件存储 HDFS 版，不会丢失任何文件元信息，包括目录结构、文件创建时间等。共享访问 一个 文件存储 HDFS 版 实例...
文件存储HDFS版
扩展性和弹性 文件存储HDFS版能够为应用负载提供高吞吐量、高IOPS及低时延的存储性能。同时，其性能与容量成线性关系，可满足业务增长时对更高容量与存储性能的需求。安全性 文件存储HDFS版具有文件系统标准权限控制、权限组访问控制和RAM...
0014-00000053
问题描述 PutBucketLifecycle请求的请求体XML中 Transition 节点下通过 StorageClass 指定的存储类型与 ReturnToStdWhenVisit 选项指定的值互斥。问题原因 Transition 的子节点 ReturnToStdWhenVisit 用于指定Object转为非标准存储后，再次...
跨账号授权
说明 如果需要了解同账号下的表格存储与MaxCompute对接操作，请参见 同账号下使用MaxCompute访问表格存储。准备工作 跨云账号需要两个阿里云账号，账号A将访问权限授予账号B，则运行MaxCompute时，账号B可以访问账号A下的表数据。账号基本...
资源包介绍
重要 如果在容量型实例中使用了多元索引，则会产生高性能存储与读写计费。此时您需要购买高性能存储资源包和预留CU套餐进行抵扣。更多信息，请参见 多元索引计量计费。套餐规格 通过费用中心导出资源的历史计量数据并统计分析，预估后续的...
数据集成服务
迁移方案 请根据实际业务需求通过DataWorks数据集成实现表格存储与不同数据源之间的数据迁移。数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步...
Tablestore HBase Client 支持的功能
表格存储与 HBase 的 API 区别 作为 NoSQL 数据库服务，表格存储为您屏蔽了数据表分裂、Dump、Compact、Region Server 等底层相关的细节，您只需要关心数据的使用。因此，虽然与HBase在数据模型及功能上相近，Tablestore HBase Client 与...
存储在OSS中的GIF文件使用图片样式后变成静态图片
问题描述 在使用阿里云对象存储OSS的图片处理服务时，GIF格式的文件使用图片样式进行图片缩放或添加水印后，变成静态图片。原图URL和图片处理后的URL示例如下：原图URL为：...
时序分析存储概述
分析存储与时序表的数据存储相互独立，允许用户自定义数据的生命周期（TTL），对分析存储的查询操作不会对时序表的读写性能产生影响。分析存储能够自动同步时序表数据，在数据写入速率稳定的情况下，同步操作的延迟通常在10分钟内，如果...
时序模型计量计费
时间线数据包括产生数据的时间和对应的数据值，是时序模型中数据存储与读写操作的主要计费部分。其中数据存储支持选择高性能存储或者容量型存储，读写操作按照容量型进行计量计费。时间线元数据也称为时间序列元数据，表示一条时间线的标识...
什么是文件存储NAS
NAS提供了通用型和极速型两种存储类型，请根据使用场景选择合适的存储类型。通用型NAS 通用型NAS用于存储频繁访问的热数据，分为通用容量型NAS、通用高级型NAS和通用性能型NAS。适用于Linux或Windows企业应用、Web内容管理、数据库备份、...
基本概念
存储包与支持的文件系统的存储类型相关。例如，删除绑定存储包的容量型文件系统后，解绑的存储包无法绑定到性能型文件系统上。删除绑定存储包的性能型文件系统后，解绑的存储包无法绑定到容量型文件系统上。挂载 挂载是将计算节点与NAS文件...
通过控制台使用分析存储
在 表格存储 控制台创建时序模型实例后，您可以在实例下创建分析存储并使用SQL查询时序数据。注意事项 时序分析存储功能将从2023年12月20日正式开始收费。目前支持使用时序分析存储功能的地域有华东1（杭州）、华东2（上海）、华北2（北京...
OSS图片格式转换提示“Maximum width and height ...
问题描述 转换存储在阿里云对象存储OSS内图片的格式时，提示“Maximum width and height allowed is 16383 pixels for converting webp”错误。问题原因 WebP格式图片的边长限制为16383像素，您的图片超过了这个限制。解决方案 在转换存储...
生命周期管理FAQ
删除策略之前，如果数据已经转储到低频存储或归档存储，数据仍会继续保存在低频存储或归档存储中，并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间，请参见 创建数据...
计费说明
计量项 DBFS计费按以下计量项进行：版本类型 计量项 计费标准 企业版 存储空间 按当前文件系统存储空间的容量与使用时长进行计费。标准版/企业版 快照 根据云盘快照费用进行计费。价格总览 版本类型 地域 单价（GB/小时/元）标准版 杭州、...
时序模型介绍
使用时序模型时，时间线数据占用的存储空间类型与所用实例规格（容量型存储或高性能存储）一致，时间线元数据占用的存储空间为高性能存储，查询与分析时序表中数据时会消耗计算资源。按量模式：时序模型计费项包括时间线数据和时间线元数据...
快速入门
本文将帮助您快速部署和使用阿里云 文件存储 HDFS 版。您将完成创建 文件存储 HDFS 版 文件系统并完成挂载操作。...核算存储量是指5 MiB×Inode（包括文件和目录）数量获得的存储量。Inode数量可以通过控制台和容量监控获得。
生命周期配置元素
以下总结了Object执行的生命周期配置规则操作的行为与包含Object的存储空间的版本控制状态的关系。未开启版本控制的Bucket 操作 说明 Transition 达到Object生命周期中指定的日期或时间段时，将Object转换为指定存储类型（StorageClass）。...
文件系统存储类型
标准存储与低频存储、归档存储的关系如下图所示。数据存储 数据取回 成本节省计划 低频存储和归档存储是针对存储在标准存储空间中的冷数据进行成本优化。设置生命周期管理策略，您可以根据业务实际访问数据的情况自动分级存储数据，从而...
通过PrestoDB使用Tablestore
字段类型映射 表格存储与PrestoDB都有其自身的类型，两者之间的字段类型对应关系请参见下表。Tablestore的字段类型 PrestoDB的字段类型 string varchar integer bigint double double boolean boolean binary varbinary 使用流程 通过...
查询Bucket级别的用量情况
基础数据 说明 标准存储-原始容量 标准存储类型的存储量。存储总计费容量 各种存储的计费存储量。使用带宽：记录各时段存储空间使用带宽。基础数据 说明 VPC流入 通过阿里云专有网络上传数据到OSS所使用的带宽。VPC流出 通过阿里云专有网络...
通过NFS使用NAS动态存储卷
本文介绍如何使用阿里云NAS动态存储卷，以及如何验证NAS存储卷的持久化存储与共享存储特性。前提条件 已创建ACK集群。具体操作，请参见 创建Kubernetes托管版集群。ACK集群中CSI组件已升级至最新版本。更多信息，请参见 管理CSI组件。使用...
二级索引简介
将数据表的一个预定义列作为索引表的属性列后，查询数据时无需反查数据表即可得到该列的值，但是同时增加了相应的存储成本。反之则需要根据索引表反查数据表。使用全局二级索引时，请选择合适的列作为索引表的第一个主键列。由于可能导致...
集成概览
本文为您介绍文件存储 CPFS支持的集成方案。OpenAPI集成 文件存储 CPFS提供文件系统、权限组、挂载点、数据流动、协议服务、Fileset等功能的OpenAPI，您可在业务系统中进行集成。关于如何使用阿里云OpenAPI，请参见 使用OpenAPI。版本说明 ...
- 产品推荐
- 这些文档可能帮助您