离线存储授权
iGraph引擎的离线系统需要的权限列表：Object Action 说明 Project Read 查看项目自身（不包括项目的任何对象）的信息，例如CreateTime。Project List 查看项目所有类型的对象列表。Table Describe 读取表的元信息。Table Select 读取表的...
离线存储授权
2.在创建实例时选择历史数据启动，配置启动数据源、配置实时数据源、配置离线数据源详见：通过历史数据启动实例。重要 1、在配置启动数据源之前，需要在MaxCompute中授权给智能推荐的openias可读权限，详见下文：MaxCompute授权流程。2、在...
离线数据存储概述
您可以使用物联网平台提供的离线数据存储功能，查看您设备基本情况和上报的设备物模型数据。离线数据包括平台系统表、时序表、快照表和自定义存储表。本文介绍不同类型存储表的基本功能和应用场景。前提条件 已备份数据，具体操作，请参见 ...
ListOfflineStorages-查询离线存储
查询离线存储。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 GET/v2/openapi/instances/[instanceId]/...
ModifyOfflineStorages-修改实例的离线存储配置
修改实例的离线存储配置。（只支持三张表同时修改）。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 ...
管理离线数据归档
对离线存储中较为久远的数据暂无数据分析需求时，可以通过配置数据归档，来降低数据的存储成本。本文介绍数据归档的使用和计费说明及开启、更改和撤销归档的具体操作。前提条件 已开启产品数据备份。存储数据的归档周期必须小于实例下设备...
初始化
上图为TimeStream模型的结构示意图，其中时序数据是存储到数据表中，时间线是存储到元数据表（Meta表）中。数据表可以根据业务需求创建多个，但元数据表只能有一个。所有数据表的时间线元数据写入到同一个元数据表中，您通过...
新功能发布记录
2020-09-30 全部 什么是文件存储CPFS 文件存储CPFS 1.0（商用）文件存储CPFS 1.0版本提供高可用、高可靠、高可扩展、高性能的能力，适用各种高性能计算HPC场景。2019-08-09 部分 什么是文件存储CPFS 文件存储CPFS（公测）CPFS并行文件系统...
环境准备
更多信息，请参见 什么是表格存储。表格存储通道服务（Tunnel Service）是基于表格存储数据接口上的全增量一体化服务。通道服务提供了增量、全量、增量加全量三种类型的分布式数据实时消费通道。通过为数据表建立数据通道，您可以通过流式...
常见问题
产品简介FAQ 什么是文件存储NAS？文件存储NAS支持哪些访问协议？如何选择NFS和SMB文件系统协议？每个账户可以创建多少个文件系统、文件系统有什么限制？更多产品简介常见问题 产品定价FAQ 开通NAS服务后，就开始计费吗？购买了存储包为什么...
入门概述
什么是文件存储CPFS 产品规格 使用限制 文件存储CPFS的文件系统类型 文件存储CPFS支持两种文件系统类型，分别为CPFS和CPFS智算版。您可以根据业务负载选择其中一种或几种文件系统，为业务负载提供必要的可靠性、安全性和持续性。更多详情，...
方案背景
更多信息，请参见 什么是表格存储。多元索引基于倒排索引、列式存储、空间索引等，可解决大数据的复杂查询、分析聚合等需求。通过为数据表创建多元索引，可实现全文检索、前缀查询、模糊查询、组合查询、统计聚合等功能。样例场景 某大型...
CPFS存储卷概述
更多信息，请参见 什么是文件存储CPFS。适用场景 推荐在容器场景对低延迟，百万以上小文件的读写需求，包括AI深度训练、自动驾驶、基因计算、EDA仿真、石油勘探、气象分析以及影视渲染等需要超高吞吐场景的使用。根据业务需求，您可以对...
概述
更多信息，请参见 什么是表格存储。云原生大数据计算服务（MaxCompute）是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型，能够更快速的解决用户海量数据计算问题，...
通过函数计算转存离线日志
通过阿里云的函数计算转存离线日志功能，当CDN产生新的离线日志时，它会触发预设的函数计算逻辑，自动地、无服务器地将这些日志文件传输到对象存储服务（OSS）。这样，无需人工干预或额外运维成本，就能实现日志数据的安全、高效、稳定的...
入门概述
什么是文件存储NAS 如何选用NAS、OSS和EBS？产品优势 文件存储NAS的规格类型 文件存储NAS提供3种类型的文件系统，支持NFS协议或SMB协议。您可以根据业务负载选择其中一种或几种文件系统，为业务负载提供必要的可靠性、安全性和持续性。更多...
数据迁移概述
什么是离线迁移（闪电立方）OSS API或SDK 使用OSS API或SDK编写代码实现数据上云，适用于有特性需求，且具有较强开发能力的用户。OSS API OSS SDK OSS外部表（gpossext功能）云原生数据仓库AnalyticDB PostgreSQL版支持通过OSS外部表...
常见问题
OSS适合存储什么？OSS适合存储论坛网站与软件应用中的附件、高清图片、音视频、备份文件等，以及各种App应用、多终端同步软件、网盘下载站的文件。使用OSS，开发人员能够解决哪些使用本地解决方案无法解决的问题？OSS让任何开发人员都可以...
一般性问题
1.数据库文件存储DBFS是什么，适合什么场景？数据库文件存储DBFS是面向数据库场景优化的POSIX兼容的共享读写的文件存储系统。主要适用于：OLTP及OLAP数据库场景：例如，MySQL、PostgreSQL等。NoSQL数据库场景：例如，MongoDB、RocksDB等。2...
新功能发布记录
2022-05-20 华东1（杭州）、华南1（深圳）、华南2（河源）、华北2（北京）、西南1（成都）什么是OSS ON云盒 2022年03月 功能名称 功能概述 发布时间 支持地域 相关文档 数据索引（Data Indexing）数据索引是OSS对外提供的文件（Object）...
将MaxCompute数据同步到表格存储
如果需要将MaxCompute计算分析后的数据同步到表格存储中存储或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到表格存储后，您可以使用表格存储查询与分析数据。背景信息 表格存储...
Kafka数据接入
云消息队列 Kafka 版 广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域，已成为大数据生态中不可或缺的部分。更多信息，请参见 什么是云消息队列 Kafka 版？说明 基于Tablestore Sink Connector，您也可以将...
容器与云原生
从零入门Serverless|Serverless应用如何管理日志&持久化数据 解决方案 云原生存储的思考（一）什么是云原生存储 云原生存储的思考（二）云原生存储新的场景，挑战，解决方案和Roadmap 云原生时代，谁是容器的最终归宿？ACK集群低成本高弹性...
快速入门
文件存储 HDFS 版 适用于互联网行业、金融行业等有大数据计算与存储分析需求的行业客户进行海量数据存储和离线计算的业务场景，充分满足以Hadoop为代表的分布式计算业务类型对分布式存储性能、容量和可靠性的多方面要求。开通 文件存储 ...
迁移工具
迁移工具 说明 应用场景 DataWorks/DataX DataWorks数据集成是稳定高效、弹性伸缩的数据同步平台，底层实现依赖于DataX离线数据同步工具。适用于MySQL、Oracle、SQLServer等多种异构数据源之间的数据迁移同步。DataWorks/DataX将不同数据源...
常见问题
表格存储 单表提供PB级数据存储规模，无需分库分表，同时支持千万QPS，可以轻松满足IoT设备、监控系统等时序数据的存储需求，大数据分析SQL直读以及高效的增量流式读接口让数据轻松完成离线分析与实时流计算。表格存储 提供了各个场景下的...
迁移开源HDFS的数据到文件存储 HDFS 版
具体操作，请参见 离线迁移。常见问题 整体迁移速度受Hadoop集群与 文件存储 HDFS 版 之间的带宽、集群规模影响。同时传输文件越多，checksum需要的时间越长。如果迁移数据量大，建议先尝试迁移几个目录评估整体时间。如果只能在指定时间段...
0015-00000225
问题描述 云盒不支持指定的存储类型。问题原因 您发起了PutBucket请求，但是云盒环境不支持您在请求中指定的存储类型（StorageClass）。...ColdArchive 存储类型，您就会看到该错误。...相关文档 PutBucket 存储类型介绍 什么是OSS ON云盒
数据导出到OSS概述
同步表格存储数据到OSS时，离线同步任务中会涉及到配置表格存储相关的Reader插件和OSS相关的Writer插件。相关插件说明如下：表格存储相关的Reader插件 根据数据同步方式不同，要使用的表格存储相关的Reader插件不同。具体说明请参见下表。...
数据总览
说明 项目存储及表占用的逻辑存储显示离线统计时间的用量，并且显示的为逻辑存储大小。项目存储量除表存储量外，还会计算包括资源存储量、回收站存储量及其它系统文件存储量等在内，因此会大于表存储量。表的存储计费计算的是表的逻辑存储...
现代IM系统中的消息系统—模型
而同步库是用于写扩散模式的在线或离线推送，通常设定一个较短的保存时间。极高的写入吞吐：各类场景下的消息系统，除了类似微博、头条这种类型的Feeds流系统，像绝大部分即时通讯或朋友圈这类消息场景，通常是采用写扩散的消息同步模式，...
方案背景
大数据计算场景：推荐系统，订单类业务等 实时数据计算场景：监控系统，电商数字大屏等 样例场景 某电商公司为了完成电商运营数据的分析和展示，使用表格存储统一存储电商数据，通过Spark的流批处理离线聚合或实时统计电商数据，最终在...
将HBase数据同步到表格存储
步骤一：下载DataX DataX 是一个异构数据源离线同步工具，本示例中使用DataX将HBase中的数据同步到表格存储。您可以选择下载DataX的源代码（开源）进行本地编译或者直接下载编译好的压缩包。通过GitHub下载DataX的源代码 安装Git工具，...
0004-00000401
问题描述 上传请求被流控。问题原因 您发起的上传请求超出了流控限制。问题示例 您发起了对某个Bucket的上传请求，但是因为上传流量过大...如果您的业务（如大数据离线处理等）有更大的带宽（10 Gbit/s~100 Gbit/s）需求，请联系 技术支持。
现代IM系统中的消息系统—架构
而对于离线的用户或者消息无法实时同步成功时，消息会持久化到离线库，当接收方重新连接后，会从离线库拉取所有未读消息。当离线库中的消息成功同步到接收方后，消息会从离线库中删除。传统的消息系统，服务端的主要工作是维护发送方和接收...
0004-00000402
问题描述 下载请求被流控。问题原因 您发起的下载请求超出了流控限制。问题示例 您发起了对某个Bucket的下载请求，但是因为单位时间内下载...如果您的业务（如大数据离线处理等）有更大的带宽（10 Gbit/s~100 Gbit/s）需求，请联系 技术支持。
0004-00000304
问题描述 请求被流控。问题原因 您发起的请求超出了流控限制。问题示例 您发起了对某个Bucket的上传请求，但是因为上传流量过大触发了流控...如果您的业务（如大数据离线处理等）有更大的带宽（10 Gbit/s~100 Gbit/s）需求，请联系 技术支持。
文件存储HDFS版
将Hadoop或其他机器学习应用部署在多个计算资源上，应用可以直接通过Hadoopfs接口访问数据进行离线或在线计算，也可以直接将计算结果输出到文件存储HDFS版做永久保存。性能 衡量文件存储HDFS版的性能指标主要是吞吐能力。吞吐最大不会超过...
常见问题
产品简介FAQ 云存储网关提供哪些服务？云存储网关支持哪些协议？产品原理FAQ 文件网关中的文件与OSS间的映射关系如何？文件网关缓存的淘汰机制是什么？文件网关的缓存有什么作用？云存储网关文件上传原理解析是什么？极速同步如何保证反向...
- 产品推荐
- 这些文档可能帮助您