文件存储 HDFS 版和对象存储OSS双向数据迁移

本文档介绍 文件存储 HDFS 版 和对象存储OSS之间的数据迁移操作过程。您可以将 文件存储 HDFS 版 数据迁移到对象存储OSS,也可以将对象存储OSS的数据迁移到 文件存储 HDFS 版。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和...

SA混合云存储阵列

阿里云混合云存储阵列作为软硬一体的存储设备,集成了阿里云存储服务,融合了公共云存储和传统存储阵列的优点:简单 客户无需更改原有的IT架构,就可以像使用本地存储设备一样使用阿里云混合云存储阵列,同时使用本地存储空间和云端存储...

CDH6数据迁移

本文介绍如何将CDH中本地HDFS的数据迁移到 文件存储 HDFS 版,实现存储计算分离。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已在阿里云上创建ECS实例并安装CDH6集群。...

在文件存储 HDFS 版上使用TensorFlow

本文介绍如何在 文件存储 HDFS 版 上使用TensorFlow。前提条件 已开通 文件存储 HDFS 版 服务并。具体操作,请参见 开通文件存储HDFS版服务。已完成创建文件系统、添加挂载点和挂载文件系统。具体操作,请参见 快速入门。已为Hadoop集群...

cp(拷贝文件)

拷贝文件(Object)是指在不改变文件内容的情况下,将同一地域下的源存储空间(Bucket)内的文件复制到目标Bucket,或者将文件复制到相同存储空间(Bucket)的其他目录。您可以通过ossutil的 cp 完成拷贝。注意事项 要拷贝文件,您必须具有...

迁移开源HDFS的数据到文件存储 HDFS 版

本文档介绍如何将开源HDFS的数据平滑地迁移到 文件存储 HDFS 版。背景信息 当前业界有很多公司是以Hadoop技术构建数据中心,而越来越多的公司和企业希望将业务顺畅地迁移到云上。文件存储 HDFS 版 可以帮助您实现将开源HDFS的数据迁移到云...

方案实现

店铺(md5)(主键)类型 店铺名称 店铺位置 店铺评分 人均消费 o0057022192 0000000f470ef0ef0f0f548b925ceffela7e3 杭帮菜 韩村杭帮菜 36.76613,111.41461 2.87 63.67 步骤四:读取数据 数据读取分为两类:主键读取 基于原生表格存储的...

在文件存储 HDFS 版上使用Apache HBase

本文主要介绍在 文件存储 HDFS 版 上使用Apache HBase的方法。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK,且JDK版本不低于1.8。已部署...

NAS存储卷概述

您可以在容器服务Kubernetes集群中使用阿里云NAS存储卷。本文介绍NAS存储卷的使用场景、注意事项等。前提条件 使用NAS数据卷之前,您需要在 文件存储管理控制台 上创建文件系统,并在文件系统中添加挂载点。创建的NAS文件系统挂载点需要和...

快速入门

本文将帮助您快速部署和使用阿里云 文件存储 HDFS 版。您将完成创建 文件存储 HDFS 版 文件系统并完成挂载操作。部署成功后,您就可以像在Hadoop分布式文件系统(Hadoop Distributed File System)中一样管理和访问数据。前提条件 已开通 ...

通用型NAS计费

低频存储读流量 1 GiB×0.06元/GiB=0.06元 低频存储写流量 2 GiB×0.06元/GiB=0.12元 存储包+按量计费 假设张先生在华北2(北京)地域购买了500 GiB的存储包,需支付总费用165.195元,计费明细如下:计费项 费用 说明 通用型存储容量(容量...

使用NAS实现共享存储和持久化存储-Flexvolume

NAS提供了共享存储和持久化存储的服务,满足您需要多个Pod共享数据的应用场景。本文介绍如何使用NAS实现共享存储和持久化存储。前提条件 创建Kubernetes托管版集群。获取集群KubeConfig并通过kubectl工具连接集群。已在文件存储控制台创建...

0042-00000310

问题描述 UploadPartCopy请求中 x-oss-copy-source 参数指定的拷贝源文件为归档存储(Archive)类型。问题原因 您发起了UploadPartCopy请求来从一个已存在的Object中拷贝数据来上传一个Part,x-oss-copy-source 参数用来指定拷贝源。该参数...

创建时序表

当使用表格存储时序模型时,您需要使用CreateTimeseriesTable接口创建时序表用于存储时序数据。创建时序表时支持配置数据生命周期、时序时间线表的配置信息 和创建分析存储。分析存储可用于快速分析时序数据。前提条件 已通过控制台创建...

数据集成服务

数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...

更新多元索引信息

多元索引的TTL取值范围为-1或者int32的正整数(单位为秒),其中-1表示永久存储,int32最大值换算为年大约为68年。示例 更新多元索引的数据生命周期为8000000秒。let params={ tableName:tableName,indexName:indexName,timeToLive:8000000...

ListBucketDataRedundancyTransition

调用ListBucketDataRedundancyTransition列举某个Bucket下所有的存储冗余转换任务。注意事项 要列举Bucket下所有的存储冗余转换任务,您必须具有 oss:ListBucketDataRedundancyTransition 权限。具体操作,请参见 为RAM用户授权自定义的...

GetBucketDataRedundancyTransition

调用GetBucketDataRedundancyTransition接口获取存储冗余转换任务。注意事项 要获取存储冗余转换任务,您必须具有 oss:GetBucketDataRedundancyTransition 权限。具体操作,请参见 为RAM用户授权自定义的权限策略。每个地域都有对应的访问...

挂载文件存储 HDFS 版文件系统

本文介绍挂载及卸载 文件存储 HDFS 版 文件系统的操作。前提条件 已为ECS实例安装JDK,且JDK版本不低于1.8。已创建 文件存储 HDFS 版 文件系统并添加挂载点。具体操作,请参见 创建文件系统 和 添加挂载点。已安装Hadoop客户端,建议您使用...

使用Fuse-DFS挂载文件存储 HDFS 版

本文主要介绍如何使用Fuse-DFS工具实现 文件存储 HDFS 版 在本地文件系统的映射。前提条件 已 创建文件系统 和 添加挂载点。已为Hadoop集群所有节点安装JDK,且JDK版本不低于1.8。建议您使用的Hadoop版本不低于2.7.2,本文使用的Hadoop版本...

通道服务概述

通道服务(Tunnel Service)是基于表格存储数据接口上的全增量一体化服务。通道服务提供了增量、全量、增量加全量三种类型的分布式数据实时消费通道。通过为数据表建立数据通道,您可以简单地实现对表中历史存量和新增数据的消费处理。背景...

NAS存储卷FAQ

使用NAS存储卷时,提示chown:Operation not permitted 使用NAS动态存储卷时,Controller的任务队列已满且无法创建新的PV NAS存储卷挂载时间延长 使用NAS存储卷时,无法创建或修改目录 当工作负载挂载NAS存储卷时,提示unknown filesystem ...

更新多元索引信息

多元索引的TTL取值范围为-1或者int32的正整数(单位为秒),其中-1表示永久存储,int32最大值换算为年大约为68年。示例 更新多元索引的数据生命周期。response=$otsClient->updateSearchIndex(array('table_name'=>'php_sdk_test','index_...

ListUserDataRedundancyTransition

调用ListUserDataRedundancyTransition列举请求者所有的存储冗余转换任务。注意事项 要列举请求者所有的存储冗余转换任务,您必须具有 oss:ListUserDataRedundancyTransition 权限。具体操作,请参见 为RAM用户授权自定义的权限策略。每个...

0013-00000101

问题原因 您发起了 PutBucket 或 CopyObject 等请求,并在请求中通过 x-oss-storage-class 请求头指定存储类型,但是您指定的参数不是合法的OSS存储类型字符串。x-oss-storage-class 支持的取值如下:Standard:标准存储。IA:低频访问。...

DeleteBucketDataRedundancyTransition

调用DeleteBucketDataRedundancyTransition删除存储冗余转换任务。注意事项 要删除存储冗余转换任务,您必须具有 oss:DeleteBucketDataRedundancyTransition 权限。具体操作,请参见 为RAM用户授权自定义的权限策略。每个地域都有对应的...

测试环境

本章节为您介绍本次表格存储性能测试的测试环境。表格存储实例 本次测试使用了两个表格存储实例:高性能实例:位于华东1区域 容量型实例:位于华东1区域 说明 高性能实例与容量型实例的区别在于其磁盘类型不同,高性能实例使用了SSD磁盘,...

通过CNFS方式使用NAS文件系统

容器网络文件系统CNFS(Container Network File System)将阿里云的文件存储抽象为一个K8s对象(CRD)进行独立管理,包括创建、删除、描述、挂载、监控及扩容等运维操作,为了提升NAS文件系统的性能,您可以通过CNFS(Container Network ...

E-MapReduce数据迁移

本文介绍如何将E-MapReduce HDFS上的数据迁移到 文件存储 HDFS 版 文件系统。背景信息 阿里云E-MapReduce是构建在阿里云云服务器ECS上的开源Hadoop、Spark、Hive、Flink生态大数据PaaS产品。提供用户在云上使用开源技术建设数据仓库、离线...

使用CNFS自动扩容NAS存储

通过定义CNFS中托管的NAS存储卷的自动扩容策略,当NAS存储卷的使用率高于某个阈值时,触发NAS存储卷的自动扩容。本文介绍如何使用CNFS实现NAS存储卷的自动扩容。前提条件 已创建Kubernetes托管版集群,且存储插件选择为CSI。若需要新建集群...

创建时序表

当使用表格存储时序模型时,您需要使用CreateTimeseriesTable接口创建时序表用于存储时序数据。创建时序表时支持配置数据生命周期、时序时间线表的配置信息 和创建分析存储。分析存储可用于快速分析时序数据。前提条件 已通过控制台创建...

0013-00000105

问题描述 不支持将存储类型指定为冷归档(ColdArchive)。问题原因 该错误有两种原因:当前操作不支持指定存储类型为ColdArchive,例如AppendObject操作。当前用户或者当前地域不支持ColdArchive存储类型。问题示例 例如,您发起了...

SDS分布式存储

阿里云将分布式存储技术以及积累的公共云部署、运维的最佳实践融入到分布式存储产品中,从而打造高性能、高可扩展、高可靠的 SDS分布式存储,帮助您降低成本、缩短业务上线时间,轻松构建混合云存储。产品优势 灵活敏捷,弹性扩容 3节点...

产品规格

文件存储CPFS支持三种存储规格,分别为100 MB/s/TiB基线、200 MB/s/TiB基线和 400 MB/s/TiB基线(CPFS智算版)。本文列举了在相同文件系统容量下使用不同客户端访问文件系统时,100 MB/s/TiB基线、200 MB/s/TiB基线、400 MB/s/TiB基线的...

高级管理FAQ

删除策略之前,如果数据已经转储到低频存储或归档存储,数据仍会继续保存在低频存储或归档存储中,并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间,请参见 创建数据...

选型推荐

功能特性 基础型 标准型 增强型 性能型 带宽 1 Gbps 2 Gbps~2.5 Gbps 4.5 Gbps~5 Gbps 10 Gbps 推荐缓存 高效云盘/SSD云盘/ESSD云盘 SSD云盘/ESSD云盘 SSD云盘/ESSD SSD云盘/ESSD 推荐场景 超大数据盘(大于32 TB)、数据备份卷 超大数据盘...

审计日志概述

通过审计日志功能,您可以查询与分析 表格存储 实例中的表、索引相关操作的日志。背景信息 日志服务 SLS(Simple Log Service)是云原生观测与分析平台,为Log、Metric、Trace等数据提供大规模、低成本、实时的平台化服务。更多信息,请...

0025-00000002

问题描述 OSS ON云盒不支持指定的存储类型。问题原因 您发起了PutBucket请求,但是OSS ON云盒场景下,不支持指定的存储类型。问题示例 当前OSS ON云盒场景下,不支持 ColdArchive 存储类型。PUT/HTTP/1.1 Host: cb-f8z7yvzgwfkl9q0h*....

0016-00000404

问题描述 无法读取请求中指定的Object。...开启归档直读后,存储空间下的所有归档存储类型Object无需执行RestoreObject,就处于可读取的状态。具体操作,请参见 归档直读。相关文档 RestoreObject GetObject PutBucketArchiveDirectRead

产品优势

本文档主要为您说明阿里云数据库文件存储DBFS的主要优势。数据库文件存储DBFS是阿里云推出的一款针对数据库场景的文件存储。它在性能、弹性、高可用、成本及数据安全等维度上做了诸多技术创新与优化。适合云上自建数据库使用,提供企业级...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云存储网关 对象存储 混合云存储 文件存储 CPFS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用