通过Hadoop Shell命令访问
如果您希望通过命令行的方式在开通OSS-HDFS服务的Bucket中执行上传、下载、删除等相关操作，您可以使用Hadoop Shell的方式。环境准备 您可以选择以下任意一种方式访问OSS-HDFS服务。通过阿里云EMR访问OSS-HDFS服务，确保已创建EMR-3.44.0及...
功能支持情况
本文介绍OSS-HDFS服务的功能支持情况。说明 以下表格中OSS-HDFS服务功能支持情况标注为 不适用，表明对应操作仅针对OSS对象，而非OSS-HDFS文件。Bucket级别 操作 说明 OSS-HDFS服务功能支持情况 存储类型 OSS提供标准、低频访问、归档、冷...
常见问题
本文介绍使用OSS-HDFS服务的常见问题和解决方法。如果误删除OSS-HDFS服务冷热分层对应的生命周期规则怎么办？开启冷热分层后，OSS会自动创建同时包含转换为低频、归档以及冷归档类型三种策略的生命周期规则。如果您误删除了其中一种或多种...
转换元数据
OSS-HDFS服务支持在未部署任何导入和导出工具的情况下，直接将OSS元数据转换为OSS-HDFS元数据。前提条件 已开通并授权访问OSS-HDFS服务。具体步骤，请参见 开通并授权访问OSS-HDFS服务。仅 华北3（张家口）地域支持将OSS元数据转换为OSS-...
查询用量情况
通过OSS管理控制台查询某个Bucket下OSS-HDFS服务的用量情况，不作为计量数据，仅供参考。操作步骤 登录 OSS管理控制台。在左侧导航栏，单击 Bucket 列表，然后单击已开启OSS-HDFS服务的目标Bucket名称。在左侧导航栏，选择 数据湖管理>HDFS...
Snapshot（试用）
当您希望对OSS-HDFS服务的数据进行备份，在数据发生错误、被误删除时，将数据恢复至可用状态，您可以使用Snapshot命令创建快照。OSS-HDFS服务的快照功能在使用方式上与HDFS的快照功能完全兼容，同时支持目录层级的操作。重要 此功能目前尚...
通过RootPolicy访问
OSS-HDFS服务支持RootPolicy。您可以通过RootPolicy为OSS-HDFS服务设置自定义前缀，在无需修改原有访问 hdfs:/前缀作业的基础上，将作业直接运行在OSS-HDFS服务上。前提条件 已创建Hadoop环境、Hadoop集群或者Hadoop客户端。具体操作，请...
导出清单
具体操作，请参见 通过Jindo CLI命令访问OSS/OSS-HDFS。操作步骤 导出清单。登录 OSS管理控制台。单击 Bucket 列表，然后单击目标Bucket名称。在左侧导航栏，选择 数据湖管理>HDFS 服务。在 导出元数据清单 区域，单击 导出。导出过程大约...
导出审计日志
具体操作，请参见 通过Jindo CLI命令访问OSS/OSS-HDFS。背景信息 OSS-HDFS审计日志默认保存在以下路径，暂不支持自定义输出路径。oss:/<hdfs_bucket>.<dls_endpoint>/.sysinfo/auditlog/其中，<hdfs_bucket>填写已开通OSS-HDFS服务的Bucket...
通过Jindo CLI访问
如果您希望通过命令行的方式在开通OSS-HDFS服务的Bucket中执行上传、下载、删除等相关操作时，您可以使用Jindo CLI的方式。环境准备 您可以选择以下任意一种方式访问OSS-HDFS服务。通过阿里云EMR访问OSS-HDFS服务，确保已创建EMR-3.44.0及...
使用JindoFuse挂载访问
JindoFuse是一个开源的分布式文件系统访问工具，同时兼容POSIX，使得AI应用程序可以直接使用OSS-HDFS服务作为数据存储和处理的解决方案。前提条件 已开通并授权访问OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。环境准备 ...
ProxyUser
已开通OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。已配置4.5.0及以上版本JindoSDK。具体操作，请参见 非EMR集群接入OSS-HDFS服务快速入门。操作步骤 配置环境变量。连接ECS实例。具体操作，请参见 连接ECS实例。进入已...
使用回收站
使用OSS-HDFS回收站时，需要客户端将待删除文件挪至指定目录，并由服务端定时清理该目录下的数据。删除文件说明 当您从OSS-HDFS服务删除文件时，文件不会立即被删除，而是转至/user/<username>/.Trash/Current 目录下。经过30分钟后，...
删除文件
为避免影响OSS-HDFS服务的正常使用或者引发数据丢失的风险，在开通了OSS-HDFS服务的Bucket中，禁止删除OSS-HDFS的数据存储目录.dlsdata/下的任意Object。删除规则 OSS支持手动或者自动删除单个或多个文件，删除规则说明如下：手动删除 删除...
数据湖生态接入
HDFS服务中的数据 Presto Presto使用JindoSDK查询OSS-HDFS服务中的数据 Spark Spark使用JindoSDK查询OSS-HDFS服务中的数据 Thanos 使用Thanos访问OSS 阿里云生态 DataLakeAnalytics DataLakeAnalytics+OSS：基于OSS的Severless的交互式查询...
概述
文件存储HDFS版 文件存储HDFS版（Apsara File Storage for HDFS）是一款面向阿里云ECS实例及容器服务等计算资源的文件存储服务，满足以Hadoop为代表的分布式计算业务类型对分布式存储性能、容量和可靠性的多方面要求。表格存储 表格存储...
OSS SDK使用中常见问题的解决方法
Allow-Origin'”的错误 对象存储OSS使用Java实现签名Header上传的示例 OSS Java SDK的常见错误 Python 对象存储OSS使用Python语言实现签名Header上传的示例 使用Python操作OSS时出现“No module named oss2”报错 OSS Python SDK常见错误 ...
常见问题
JavaSDK实现数据流分片上传的代码样例 对象存储OSS使用JavaSDK的ContentMD5提示“log4j”错误 设置跨域规则后调用OSS时仍然报“No 'Access-Control-Allow-Origin'”的错误 对象存储OSS使用Java实现签名Header上传的示例 Python Python SDK...
OSS文件处于冻结状态无法正常访问
问题描述 阿里云对象存储OSS中的文件在以下场景处于冷冻状态，无法正常访问。文件存储类型是归档存储、冷归档存储或者深度冷归档存储。文件存在违法违规情况。问题原因 阿里云对象存储OSS中的文件处于冻结状态有以下几种情况：在对象存储...
0017-00000202
问题描述 请求中某个请求参数的类型不正确，请结合...问题原因 没有按照对象存储OSS产品API接口文档中的请求头描述信息填写对应的数据类型。解决方案 按照对象存储OSS产品API接口文档中的请求头描述信息填写对应的数据类型。相关文档 API概览
0017-00000201
问题描述 请求中缺少必须的请求参数，请结合ErrorMessage判断缺少哪些请求参数 问题原因 没有按照对象存储OSS产品API接口文档中的请求头描述信息填写请求时必须填写的请求头信息。解决方案 按照对象存储OSS产品API接口文档中的请求头设置...
OSS的低频访问和归档存储的计费容量大于实际存储量的...
概述 本文主要介绍阿里云对象存储OSS的低频访问和归档存储的计费容量远远大于实际存储量的原因。详细信息 对象存储OSS的低频访问和归档存储类型文件的最小存储单元为64KB，所有小于64KB的文件都会按照64KB计算。所以，如果您存储空间内有很...
对象存储OSS
对象存储OSS（Object Storage Service）是阿里云提供的海量、安全、低成本、高持久的云存储服务。其数据设计持久性不低于99.9999999999%（12个9），服务设计可用性不低于99.995%。OSS具有与平台无关的RESTful API接口，您可以在任何应用、...
如何查看OSS文件被删除的详细操作记录
概述 本文主要介绍当发现您存储在阿里云对象存储OSS中的文件被删除后，如何查看阿里云对象存储OSS文件被删除的详细操作记录，定位是否存在误删除的情况。详细信息 如您需要查看OSS文件被访问、删除等操作的记录，需要开启OSS的Logging日志...
数据库备份到OSS
背景 对象存储OSS 对象存储OSS 提供了标准类型存储，作为移动应用、大型网站、图片分享或热点音视频的主要存储方式，也提供了成本更低、存储期限更长的低频访问类型存储和归档类型存储，作为不经常访问数据的备份和归档。对象存储OSS非常...
应用场景
本文介绍对象存储OSS的主要应用场景。图片和音视频等应用的海量存储 OSS可用于图片、音视频、日志等海量文件的存储。各种终端设备、Web网站程序、移动应用可以直接向OSS写入或读取数据。OSS支持流式写入和文件写入两种方式。网页或者移动...
简介
阿里云对象存储OSS最佳实践主要介绍数据迁移、数据备份和容灾、数据直传OSS、数据处理与分析、音视频转码、使用Terraform管理 OSS等操作，帮助您更加高效地使用OSS，满足您的业务需求。数据迁移 OSS之间数据迁移 第三方数据源迁移到OSS 从...
存储空间概述
✓×OSS-HDFS服务 OSS-HDFS服务（JindoFS服务）是一款云原生数据湖存储产品。基于统一的元数据管理能力，在完全兼容HDFS文件系统接口的同时，提供充分的POSIX能力支持，能更好地满足大数据和AI等领域的数据湖计算场景。✓×OSS ON云盒 OSS ...
如何对OSS进行访问权限控制
概述 本文主要介绍如何对阿里云对象存储OSS进行访问权限控制，使OSS资源访问更加安全。详细信息 OSS提供多种方式将OSS资源权限授予给其他用户，您可以使用以下几种机制来控制对OSS资源访问的权限，从而确保数据安全。设置存储空间ACL：通过...
对象存储优化
对象存储OSS提供存储管理功能，帮助您优化存储性能和成本。分析数据访问模式并对数据进行转储或删除 您可以分析数据访问模式并配置 生命周期规则，自动将访问频率较低的数据转换为成本更低的存储类型，或者在到期日之后自动删除数据。例如...
如何使用阿里云CDN和OSS等产品实现跨境加速
方法四：将源站服务迁移到阿里云对象存储OSS，OSS支持传输加速的功能，通过CDN和全站加速回源OSS对象存储，具体操作如下：说明 传输加速主要是针对跨境问题，但与CDN和全站加速原理不同。更多信息，请参见 CDN加速和OSS传输加速的区别。将...
服务等级协议
请参见 对象存储OSS服务等级协议。
前言
前提条件 已开通阿里云对象存储OSS服务。具体操作，请参见 开通OSS服务。已创建AccessKey ID和AccessKey Secret。具体操作，请参见 创建AccessKey。使用8.0及以上版本iOS系统。隐私策略 SDK隐私策略请参见 对象存储SDK隐私政策。SDK源码和...
使用OSS视频截帧时提示“not supported format”错误
问题描述 在使用阿里云对象存储OSS通过SDK生成带签名的视频截帧URL后，URL无法打开，提示“not supported format”错误。问题原因 仅支持对视频编码格式为H264和H265的视频文件进行视频截帧。解决方案 在使用视频截帧时，请确保使用H264和H...
ECS快照费用可以使用OSS存储包抵扣吗？
方式 说明 标准-本地冗余存储包 打开 对象存储OSS资源包 购买页，资源包选择存储包类型为 标准-本地冗余存储包。重要 请认真核对您资源所在的地域，不要跨地域购买存储包，不同地域的存储包不通用。同地域的存储包，在同一时间段内不能重复...
什么是对象存储OSS
阿里云对象存储OSS（Object Storage Service）是一款海量、安全、低成本、高可靠的云存储服务，可提供99.9999999999%（12个9）的数据持久性，99.995%的数据可用性。多种存储类型供选择，全面优化存储成本。OSS具有与平台无关的RESTful API...
前言
本文介绍对象存储OSS的PHP SDK各种使用场景下的示例代码。源码地址 请访问 GitHub 获取源码地址。示例代码 OSS PHP SDK提供丰富的示例代码，方便您参考或直接使用。示例代码包括以下内容：示例文件 示例内容 Object.php 文件的相关操作，...
开始使用OSS
对象存储OSS支持多种方式访问和管理对象。本文为您介绍如何通过控制台、命令行管理工具ossutil、图形化管理工具ossbrowser、OSS SDK、REST API等多种方式管理OSS。开通OSS服务 打开 OSS开通页面。在OSS开通页面，按照界面指引完成开通操作...
OSS中的透明图片添加水印不生效
问题描述 为存储在阿里云对象存储OSS中的图片文件增加水印时，水印不生效。问题原因 图片水印不支持原图有 透明图 层。添加水印时是以原图颜色为背景色，将水印图片融合进入RGB通道，Alpha通道保留原值。Alpha通道只有两个值（全透明或者不...
对象存储OSS如何删除合规保留策略
概述 本文主要介绍阿里云对象存储OSS如何删除合规保留策略。详细信息 当基于时间的合规保留策略创建后，该策略默认处于“InProgress”状态，且该状态的有效期为24小时。在有效期24小时内，此策略对应的Bucket资源处于保护状态。若Bucket内...
- 产品推荐
- 这些文档可能帮助您