设置投递数据到对象存储OSS
存储空间来源 对象存储OSS中存储空间的来源。取值：本账号中新建存储空间：在配置审计控制台，先选择存储空间归属地域，再新建存储空间，最后设置日志文件加密。存储空间名称不能重复。选择本账号中已有的存储空间：在对象存储OSS中选择已...
使用JindoDistCp工具迁移第三方云对象存储数据到OSS/...
本文介绍如何通过JindoDistCp工具，将第三方云对象存储中的数据迁移到OSS/OSS-HDFS。前提条件 准备迁移环境并下载JindoDistCp工具，参见 JindoDistCp使用说明。已在Hadoop的 core-site.xml 文件里，配置AccessKey ID和AccessKey Secret。...
云数据源对象存储OSS
添加对象存储OSS数据源用于连通阿里云对象存储OSS与Quick BI，连接成功后，您可以在Quick BI上进行数据的分析与展示。Quick BI支持以公网的方式连接阿里云OSS，本文为您介绍如何添加阿里云OSS数据源。前提条件 已开通阿里云OSS服务并创建...
添加对象存储OSS数据源
本文档为您介绍在DataV中添加对象存储OSS数据源的方法，以及相关参数配置说明。使用阿里云对象存储服务（Object Storage Service，简称OSS），您可以通过网络随时存储和调用文本、图片、音频和视频等各种非结构化数据文件。前提条件 已准备...
添加对象存储OSS数据源
本文档为您介绍在DataV中添加对象存储OSS数据源的方法，以及相关参数配置说明。使用阿里云对象存储服务（Object Storage Service，简称OSS），您可以通过网络随时存储和调用文本、图片、音频和视频等各种非结构化数据文件。前提条件 已准备...
文件存储 HDFS 版和对象存储OSS双向数据迁移
本文档介绍 文件存储 HDFS 版 和对象存储OSS之间的数据迁移操作过程。您可以将 文件存储 HDFS 版 数据迁移到对象存储OSS，也可以将对象存储OSS的数据迁移到 文件存储 HDFS 版。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和...
使用ossimport迁移数据
背景信息 某用户的数据存储于腾讯云COS广州（华南）区域，数据大小约500TB。现希望将这些数据，通过ossimport工具，于一周内迁移至OSS华东1（杭州）区域。在迁移的同时，需保证自身业务的正常进行。ossimport有单机模式和分布式模式两种...
管理文件元数据
对象存储OSS存储的文件（Object）信息包含Key、Data和Object Meta。Object Meta是对文件的属性描述，包括HTTP标准属性（HTTP Header）和用户自定义元数据（User Meta）两种。您可以通过设置HTTP标准属性来自定义HTTP请求的策略，例如文件...
数据处理费用
按量付费：归档存储数据取回费用=解冻文件大小（GB）×归档存储文件数据取回单价 资源包：不支持 归档直读数据取回容量（RetrievalDataArchiveDirect）直读归档存储类型文件产生的费用。按直读文件的大小计费。重要 对于已解冻的归档存储...
使用数据迁移工具ossimport迁移OSS资源失败的解决方法
问题描述 使用阿里云对象存储OSS时，将任意地域的本地存储数据、第三方存储数据、对象存储OSS数据迁移至任意地域的OSS中可以使用ossimport工具。本文介绍运用数据迁移工具ossimport迁移OSS资源失败的报错原因及解决方案。问题原因 使用...
从OSS迁移数据
本章节介绍如何将对象存储OSS上的数据迁移到文件引擎。准备工作 开通文件引擎，详情请参见 开通指南。搭建Hadoop集群。建议您使用的Hadoop版本不低于2.7.3，本文档中使用的Hadoop版本为Apache Hadoop 2.7.3，修改Hadoop 配置信息，详情参见...
通过SLS完成日志数据入湖OSS
存储目标 目标名称 定义存储目标的名称。目标Project 定义用于存储数据加工结果的目标Project名称。目标库 定义用于存储数据加工结果的目标Logstore名称。授权方式 选择 默认角色，即授予数据加工任务使用阿里云系统角色AliyunLogETLRole将...
使用回收站
回收站中的数据保存时间默认是3天，支持自定义数据保存时间为1~14天。例如，回收站指定保存时间为5天，您在执行删除操作的5天内，可以随时从对应的时间戳目录下恢复删除的文件。说明 回收站功能是由客户端和服务端配合形成。客户端负责将待...
数据索引
设置对象数据聚合方式。如果您希望在查询结果中对数据进行分类统计，例如统计所有文件大小、去重统计文件存储类型等，请添加数据聚合方式。使用阿里云SDK 仅Java SDK、Python SDK以及Go SDK支持通过数据索引功能查询满足指定条件的Object。...
DescribeOssObjects-查询OSS的存储对象列表
说明 如果根据 OSS 存储对象命中的敏感数据识别规则的 ID 查询 DSC 连接授权的 OSS 的存储对象列表，敏感数据识别规则 ID 可调用 DescribeRules 接口获取。1222 InstanceId string 否 OSS 对象所属资产实例 ID。说明 如果根据 OSS 对象所属...
计费模式
本文介绍数据湖构建中各资源的计费规格，包括入湖作业资源用量、数据存储对象和元数据请求三部分。计量计费项 重要 DLF产品目前所有功能为 0折扣活动阶段，即使超过免费阶梯限定后，目前也均不会产生实际计费。元数据对象的存储量 元数据...
Hive以EMR集群的方式处理OSS-HDFS服务中的数据
创建数据库和表时，您可以通过以下两种方式指定OSS-HDFS服务路径，将数据库或表的数据保存到OSS-HDFS服务中。方式一：在命令示例中指定OSS-HDFS服务路径 创建数据库时指定OSS-HDFS服务路径 CREATE DATABASE db_on_oss1 LOCATION 'oss:/...
DescribeOssObjectDetailV2-查询OSS存储对象的详细...
调用本接口查询数据安全中心连接授权的OSS的单个存储对象的详细信息。接口说明 本接口一般用于对 OSS 存储对象详细信息的查询，便于对 OSS 敏感资产信息准确定位。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。...
背景信息
本教程讲解如何将七牛云对象存储中的数据迁移至阿里云对象存储OSS。如果您需要将七牛云对象存储中的数据通过专线迁移到阿里云对象存储OSS，请参见 使用代理迁移。概述 阿里云在线迁移服务是阿里云提供的存储产品数据通道。使用在线迁移服务...
数据存储需求评估
在优化存储之前，需要了解每个业务负载的性能配置文件，测量每秒读写次数IOPS（Input/Output Operations Per Second）、吞吐量等性能数据。阿里云存储服务为不同的存储场景提供存储优化方案，并没有一个通用的方案能够适用于所有的存储场景...
DescribeOssObjectDetail-查询OSS存储对象的详细信息
调用本接口查询数据安全中心连接授权的OSS的单个存储对象的详细信息。接口说明 本接口一般用于对 OSS 存储对象详细信息的查询，便于对 OSS 敏感资产信息准确定位。注意事项 DescribeOssObjectDetail 接口已修订为 DescribeOssObjectDetailV...
同区域复制概述
使用场景 当地法规遵从性规定不允许数据离开您的国家或地区时，您可以通过配置同区域复制规则将源Bucket的数据以副本的形式存储在相同地域内的多个目标Bucket。目标Bucket中的Object是源Bucket中Object的精确副本，它们具有相同的Object名...
敏感数据安全防护方案
本文介绍如何将阿里云对象存储OSS与阿里云 数据安全中心DSC（Data Security Center）结合，对敏感数据进行识别、分类、分级和保护。前提条件 已开通DSC 开通步骤请参见 快速实现数据分类分级。已开通OSS 开通步骤请参见 开通OSS服务。背景...
使用数据复制功能迁移同账号下的OSS数据
在同一个阿里云账号下，您可以通过OSS的跨区域复制功能将地域A的某个存储空间（Bucket）数据迁移至地域B下的另一个Bucket。如果您需要将地域A某个Bucket的数据迁移至相同地域的另一个Bucket，请使用OSS的同区域复制功能。注意事项 数据迁移...
背景信息
本教程讲解如何将金山云对象存储中的数据迁移至阿里云对象存储OSS。概述 阿里云在线迁移服务是阿里云提供的存储产品数据通道。使用在线迁移服务，您可以将第三方数据轻松迁移至阿里云对象存储OSS，也可以在对象存储OSS之间进行灵活的数据...
背景信息
本教程讲解如何将七牛云对象存储中的数据迁移至阿里云对象存储OSS。该功能已下线，请使用 新版。概述 阿里云在线迁移服务是阿里云提供的存储产品数据通道。使用在线迁移服务，您可以将第三方数据轻松迁移至阿里云对象存储OSS，也可以在对象...
背景信息
本教程讲解了如何将腾讯云对象存储COS的数据迁移到阿里云对象存储OSS。该功能已经下线，请使用 新版。概述 阿里云在线迁移服务是阿里云提供的存储产品数据通道。使用在线迁移服务，您可以将第三方数据轻松迁移至阿里云对象存储OSS，也可以...
OSS和NAS之间的数据迁移
本文介绍如何通过ossutil工具或在线迁移服务实现阿里云对象存储OSS和文件存储NAS之间的数据双向迁移。费用说明 使用ossutil工具迁移 ossutil工具本身不收取费用，但是由于迁移数据时涉及到API请求，所以会产生一定的API请求费用。OSS数据...
背景信息
本教程讲解了如何将腾讯云对象存储COS中的数据迁移到阿里云对象存储 OSS。如果您需要将腾讯云对象存储COS中的数据通过专线迁移到阿里云对象存储OSS，请参见 使用代理迁移。概述 阿里云在线迁移服务是阿里云提供的存储产品数据通道。使用...
数据库备份到OSS
数据存储加密：对备份到OSS的数据进行加密存储，保障数据隐私性。随时验证：随时验证数据库备份的有效性。低成本 按需付费：OSS存储空间按需付费，避免一次性投入大量资产。自动存储分级：OSS提供标准、低频、归档多种类型，全面优化存储...
敏感数据保护
OSS敏感数据保护是一款识别、分类、分级和保护存储空间（Bucket）中敏感数据的原生服务，可满足数据安全、个人信息保护等相关法规的合规要求。背景信息 敏感数据主要包括个人隐私信息、密码、密钥、敏感图片等高价值数据，这些数据通常会以...
OSS-HDFS元数据管理费用
OSS-HDFS服务是一款云原生数据湖存储产品。基于统一的元数据管理能力，在完全兼容HDFS文件系统接口的同时，提供充分的POSIX能力支持，能更好地满足大数据和AI等领域的数据湖计算场景。说明 本文仅说明相关计费项及付费方式。有关计费项的...
数据保留合规
OSS支持WORM（Write once read many）特性，允许用户以“不可删除、不可篡改”方式保存和使用数据，符合美国证券交易委员会（SEC）和金融业监管局（FINRA）的合规要求。OSS是目前中国内地唯一通过Cohasset Associates审计认证的云服务，可...
数据迁移概述
具体如下表所示：迁移方式 说明 相关文档 在线迁移 使用在线迁移服务，您可以将第三方数据轻松迁移至阿里云对象存储OSS，也可以在对象存储OSS之间进行跨账号、跨地域、以及同地域内灵活的数据迁移。迁移时无需搭建迁移环境，可在线提交迁移...
使用OSS中的数据作为机器学习的训练样本
本文介绍如何将对象存储OSS里面的数据作为 PAI 的训练样本。说明 本文由 龙临@阿里云 提供，仅供参考。背景信息 本文通过 OSS 与 PAI 的结合，为一家传统的文具零售店提供决策支持。本文涉及的具体业务场景（场景与数据均为虚拟）如下：...
概述
您可以将同一个阿里云账号下的OSS某个存储空间（Bucket）的数据迁移至另一个Bucket，还可以跨不同阿里云账号迁移OSS Bucket之间的数据。OSS Bucket之间的数据迁移包含以下场景：同账号下的OSS数据迁移，即同一个阿里云账号下相同或者不同...
背景信息
本教程讲解了如何将阿里云对象存储OSS清单上的数据迁移到阿里云对象存储OSS。概述 阿里云在线迁移服务是阿里云提供的存储产品数据通道。使用在线迁移服务，您可以将第三方数据轻松迁移至阿里云对象存储OSS，也可以在对象存储OSS之间进行...
敏感数据保护费用
在OSS数据初次接入扫描时，敏感数据保护对授权的数据源执行全量扫描并收取全量扫描费用。初次扫描任务完成后，敏感数据保护仅对该数据源中新增或修改的文件收取扫描费用。说明 本文仅说明相关计费项及付费方式。有关计费项的定价详情，请...
获取文件元数据
默认情况下，在受版本控制的存储空间（Bucket）中调用HeadObject接口仅获取文件（Object）当前版本的元数据。说明 如果Object的当前版本为删除标记，则返回404 Not Found。请求参数中指定versionId则返回指定版本Object的元数据。注意事项 ...
- 产品推荐
- 这些文档可能帮助您