使用Robocopy工具迁移数据

本文介绍如何使用robocopy工具实现阿里云文件存储NAS SMB协议文件系统之间的数据迁移。前提条件 拥有一个存有数据的SMB协议文件系统,并且拥有一个专有网络类型挂载点。背景信息 Robocopy是Windows系统自带的目录复制命令,该功能可以创建...

数据迁移概述

说明 可通过设置跨区域复制功能指定文件名前缀进行同步,只同步特定目录。不支持将源Bucket中冷归档或者深度冷归档存储类型Object复制到目标Bucket。跨区域复制概述 离线迁移(闪电立方)适用于线下数据中心大规模数据迁移上云,支持TB到PB...

导出全量数据到OSS

如果要以更低成本备份 表格存储 中的全量数据或者以文件形式导出 表格存储 数据到本地,您可以通过DataWorks数据集成服务将 表格存储 中的全量数据导出到OSS。全量数据导出到OSS后,您可以自由下载文件到本地。注意事项 此功能适用于 表格...

安装

async function uploadAndDownloadFile(){ try {/上传文件到OSS,'object'是OSS中的文件名,'localfile'是本地文件的路径。const uploadResult=await client.put('object','localfile');console.log('上传成功:',uploadResult);从OSS下载...

拷贝文件

versionId:=oss.GetVersionId(retHeader)options:=[]oss.Option{ oss.Expires(futureDate),oss.Meta("my","myprop"),}/目标文件名。objectDest:=objectName+"dest"var parts[]oss.UploadPart/设置拷贝文件参数。copyOptions:=[]oss.Option{...

Linux系统挂载SMB协议文件系统

由于Linux系统对SMB协议的兼容程度较低,建议仅在需要跨操作系统共享数据的情况下使用Linux系统挂载SMB协议文件系统。本文主要介绍如何将SMB协议文件系统挂载至云服务器ECS(Linux)上并执行读写操作。前提条件 在创建SMB协议文件系统的...

功能发布记录

文件网关使用须知增加NFS文件名UTF-8校验说明。文件网关支持上传下载队列状态显示。本地网关支持密码重置。本地网关支持SLS日志采集。新开服地域:日本(东京)v1.3.0 2020年3月6日 新增特性:文件网关支持传输加速。文件网关复制模式增强...

Linux系统通过接入点访问文件系统

本文介绍云服务器ECS如何通过接入点访问通用型NAS NFS文件系统。前提条件 已创建通用型NAS NFS协议文件系统。具体操作,请参见 创建文件系统。已创建接入点。具体操作,请参见 创建接入点。在创建文件系统的地域,已有可用的云服务器ECS...

常见问题

文件系统对文件名和目录名有严格的限制,因此会收到上述错误。解决方案:用其他工具对这些Object重命名后,ls就能正确显示目录内容了。通过rm命令删除文件时报错"Operation not permitted"问题分析:通过rm命令删除文件时,会调用...

set-meta(管理文件元数据)

ossutil64 set-meta oss:/examplebucket/desfolder/X-Oss-Storage-Class:IA-include"*.jpg"-u-r 结合-r 及-u 选项,将examplebucket中目录desfolder下文件名包含 abc 且文件类型不为.jpg 和.txt 的Object的存储类型修改为归档存储(Archive...

Bucket Policy常见示例

["20214760404935xxxx"],"Resource":["acs:oss:*:174649585760xxxx:examplebucket"]}]} 示例三:授予所有访问者列举所有文件的权限 当您的存储空间用于公共资源共享,需要让所有访问者都能查看文件名但不能访问文件的实际内容时,您可以...

文件存储

目录/文件 说明 存储位置 base 每个库的子目录。共享存储 global 集群全局表的目录。pg_tblspc 表空间。pg_wal WAL日志目录。pg_dynshmem 用于动态共享内存的文件。所有节点存储一份 pg_snapshots 导出的快照(snapshot)。pg_replslot ...

申请与创建

DBFS服务创建申请信息填写项说明:填写项 说明 地域 数据库文件存储实例所在的物理位置。可用区 数据库文件存储实例所在的可用区。版本类型 可选标准版或企业版,企业版DBFS支持共享挂载给多台ECS使用。实例规格 详见 实例规格说明。使用...

IIS模式解析

Logtail IIS模式插件支持根据IIS日志格式定义将日志内容结构化,解析为多个键值对形式。IIS日志简介 Windows服务器会根据您所选择的日志格式(IIS、NCSA和W3C)生成IIS日志。日志格式#Fields:date time s-sitename s-ip cs-method cs-uri-...

CDH6数据迁移

本文介绍如何将CDH中本地HDFS的数据迁移到 文件存储 HDFS 版,实现存储计算分离。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已在阿里云上创建ECS实例并安装CDH6集群。...

简介

对象由元数据(Object Meta)、用户数据(Data)和文件名(Key)组成。对象由存储空间内部唯一的Key来标识。地域 Region 地域表示OSS的数据中心所在物理位置。您可以根据费用、请求来源等综合选择数据存储的地域。详情请查看 OSS已经开通的...

使用限制

文件名和目录:不能为空字符串、单个点(.)和两个点(.)。不能包含冒号(:)、正斜线(/)和波浪线(~)。Hadoop fs命令限制 不支持快照(snapshot)相关命令(createSnapshot、deleteSnapshot、renameSnapshot)。不支持ACL相关命令...

什么是文件存储CPFS

文件存储CPFS(Cloud Parallel File Storage)是阿里云推出的全托管、可扩展并行文件系统,满足高性能计算场景的需求。CPFS提供了统一的命名空间,支持成百上千的机器同时访问,拥有数十GB的吞吐、数百万的IOPS能力的同时还能保证亚毫秒级...

数据流动概述

目录、文件名中的特殊字符需要谨慎使用,支持大小写字母、数字、感叹号!划线(-)、下划线(_)、半角句号(.)、星号(*)和半角圆括号(())。不支持超长路径,数据流动支持的路径最大长度是1023字符。数据流动导出限制 数据流动不...

什么是协同存储EOS

EOS 支持您通过多种工具(控制台、API、SDK等)下载任意数量、任意类型的文件,无需关注具体的存储位置。适用于各种社交分享图片、音视频应用、大型网站、大数据分析等业务场景。基本概念 EOS在产品概念、用法与 对象存储 OSS(Object ...

录制存储至OSS

视频直播录制功能,是将直播中心接收到的推流数据进行录制,并将录制后的文件按配置的录制规则存储至阿里云OSS指定的存储位置。支持将直播流录制成M3U8、MP4、FLV格式的视频文件。本文为您介绍录制存储至OSS的操作指引。前提条件 您已创建...

截图

输出位置 原存储位置:当文件来源为媒资管理时,处理后文件默认保存至原存储位置。自定义:自定义输出位置。输出地址 当输出位置为 自定义 时,选择输出地址。输出文件名称 输入截图文件的名称。创建动图任务 参数 描述 任务名称 输入截取...

CreateDataFlow-创建数据流动

创建一个CPFS文件系统与源端存储的数据流动。接口说明 基础操作 文件存储 CPFS 2.2.0 及以上版本、智算 CPFS 2.4.0 及以上版本支持数据流动。文件存储 CPFS、CPFS 智算版状态为运行中,才能创建数据流动。一个文件存储 CPFS 或者 CPFS 智算...

备份规则说明

随后触发一次新的仓库备份,因为仓库存在update,将对仓库进行增量备份,如下图:根据OSS控制台的截图,我们来对应介绍:存储路径:增量备份的存储路径与全量备份的存储位置并无差别,仓库备份文件的存储路径格式仍为/repositories/<企业...

0026-00000201

问题原因 您发起了PutObject或CopyObject等涉及到文件写入操作的请求,但是您试图写入的文件名已经存在同名文件,导致写入失败。问题示例 比如您发起了如下请求:PUT/object-exist.txt ...

0026-00000002

问题原因 您发起了PutObject或CopyObject等涉及到文件写入操作的请求,但是您试图写入的文件名已经存在同名文件,导致写入失败。问题示例 比如您发起了如下请求:PUT/object-exist.txt ...

转换文件存储类型

OSS提供标准、低频访问、归档、冷归档和深度冷归档多种存储类型,全面覆盖从热到冷的各种数据存储场景。本文主要介绍如何转换文件(Object)的存储类型。注意事项 当您使用webpack或browserify等打包工具时,请通过 npm install ali-oss 的...

通过视频点播控制台上传文件

视频点播(VOD)控制台提供音视频、图片和视频素材上传功能,支持批量操作,便于快速将媒体资源上传存储到VOD。本文提供控制台上传媒体的操作指引。上传前准备 上传文件扩展 上传文件扩展需符合以下规则。媒资类型 支持格式 视频 3GP...

重定向

如果您还涉及以下使用场景,可按场景配置以下参数:场景 参数 OSS文件名前缀与源站不一致。选中 是否替换或截取前缀,并设置 回源地址 第三列内容。OSS会将 文件名前缀 的内容替换为 回源地址 第三列的内容。配置 文件名前缀 后可配置此项...

录制文件管理

视频录制服务支持您按照设定的录制周期对正在直播的视频进行录制,保存至VOD或指定的OSS存储位置。直播录制结束后,可以通过阅读本文,了解怎样在视频直播控制台查看和管理录制的文件。录制存储方式 视频直播提供以下两种录制文件的存储...

录制存储至VOD

后续步骤 您可以查看和管理保存至指定VOD存储位置的录制文件,请参见 录制文件管理。如果您需要剪辑已录制存储至OSS的文件,请参见 直播流剪辑与录制文件剪辑。常见问题 直播录制常见问题 相关文档 还支持您录制存储至OSS,详情请参见 录制...

后续操作

您可以使用任务名、任务ID、UID、文件名等作为过滤条件,精准定位迁移日志。重要 仅对创建迁移任务时,参数 迁移日志 选择 推送 或 仅推送错误日志 的任务有效。如果创建迁移任务时,参数 迁移日志 选择 不推送,则不会推送迁移任务的日志...

常见问题

使用-u参数上传文件时出现skip提示 问题分析:使用-u 参数上传文件的时候,ossutil会将上传文件存储空间(Bucket)内已有文件进行一次比对。若发现上传的文件与目标Bucket内已有文件同名,且该文件的最后修改时间早于或等于Bucket内已有...

历史版本下载

新增的属性:C API:MDO_INT_ATTR_ROW_IIS,MDO_INT_ATTR_COL_IIS.C++ API:MDO_INT_ATTR:ROW_IIS,MDO_INT_ATTR:COL_IIS.Python API:MDO_INT_PARAM.ROW_IIS,MDO_INT_ATTR.COL_IIS.JAVA API:INT_ATTR:ROW_IIS,INT_ATTR:COL_IIS.更新 APIs:C API...

文件网关的缓存有什么作用

本文介绍文件网关缓存的作用。本地客户端通过文件网关向OSS上传文件时,数据会先...缓存淘汰机制只针对已上传的文件内容数据,对文件的元数据(文件名、目录结构、权限等)不做淘汰。您可以在添加缓存时使用缓存计算器,获取推荐的缓存容量。

日志转存

日志文件命名规则 转存后的日志文件命名规则如下:<TargetPrefix><SourceBucket>YYYY-mm-DD-HH-MM-SS-UniqueString 字段 说明 TargetPrefix 日志文件的文件名前缀。SourceBucket 产生访问日志的源Bucket名称。YYYY-mm-DD-HH-MM-SS 日志文件...

0048-00000001

问题原因 在2017/10/01 00:00之后创建的Bucket,使用 OSS域名 访问文件,且文件名是以htm或html结尾,或者文件的ContentType为 text/html 时,OSS会在返回头中增加两个Header:x-oss-force-download:true Content-Disposition:attachment ...

create-symlink(创建软链接)

软链接功能用于快速访问存储空间(Bucket)内的常用文件(Object)。通过 create-symlink 创建软链接后,您可以通过软链接文件快速打开源文件,类似于Windows的快捷方式。注意事项 要创建软链接,您必须具有 oss:PutObject 权限。具体操作...

读写访问文件类问题

问题现象 在Linux或Windows客户端向NAS文件系统写入的中文字符(文件名、内容等)在另一个平台客户端显示为乱码。问题原因 Windows客户端中文编解码默认使用GBK字符集,Linux客户端中文编解码默认使用UTF-8字符集,写入NAS文件系统的数据为...

通过云存储网关挂载OSS

通过云存储网关挂载OSS,您可以将OSS映射为一个共享的文件存储系统,实现多个用户在不同地点和设备上共享访问OSS数据。挂载完成后,您可以像使用本地文件夹和磁盘一样操作OSS资源。前提条件 已开通 云存储网关服务,并授予访问OSS、ECS及...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储NAS 文件存储HDFS版 数据库文件存储 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用