存储格式与SerDe

DLA内置了处理各类数据文件的Serialize/Deserilize(简称SerDe,用于序列化和反序列化),您...通过 STORED AS 指定文件格式的同时,还可以根据具体文件的特点,指定SerDe和特殊列分隔符等,详细地使用方法将在各类型文件格式示例中为您讲解。

概述

归档为 IBD 格式的技术原理图如下:与归档为CSV和ORC格式的文件不同。该方案是在InnoDB存储引擎下使用OSS,而不用修改表所在的引擎。仅通过归档语句手动将IBD格式文件的存储位置从PolarStore迁移至OSS。归档完成后,PolarStore中的这部分...

常见问题

如果您长时间(超过14天)未使用NAS中存储的文件,但是仍然希望保留文件,建议您通过生命周期策略将文件从标准存储类型转换为低频存储或归档存储类型,可以节省约50%到80%的费用。通过生命周期转换存储类型的具体步骤,请参见 设置生命周期...

媒资上传概述

支持上传的文件格式 智能媒体服务支持视频、音频、图片和其他辅助媒资(字幕、字体)文件的上传,文件可以为本地文件或线上文件(通过URL拉取或OSS导入),支持的文件类型如下:媒体类型 文件格式 视频 MPEG MP4、TS、3GP、MPG、MPEG、MPE...

回收站

例如执行 vim 命令编辑文件时,产生的.swp 和.swpx 格式的文件将进入回收站。应用程序自动轮转的日志文件。例如使用Nginx配置了自动轮转日志且最多保留20个日志文件,当日志文件 test.log.19 轮转为日志文件 test.log.20 时,原日志文件 ...

GetBucketInventory

父节点:Destination Format 字符串 导出清单文件的文件格式。有效值:CSV 父节点:OSSBucketDestination AccountId 字符串 存储空间所有者授予的账户ID。父节点:OSSBucketDestination RoleArn 字符串 存储空间所有者授予操作权限的角色名...

cp(拷贝文件

拷贝文件(Object)是指在不改变文件内容的情况下,将同一地域下的源存储空间(Bucket)内的文件复制到目标Bucket,或者将文件复制到相同存储空间(Bucket)的其他目录。您可以通过ossutil的 cp 完成拷贝。注意事项 要拷贝文件,您必须具有...

存储空间清单

您可以选择导出标准存储、低频访问存储、归档存储以及冷归档存储的文件。对象版本 选择清单扫描的文件版本。如果Bucket已开启版本控制,可选择导出目标文件的 当前版本 或 所有版本。更多信息,请参见 版本控制概述。如果Bucket未开启版本...

cp(上传文件

本文涉及的通用示例说明如下:本地文件:examplefile.txt(根目录下的文件)本地文件夹:localfolder(根目录下的文件夹)目标Bucket:examplebucket 目标Bucket指定目录:desfolder 简单上传 当您需要将本地文件、图片、视频等资源上传到...

ListBucketInventory

父节点:Destination Format 字符串 导出清单文件的文件格式。有效值:CSV 父节点:OSSBucketDestination AccountId 字符串 存储空间所有者授予的账户ID。父节点:OSSBucketDestination RoleArn 字符串 存储空间所有者授予操作权限的角色名...

PutBucketInventory

父节点:Destination Format 字符串 是 CSV 清单文件的文件格式。清单文件导出后的格式为使用GZIP压缩的CSV文件。有效值:CSV 父节点:OSSBucketDestination AccountId 字符串 是 100000000000000 Bucket所有者授予的账户ID。父节点:...

查看选项

例如*.txt 表示列举所有格式不为TXT的文件。更多信息,请参见 include和exclude选项。r,-recursive 递归操作。当指定该选项时,ossutil会对Bucket下所有符合条件的Object进行操作,否则只对URL中指定的单个Object进行操作。addr 增加此项...

0053-00000005

问题描述 视频截帧请求访问的目标文件格式不支持。问题原因 您发起了视频截帧请求,但是目标视频文件的格式不符合要求,导致截帧失败。问题示例 无。解决方案 当前仅支持对视频编码格式为H264和H265的视频文件进行视频截帧,请确保您访问的...

在线迁移服务参数说明

格式要求不能以正斜线(/)开头,必须以正斜线(/)结尾,例如docs/。AccessKeyId 和 SecretAccessKey(旧版为 Access Key Id 和 Secret Access Key)用于进行身份验证的访问密钥。为了保证数据安全,推荐您创建IAM用户并授予其读取源数据...

文档处理常见问题

传入 Filename 参数时根据 Filename 后缀判断文件格式,不传 Filename 参数时根据OSS文档的后缀判断文件格式。OSS Bucket设置了防盗链,文档可以预览吗?OSS Bucket设置了防盗链,在调用GenerateWebofficeToken接口获取Weboffice凭证时传入...

查看低频/归档存储文件

您可以通过NAS控制台查看已转储至低频存储或归档存储中的文件、低频存储或归档存储使用量以及该文件最近一次被访问的时间等信息。...使用API 您也可以通过调用 GetDirectoryOrFileProperties 查询指定目录下低频存储或归档存储的文件信息。

查看选项

passwd_file 用于指定保存存储空间访问密钥的文件,默认为/etc/passwd-ossfs。connect_timeout 指定连接的超时时间,单位为秒,默认值为300秒。readwrite_timeout 指定读或者写请求的超时时间,单位为秒,默认值为60秒。max_stat_cache_...

restore(解冻文件

使用该选项的步骤如下:您需要指定.txt或者XML格式的本地文件,并在本地文件中换行填写所有待解冻的Object。ossutil读取本地文件中的所有Object,然后对这些Object进行批量解冻。说明 当其中一个Object操作出现错误时,ossutil会将该Object...

另存为

什么是另存为 同步处理默认不保存处理后的文件,您需要在处理请求内添加另存为参数,将处理后的文件作为对象(Object)保存到指定的存储空间(Bucket)内。异步处理由于是以任务形式对文件进行异步数据处理,请求返回时只会返回任务ID,所以...

管道

action2:sys/saveas,b_dGVzdC1idWNrZXQ,o_ZG9jX2ltYWdlcy97aW5kZXh9LnBuZw/notify,topic_ZG9jX2ltYWdlcw,表示将转换完成的图片文件存储到 oss:/test-bucket/doc_images/路径中,并在转换完成后将通知发送到 doc_images 的MNS主题。

消息通知

x-oss-async-process HTTP/1.1 Host: doc-demo.oss-cn-hangzhou.aliyuncs.com Date: Fri,28 Oct 2022 06:40:10 GMT Authorization:OSS qn6qrrqxo2oawuk53otf*:UNQDb7GapEgJkcde6OhZ9J*/将类型为DOCX的文件example.docx转换为PNG格式的图片...

存储空间概览

文件碎片:统计当前存储空间内存储的文件碎片数量。文件碎片主要由分片上传和断点续传上传产生。请结合生命周期规则删除不再需要的文件碎片,以免产生不必要的费用。更多信息,请参见 设置生命周期规则。访问域名 在访问端口区域,您可以...

set-meta(管理文件元数据)

使用该选项的步骤如下:您需要指定.txt或者XML格式的本地文件,并在本地文件中换行填写所有待设置、更新或删除元数据的Object。ossutil读取本地文件中的所有Object,然后对这些Object进行元数据的设置、更新或删除操作。说明 当其中一个...

将表格存储数据下载到本地文件

导出文件格式 操作方式 JSON 通过命令行工具直接下载 CSV 通过DataX工具直接下载 通过DataWorks工具同步数据到OSS后再下载 TEXT 通过DataWorks工具同步数据到OSS后再下载 通过命令行工具直接下载 通过命令行工具导出表中数据到本地JSON文件...

导入OSS数据

ORC:ORC文件格式,无需任何配置,自动解析成日志格式。Parquet:Parquet格式,无需任何配置,自动解析成日志格式。阿里云OSS访问日志:阿里云OSS访问日志格式。更多信息,请参见 日志转存。阿里云CDN下载日志:阿里云CDN下载日志格式。更...

导入Amazon S3文件

时间格式的语法详情,请参见 Class SimpleDateFormat。常见的时间格式,请参见 时间格式。支持epoch格式,包括epoch、epochMillis、epochMicro和epochNano。时间字段分区 选择时间字段对应的时区。当时间字段格式为epoch类别时,不需要设置...

哪些是常用的资源包

OSS常用的资源包包括存储包以及下行流量包。...下行流量包 当您通过公网访问或者下载Bucket中存储的文件时,还会产生外网流出流量,您可以购买下行流量包用于抵扣外网流出流量费用。关于下行流量包的抵扣说明,请参见 流量费用。

临时存储费用

冷归档或者深度冷归档存储类型文件(Object)在数据解冻时会生成一份标准存储类型的文件副本用于访问,文件副本在解冻时间结束前会收取临时存储费用。说明 本文仅说明相关计费项及付费方式。有关计费项的定价详情,请参见 OSS产品定价。...

创建文件系统实例后,为什么无法访问文件存储 HDFS 版...

本文介绍了在创建文件系统实例后无法访问 文件存储 HDFS 版 的排查方法。您可以请根据以下几种情况进行排查:确认访问 文件存储 HDFS 版 服务的ECS实例对应的专有网络及虚拟交换机ID,与挂载点的专有网络及虚拟交换机ID是否一致。确认挂载...

生命周期管理概述

也可以通过NAS控制台查看已转储至低频存储或归档存储的文件。更多信息,请参见 查看低频介质存储文件。同一个文件或目录支持同时配置低频存储规则和归档存储规则,若同时选择,低频存储管理规则天数必须小于归档管理规则天数。优势 配置...

创建数据取回任务

如果您需要频繁访问低频介质中存储的文件,建议您创建数据取回任务,将指定文件或目录中的数据取回至通用型NAS存储空间,避免频繁访问产生读写流量费用。本文介绍如何创建数据取回任务。计费说明 在执行数据取回任务时,NAS会根据目标文件...

挂载文件存储 HDFS 版文件系统

确认不再使用 文件存储 HDFS 版 文件系统后,您需要参考 挂载文件系统 中的内容,删除所有已部署 文件存储 HDFS 版 Java SDK和所有core-site.xml文件中 文件存储 HDFS 版 相关配置,完成卸载文件系统。如果您想释放 文件存储 HDFS 版 ...

什么是文件存储 HDFS 版

文件存储 HDFS 版(Apsara File Storage for HDFS)是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。产品概述 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统(Hadoop Distributed File System)中一样管理和访问数据。您...

快速入门

文件存储 HDFS 版 是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。文件存储 HDFS 版 兼容了标准的HadoopFS协议接口,使您无需对现有大数据分析应用做任何修改,即可使用具备无限容量及性能扩展、单一命名空间、高可靠和高可用的...

文件网关支持的OSS Bucket类型说明

设置修改时间会被转换成修改存储桶里的对象的元数据,通过调用拷贝对象API来实现,如果是归档类型或者冷归档类型的文件,就会需要执行耗时的解冻动作,影响上传效率,甚至可能因为缓存盘内的数据来不及上传导致写入失败,所以不建议网关...

设置生命周期策略

也可以通过NAS控制台查看已转储至低频存储或归档存储的文件。更多信息,请参见 查看低频介质存储文件。同一个文件或目录支持同时配置低频存储规则和归档存储规则,若同时选择,低频存储管理规则天数必须小于归档管理规则天数。生命周期策略...

0053-00000002

问题描述 视频截帧请求访问的目标视频文件读取失败。...解决方案 当前仅支持对视频编码格式为H264和H265的视频文件进行视频截帧,请确保您访问的目标文件格式正确。如果您仍对视频文件为何读取失败有疑问,请联系 技术支持。相关文档 视频截帧

0053-00000004

问题描述 视频截帧请求访问的目标文件未找到...解决方案 当前仅支持对视频编码格式为H264和H265的视频文件进行视频截帧,请确保您访问的目标文件格式正确。如果您仍对视频文件为何无法获取视频流有疑问,请联系 技术支持。相关文档 视频截帧

0053-00000003

问题描述 视频截帧请求访问的目标视频文件打开...解决方案 当前仅支持对视频编码格式为H264和H265的视频文件进行视频截帧,请确保您访问的目标文件格式正确。如果您仍对视频文件为何打开视频流失败有疑问,请联系 技术支持。相关文档 视频截帧

存储费用

当您在OSS内存储文件时,OSS会根据您存储的文件类型、大小和时长收取一定的存储费用。说明 本文仅说明相关计费项及付费方式。有关计费项的定价详情,请参见 OSS产品定价。计费项 计费项 计费规则 计费周期 付费方式 标准存储(本地冗余)...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储 CPFS 数据库文件存储 对象存储 文件存储HDFS版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用