函数计算挂载文件系统
通过在函数计算配置NAS文件系统，函数能够以类似于访问本地文件系统的方式操作NAS文件，实现文件持久化存储。该方式不仅可以消除本地磁盘空间的限制，还允许不同的函数实例共享文件数据。本文介绍如何为函数配置NAS。前提条件 已创建NAS...
存证交易模型
LinkNotaryPayloadDO 链接存证模型 如果一个文件需要存证,且不希望源文件上链,或者文件过大不适合写上链，可以选择将文件的Hash值上链，此外且将文件的链接（文件固定的URI）写入链。将来检索数据时，可以根据URI去取源文件。存证结构 link...
常见问题
使用ossfs上传到OSS的文件的Content-Type全是application/octet-stream 问题分析：上传文件时，ossfs通过查询/etc/mime.types 中的内容来设置文件的Content-Type。当该文件不存在时，默认设置为application/octet-stream。解决方案：请检查...
上传代码包到函数计算后文件显示乱码如何处理？
上传代码包到 函数计算 后，遇到代码文件名称或文件内容乱码，您可以参考本文排查原因并处理。文件名称乱码 代码上传到 函数计算 后，文件名称乱码，可能由以下几个原因导致。文件名称编码不一致 函数计算 环境中默认使用UTF-8处理文件名，...
在线预览.txt文件出现乱码问题怎么办？
本文介绍通过OSS控制台在线预览.txt文件出现乱码问题的原因及解决方法。问题原因 文件错误编码。解决方法 登录 OSS管理控制台。单击 Bucket 列表，然后单击目标Bucket名称。在左侧导航栏，选择 文件管理>文件列表。在目标Object右侧选择>...
如何解决Windows系统文件上传到Linux系统中显示乱码的...
概述 本文主要介绍如何解决Windows系统文件上传到Linux系统中显示乱码的处理方案。详细信息 修改Office文件字符编码的方法，对于文件名称字符编码仍可能存在异常，针对于Windows系统默认使用GB2312字符编码的解决方案，建议使用英文对文件...
SELECT INTO OUTFILE
当您需要备份或者迁移 云数据库SelectDB 中的数据时，通过 SELECT INTO OUTFILE 命令，可以将查询结果导出为文件，并且支持到 通过S3或HDFS协议导出到远端存储（如OSS、HDFS等）。功能介绍 SELECT INTO OUTFILE 命令用于将查询结果导出为...
Quick BI本地上传文件报错“AE0570000018:the file ...
UTF-8格式的CSV文件可以准确识别编码，GBK、GB2312格式的CSV文件的编码可能不能被智能识别出来，从而导致上传的文件为乱码。上传文件时，建议您使用Chrome浏览器。上传的文件中，列的类型根据前100行确定：如果前100行均为数字，则系统会...
一般性问题
1.数据库文件存储DBFS是什么，适合什么场景？数据库文件存储DBFS是面向数据库场景优化的POSIX兼容的共享读写的文件存储系统。主要适用于：OLTP及OLAP数据库场景：例如，MySQL、PostgreSQL等。NoSQL数据库场景：例如，MongoDB、RocksDB等。2...
使用自助诊断功能
例如检查磁盘是否写满、检查文件系统是否只读、检查文件名是否乱码、检查文件权限设置的正确性等信息。诊断完成后，您可以单击 重新诊断 返回到 自助诊断 页面。目录分析 用来分析系统文件（目录）的数量和空间占用情况。单击 目录分析。...
高级管理FAQ
写低频存储文件的延时与写通用性能型NAS、通用高级型NAS或通用容量型NAS文件基本一致。文件转储到低频存储后，怎么收费？当文件转储到低频存储中，会采用低频存储的计费方式。更多信息，请参见 通用型NAS计费。文件转储到归档存储后，怎么...
数据库
blk_write_time double precision 在数据库中后端花费在写数据文件块的时间。单位：毫秒。stats_reset timestamp with time zone 统计信息最近一次被重置的时间。pg_stat_bgwriter pg_stat_bgwriter 视图将只有单独的一行，包含集群的全局...
数据库
blk_write_time double precision 在数据库中后端花费在写数据文件块的时间。单位：毫秒。stats_reset timestamp with time zone 统计信息最近一次被重置的时间。pg_stat_bgwriter pg_stat_bgwriter 视图将只有单独的一行，包含集群的全局...
cp（拷贝文件）
修改文件对象标签 您可以在覆写文件时，添加-tagging 选项修改文件对象标签，多个标签以and（&）符号隔开。命令如下：./ossutil64 cp oss:/examplebucket1/examplefile.txt oss:/examplebucket1/-tagging"abc=1&bcd=2&……"关于对象标签的...
镜像常见格式
支持写时拷贝（CoW，Copy-On-Write），镜像文件只反映底层磁盘变化。支持快照，可以包含多个历史快照。支持压缩和加密，可以选择ZLIB压缩和AES加密。VHD VHD是微软提供的一种虚拟磁盘文件格式。VHD文件格式可以被压缩成单个文件存放到本地...
使用MaxCompute控制台（离线）
类别 参数名 描述 上传文件数据预览 文件编码 若文件存在乱码，则可切换可用编码。支持选择 UTF-8、GB18030 或 Big5。按列名映射 将待上传文件中的列与目标表中的列基于列名进行对应导入。按顺序映射 将待上传文件中的数据按字段顺序导入...
Binlog Cache Free Flush
在这个过程中，Binlog的文件头（File Header）和头部的几个events（Header Events）会填满预留空间，预留空间主要包含四部分内容：File Header：在每个Binlog文件的头部4字节，都写有一个标识：[0xFE 'bin']，用来标识此文件是个Binlog文件...
性能说明FAQ
IOPS=读写次数/任务整体时延 例如，容量型NAS文件系统1 MiB写时延约为100 ms，8 KiB写时延约为15 ms，4 KiB写时延约为10 ms，最大支持128个并发任务。当您需要1s内写1 MiB数据时，可以有多种写入方案，如下列举其中几种：序号 读写块大小 ...
同步增量数据到OSS
设置此参数为false，表示写多个文件，当读不到任何数据时，如果配置文件头会输出空文件只包含文件头，否则只输出空文件。writeMode":"truncate",/当同名文件存在时系统进行的操作，可选值包括truncate、append和nonConflict。truncate表示...
OSS文件上传和下载失败的排查方法
OSS的文件更新后部分地区下载的文件仍是旧版本 OSS下载的RAR文件存在乱码 OSS下载的内容与实际内容不一致 更多信息 OSS SDK上传文件主要包括以下几种上传方式，请根据不同上传方式的特性，选择合理的上传方式进行重新配置。简单上传：适用...
如何避免多进程/多客户端并发写同一日志文件可能出现...
问题现象 文件存储 NAS（Apsara File Storage NAS）为多客户端提供了统一名字空间的文件共享读写能力，但在多进程/多客户端并发写同一个文件的场景中（典型的例如并发写同一个日志文件），各进程分别维护了独立的文件描述符及写入位置等上...
对象存储OSS
当配置了跟上游的chained operator不一样的parallelism时，写文件的算子会使用指定的sink parallelism，如果开启了文件合并，文件合并的算子也会使用指定的sink parallelism。说明 这个值应该大于0，否则将抛出异常。配置Bucket鉴权信息 ...
生命周期管理FAQ
写低频存储文件的延时与写通用性能型NAS、通用高级型NAS或通用容量型NAS文件基本一致。文件转储到低频存储后，怎么收费？当文件转储到低频存储中，会采用低频存储的计费方式。更多信息，请参见 通用型NAS计费。转储至低频存储的冷数据被...
协议服务概述
其他限制 协议服务为多客户端提供了统一名字空间的文件共享读写能力，但在多进程或多客户端并发写同一个文件的场景中（例如，并发写同一个日志文件），各进程分别维护了独立的文件描述符及写入位置等上下文信息，而NFSv3协议本身并没有提供...
使用限制
其他限制 协议服务为多客户端提供了统一名字空间的文件共享读写能力，但在多进程或多客户端并发写同一个文件的场景中（例如，并发写同一个日志文件），各进程分别维护了独立的文件描述符及写入位置等上下文信息，而NFSv3协议本身并没有提供...
将NAS数据迁移至本地
文件存储NAS支持通过rsync命令行工具、Robocopy工具等直接下载数据到本地文件。您也可以将数据同步到OSS后再在OSS侧下载数据到本地文件。重要 下载文件数据需要占用ECS公网带宽，建议您新购一台ECS实例专门负责文件数据下载，避免占用业务...
JindoData版本说明
改进 dumpFile 命令，输出随机写文件相关信息。JindoFuse POSIX支持 支持文件随机修改（Seek and Write）。JindoFSx存储加速系统 JindoFSx核心能力 支持对阿里云OSS透明缓存加速（保持 oss:/不变）。支持对阿里云OSS-HDFS服务（JindoFS服务...
OSS数据源
离线写 OSS Writer实现了从数据同步协议转为OSS中的文本文件功能，OSS本身是无结构化数据存储，目前OSS Writer支持的功能如下。支持 不支持 支持且仅支持写入文本类型（不支持BLOB，如视频和图片）的文件，并要求文本文件中的Schema为一张...
通用型NAS
本文列举了容量型、高级型和性能型的性能指标、支持的文件协议类型、适用的高级功能及适用场景等，您可以根据业务需求选择合适的 NAS 类型。对于延迟敏感型应用，建议使用极速型 NAS。性能指标 项目 容量型 高级型 性能型 吞吐（峰值）初始...
常见问题
如何将Linux系统中文件名乱码的文件上传到OSS 解决方法：确认乱码文件的编码格式。使用 export LANG="<your file name encode>"命令解析编码。使用 clean 命令清除原来的Job，然后使用 submit 命令重新提交Job。启动服务时报错 java.nio.file....
迁移数据至阿里云NAS
配置数据传输中转节点后，您还要使用迁移工具迁移数据至阿里云文件存储NAS。本文介绍如何通过迁移工具将非阿里云的数据迁移至文件存储NAS。前提条件 已配置数据传输中转节点ECS实例。具体操作，请参见 配置数据传输中转节点。使用SFTP客户...
使用OSS控制台上传数据文件
对象存储OSS控制台支持上传大小不超过5 GB的文件，如果您需要导入图数据库GDB实例的数据文件不超过5 GB，您可以将数据文件上传至对象存储OSS的Bucket中，然后从Bucket中将数据文件导入至图数据库GDB实例。本文介绍将数据文件上传至对象存储...
其他问题
目前仅支持Linux操作系统挂载NFS文件系统，Windows操作系统挂载SMB文件系统、Windows操作系统挂载NFS文件系统及Linux操作系统挂载SMB文件系统场景，请您登录ECS实例执行命令挂载。更多信息，请参见 Windows系统挂载SMB协议文件系统、...
HDFS数据源
离线写 HDFS Writer提供向HDFS文件系统指定路径中写入TextFile文件、ORCFile文件以及ParquetFile格式文件，文件内容可以与Hive中的表关联。目前HDFS Writer支持大部分Hive类型，请注意检查您的数据类型。HDFS Writer针对Hive数据类型的转换...
集群吞吐性能测试
hadoop jar./share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-2.7.6-tests.jar TestDFSIO 顺序写性能测试 预估值：1000 MB/s 将文件写入到 文件存储 HDFS 版。将500个大小为4 GB的文件按顺序写入到 文件存储 HDFS 版，读写数据...
查看NAS性能监控
例如，您可以在挂载NAS的ECS实例上执行命令（挂载目录为/mnt）：fio-numjobs=1-iodepth=128-direct=1-ioengine=libaio-sync=1-rw=randwrite-bs=1M-size=1G-time_based-runtime=600-name=Fio-directory=mnt，用于测试文件系统写吞吐指标。...
创建快照
数据库文件系统快照基于云盘快照，它是一种便捷高效的数据容灾手段，用于对文件系统的数据进行备份。前提条件 进行快照创建时，数据库文件系统必须处于 已挂载 或 待挂载 状态。说明 如果文件系统处于 待挂载 的状态，则需要保证文件系统有...
系统管理函数
记录完结束位置后，当前的预写式日志插入点自动移到下一个预写式日志文件，以便结束的预写式日志文件可以立即归档，从而完成备份。该函数的结果是一条记录。lsn 列保持备份的结束预写式日志位置（可以再忽略）。当结束排他备份时，第二和第...
FTP数据源
否 无 fileFormat 文件写出的格式，包括CSV和TEXT两种，CSV是严格的CSV格式，如果待写数据包括列分隔符，则会按照CSV的转义语法转义，转义符号为双引号。TEXT格式是用列分隔符简单分割待写数据，对于待写数据包括列分隔符情况下不做转义。...
创建文件系统
当您想实现文件系统的共享访问时，您可以创建通用型NAS或极速型NAS文件系统，然后在多个计算节点中挂载使用。NAS文件系统支持在云上ECS、容器、FC、PAI等计算节点中挂载使用。同时，也支持本地数据中心挂载访问NAS。背景信息 通用型NAS文件...
- 产品推荐
- 这些文档可能帮助您