资源
a+：类似于 r+，但写入时只能写入文件末尾。同时，PyODPS中文件资源支持以二进制模式打开，例如一些压缩文件需要以这种模式打开。rb：指以二进制读模式打开文件。r+b：指以二进制读写模式打开。表资源 创建表资源 o.create_resource('test_...
Python SDK示例：资源
a+：类似于 r+，但写入时只能写入文件末尾。同时，PyODPS中文件资源支持以二进制模式打开，例如一些压缩文件需要以这种模式打开。rb：指以二进制读模式打开文件。r+b：指以二进制读写模式打开。表资源 创建表资源 o.create_resource('test_...
FTP数据源
单个文件不能支持并发写入。FTP本身不提供数据类型，FTP Writer均将数据以STRING类型写入FTP文件。支持的字段类型 远程FTP文件本身不提供数据类型，该类型是DataX FtpReader定义。DataX内部类型 远程FTP文件数据类型 LONG LONG DOUBLE ...
OSS数据源
单个文件不能支持并发写入。OSS本身不提供数据类型，OSS Writer均以STRING类型写入OSS对象。如果OSS的Bucket存储类型为 冷归档存储，则不支持写入。类型分类 数据集成column配置类型 整数类 LONG 字符串类 STRING 浮点类 DOUBLE 布尔类 ...
深度解析Lindorm搜索索引（SearchIndex）特性
SearchIndex底层依赖Lucene，Lucene有一个明显的"缺陷"：数据写入后不能立即可查，必须要显示的执行Flush或者Commit操作才可以查询到。这导致基于Lucene的服务无法应用到实时业务场景，只能适用于监控、日志等弱实时的场景。在业界，基于...
使用须知
如果使用文件网关写入较大的文件，单一文件大小应保持在缓存盘容量的30%以下，且不能多个大文件并发写入，否则容易造成缓存盘写满的情况。1.0.37及之前版本的文件网关支持的最大文件大小是1.2TB。超过该值，文件将无法上传至OSS。1.0.38及...
文件存储NAS SMB ACL概述
新的AD用户创建的文件或文件夹不会继承Everyone权限，所以不使用AD的用户并不能访问新的AD用户创建的文件或文件夹，只有创建者用户和管理员用户可以访问。AD用户可以访问不使用AD的用户（即Everyone）创建的文件或文件夹。NAS SMB ACL特性 ...
常见问题
重要 不同存储类型的文件系统不能相互转换，更多有关文件系统的使用限制，请参见 使用限制。NAS的存储类型、存储规格支持相互转换吗？不支持相互转换。但您可以参照以下操作，重新购买一个目标文件系统，将旧文件系统中的数据迁移至新文件...
如何支持超大事务
以本测试场景为例，如果事务的每条语句都是INSERT语句，那么每个分片的数据写入量不应超过2 GB，事务总的数据写入量不能超过：分片数量×2 GB，例如8分片的情况下，写入总量在16 GB时也会触发这个报错。但是，上述讨论并不意味着只要您的...
如何选择合适的文件系统？
重要 不同存储类型的文件系统不能相互转换，更多有关文件系统的使用限制，请参见 文件存储NAS使用限制 和 文件存储CPFS使用限制。根据业务负载选型 标识说明：√：表示当前文件系统支持。表示当前文件系统不支持。项目 通用型NAS 极速型NAS...
ModifyFileSystem-修改文件系统属性
全局唯一且不能为空串。支持英文字母，可包含数字、下划线（_）和短划线（-）。MyFirstModDFS SpaceCapacity long 否 文件系统容量预算。当实际数据存储达到文件系统容量后，数据将无法写入。文件系统容量不支持缩小。单位：GB 1024 ...
整库离线同步至OSS
保留原有文件：写入前不进行任何处理，数据集成OSS Writer直接使用Object名称写入，并使用随机UUID的后缀名来保证文件名不冲突。例如您指定的Object名为数据集成，实际写入为 DI_*_*_*。说明 写入单个文件时不支持该选项。退出报错：如果...
FS-文件系统
蜂窝模组 4.0.1 HaaS600-EC600U 是 蜂窝模组 4.0.1 HaaS600-N715 是 蜂窝模组 4.0.1 fs.writeSync(String path,String|ArrayBuffer data,Object options)在文件系统中写入文件。入参 属性 类型 是否必填 描述 path String 是 写入文件的...
HDFS数据源
将读取的文件写入这个临时目录。全部写入后，将临时目录下的文件移动到您指定的目录（在创建文件时保证文件名不重复）。删除临时目录。如果在此过程中，发生网络中断等情况造成无法与HDFS建立连接，需要您手动删除已经写入的文件和临时目录...
UpdateGatewayFileShare
说明 如果同时已限制最大写入速度，最大上传速度不能小于最大写入速度。DownloadLimit Integer 否 0 文件共享最大下载速度，单位为MB/s。取值范围为0~12800，0表示无限制，只在复制模式且开启下载文件数据时才可设置。网关版本1.3.0及以上...
CreateGatewayFileShare
说明 同时如果已限制最大写入速度，最大上传速度不能小于最大写入速度。InPlace Boolean 否 false 文件共享是否碎片优化。取值范围如下：false（默认）：否 true：是 CacheMode String 否 Cache 文件共享缓存模式。取值范围如下：Cache：...
CreateFileSystem-创建文件系统
全局唯一且不能为空字符串。支持英文字母，可包含数字、下划线（_）和短划线（-）。MyFirstHDFS SpaceCapacity long 是 文件系统容量。当实际存储数据量达到文件系统容量后，将无法写入数据。单位：GiB 1024 ThroughputMode string 否 吞吐...
配额与限制
数据请求的限制 请求内容 限制规则 写入 单次写入数据量不能超过64 MB。单次批量写入行数不能超过2000。单个分片（Region）的文件数目超过50个，会增大写入延迟。说明 如何查看单个分片的文件数目，请参见 概览。单个分片（Region）的文件...
高级管理FAQ
以下操作会更新访问时间：读取文件 写入文件 以下操作不会更新访问时间：重命名一个文件 修改文件的用户（user）、用户组（group）、模式（mode）等文件属性 如果一个目录配置了多项生命周期管理策略，文件系统会执行哪一项策略？...
挂载访问FAQ
为什么写入文件系统的中文字符在客户端显示为乱码?使用Linux操作系统在NFS文件系统中执行ls命令时，为什么会返回523错误？挂载NFS文件系统时，返回mount.nfs:No such device该如何处理？如何解决服务器开机自启动挂载NFS文件系统失败？挂载...
计费常见问题
不能。已创建的极速型NAS文件系统不支持付费方式变更。当您的包年包月极速型NAS文件系统到期后，您可以新建按量付费模式的极速型NAS文件系统，并将原包年包月极速型NAS文件系统中的数据迁移至新的按量付费文件系统中。同时存在资源包和存储...
极速型NAS扩容
正在创建快照的文件系统不能扩容。由于文件系统扩容时会自动对数据进行快照保护，所以正在创建快照的文件系统不支持扩容，建议您避开快照周期进行扩容或者删除当前正在执行的快照任务。操作步骤 登录 NAS控制台。在左侧导航栏，选择 文件...
克隆快照
您可以基于已有的快照克隆出新的数据库文件系统。控制台上克隆快照 在数据库文件存储控制台左侧...注：克隆的数据库文件系统容量不能小于快照的容量。在左侧导航栏点击 数据库文件系统列表 进入 文件系统列表 页面，可以看到克隆的文件系统。
Table Group设置最佳实践
考虑到每个shard还需要进行查询等读操作，一般不能使写入打满CPU，因此可以说，使用1/3core的shard，写入RPS为1000条/秒（每条1KB）。因此，举例而言，如果您要求写入RPS 6W/s，每条1KB，则应该选择的Shard数约在60Shard之上，视情况增减。...
自动优化
说明 详细内容可参考Databricks官网文章：自动优化 自动优化的工作原理 自动优化包含两个重要特性：优化Delta表的写入 在开源版Spark中，每个executor向partition中写入文件时，都会创建一个文件进行写入，最终会导致一个partition中包含...
0041-00000203
问题描述 请求触发镜像回源时，数据无法写入OSS。问题原因 Bucket处于被保护状态时，无法向该Bucket写入文件。问题示例 无 解决方案 确保回源文件写入的Bucket未处于保留策略的保护状态。相关文档 镜像回源 保留策略
通过文件管理优化性能
多次运行间不能保证Z-Ordering所需的时间减少。但是，如果没有数据添加到刚被Z-Order过的数据，则再次执行Z-Ordering不会改变上次执行完Z-Ordering的数据布局，执行时间理论上会减少。使用案例 在本案例中，我们使用和Bin-packing压缩相同...
使用NAS静态存储卷
非递归：执行权限变更时，只对挂载目录起作用，其子目录、包含的文件不进行权限变更。递归：执行权限变更时，会对其子目录、包含的文件进行递归操作，全部变更权限。说明 当挂载目录下面文件数量较多时，使用递归方式，会出现执行 chmod ...
NFS协议
但是，一旦ECS-1打开一个文件，写入若干数据，然后执行了文件关闭操作，之后在任何一个计算节点重新打开该文件都可以保证能访问到新写入的数据。例如，生产者ECS生产了文件X，生产完毕后执行了close。然后给消息队列发一条消息说，文件X...
使用mount命令挂载ext4文件系统
如果使用本场景推荐的挂载参数，任何内存的修改都会同步写入磁盘，并且所有数据第一时间保序写入文件系统日志。即使发生低概率异常，文件系统恢复后也能保证数据不丢失。优点：数据安全性高，可以确保系统宕机后文件系统的数据不丢失。缺点...
计费常见问题
实例到期 7天 后释放实例，已释放的实例无法找回，不能续费，实例中的数据会被永久删除，无法恢复。如果您之前有手动备份实例文件，可以在指定的OSS仓库里查找。已到期并停止服务的实例如何备份文件？停止服务的实例处于冻结状态，无法操作...
特性
假设当前目录dir的权限是owner可写，group可读，everyone不能访问。执行命令 nfs4_getfacl dir 返回示例#file:dir A:OWNER@:rwaDxtTnNcCy A:GROUP@:rxtcy A:EVERYONE@:tncy 给用户1000增加读写权限并且可继承。执行命令 nfs4_setfacl-a A:...
Fixed Plan加速SQL执行
写入的列不能是数组类型。unnest里ARRAY必须显式转换为对应列类型的数组类型。使用示例如下。begin;create table test_insert_multiline(pk1 int8,col1 float4,primary key(pk1));commit;支持Fixed Plan set hg_experimental_enable_fixed_...
Blink和Flink常见问题及诊断
解决方法：请先重试写入，如果不能恢复请找Hologres技术支持人员排查原因。报错：BackPresure Exceed Reject Limit 可能原因：通常是Hologres后端写入压力过大，导致Memtable来不及刷盘导致写入失败。解决方法：如偶发失败可忽略该问题，...
文件网关支持哪些字符集
本文介绍文件网关支持的字符集。OSS的文件命名只支持UTF-8字符集，非UTF-8命名的文件无法上传到OSS中。因此，文件网关目前仅支持向OSS上传UTF-8命名的文件。...如发现已有非UTF-8命名文件写入文件网关，请提交工单进行处理。
文件网关延迟上传的使用场景及配置
文件网关支持延迟上传功能，即您写入的数据会按需延迟一定时间...通过延迟一段时间等待文件已经完全写入文件网关，再上传到OSS，可以减少带宽消耗并提供上传效率。配置延迟上传 您可以在创建共享时，开启延迟上传功能，详情请参见 管理共享。
配置OSS输出组件
写入文件个数 目标端OSS的文件写入策略。支持写入单个文件和多个文件。单个文件：将写入目标端OSS的单个文件中。多个文件：将写入目标端OSS的多个文件中。同时需要配置后缀格式，格式可选择生成序列后缀，如_0、_1、_2 等；也可选择生成...
配置OSS输出组件
写入文件个数 目标端OSS的文件写入策略。支持写入单个文件和多个文件。单个文件：将写入目标端OSS的单个文件中。多个文件：将写入目标端OSS的多个文件中。同时需要配置后缀格式，格式可选择生成序列后缀，如_0、_1、_2 等；也可选择生成...
配置Amazon S3输出组件
写入文件个数 目标端Amazon S3的文件写入策略。支持写入单个文件和多个文件。单个文件：将写入目标端Amazon S3的单个文件中。多个文件：将写入目标端Amazon S3的多个文件中。同时需要配置后缀格式，格式可选择生成序列后缀，如_0、_1、_2 ...
配置Amazon S3输出组件
写入文件个数 目标端Amazon S3的文件写入策略。支持写入单个文件和多个文件。单个文件：将写入目标端Amazon S3的单个文件中。多个文件：将写入目标端Amazon S3的多个文件中。同时需要配置后缀格式，格式可选择生成序列后缀，如_0、_1、_2 ...
- 产品推荐
- 这些文档可能帮助您