Alibaba Cloud Linux 3系统的NFS文件系统读取文件性能...
在NFS（Network File System）文件系统中通过read、copy_file_range等系统调用读取文件时，与同场景下的Alibaba Cloud Linux 2相比，可能会存在明显的性能退化情况。本文介绍在Alibaba Cloud Linux 3系统的ECS实例中，在NFS文件系统下读取...
Go-SQL-Driver/MySQL 连接 OceanBase 数据库示例程序
步骤三：修改 go-oceanbase 项目中的数据库连接信息 根据 步骤二：获取 OceanBase 数据库连接信息 中的信息修改 test.go 文件中的数据库连接信息。选中 test.go 文件，右键单击选择 打开方式，可通过 记事本 或其他编辑软件打开。示例如下...
GORM 连接 OceanBase 数据库示例程序
步骤三：修改 gorm-oceanbase 项目中的数据库连接信息 根据 步骤二：获取 OceanBase 数据库连接信息 中的信息修改 test.go 文件中的数据库连接信息。选中 test.go 文件，右键单击选择 打开方式，可通过 记事本 或其他编辑软件打开。示例...
基础开发
Go 由于老版本的Go（小于1.13）不支持Go proxy的功能，因此如果应用的工程文件中的 go.mod 文件指定了一个偏小的版本，经常会导致无法利用到阿里镜像源的加速能力，导致依赖拉取失败。推荐在不影响工程构建的前提下，尽量升级工程文件中...
数据缓存
当访问相同的远程数据时，SelectDB会检查本地缓存中是否存在该文件的缓存数据，并根据Block的offset和size，确认哪些数据从本地Block读取，哪些数据从远程获取，并缓存远程拉取的新数据。BE节点重启时，会扫描 cache_path 目录并恢复Block...
COPY
\copy 会调用 COPY FROM STDIN 或者 COPY TO STDOUT，然后读取/存储一个 psql客户端可访问的文件中的数据。因此，在使用 \copy 时，文件的可访问性和访问权利取决于客户端而不是服务器。我们推荐在 COPY 中使用的文件名总是指定为一个绝对...
生命周期管理FAQ
以下操作会更新访问时间：读取文件 写入文件 以下操作不会更新访问时间：重命名一个文件 修改文件的用户（user）、用户组（group）、模式（mode）等文件属性 如果一个目录配置了多项生命周期管理策略，文件系统会执行哪一项策略？...
高级管理FAQ
以下操作会更新访问时间：读取文件 写入文件 以下操作不会更新访问时间：重命名一个文件 修改文件的用户（user）、用户组（group）、模式（mode）等文件属性 如果一个目录配置了多项生命周期管理策略，文件系统会执行哪一项策略？...
迁移指南
对于分区中有许多文件的大型表，这可能比从Parquet表加载单个分区（使用直接分区路径或WHERE）要快得多，因为在目录中列出文件通常比从事务日志中读取文件列表慢。将现有应用程序移植到Delta Lake时，应避免执行以下操作，这些操作会绕过...
JMeter使用CSV参数文件
JMeter会自动从CSV文件的表头中读取参数名作为变量名。说明 如果CSV文件不含表头，需要在CSV Data Set Config的 Variable Names(comma-delimited)中，输入 id,name。右键单击线程组，选择 Add>Sampler>HTTP Request 。根据具体业务接口，...
JMeter使用CSV参数文件
JMeter会自动从CSV文件的表头中读取参数名作为变量名。说明 如果CSV文件不含表头，需要在CSV Data Set Config的 Variable Names(comma-delimited)中，输入 id,name。右键单击线程组，选择 Add>Sampler>HTTP Request 。根据具体业务接口，...
LOCK
当一个视图被锁定时，出现在该视图定义查询中的所有关系也将被使用同样的锁模式递归地锁住。在为引用表的命令自动获取锁时，PolarDB总是尽可能使用最不严格的锁模式。提供 LOCK TABLE 是用于想要更严格的锁定的情况。例如，假设一个应用...
API概览
Domain管理 API 标题 API概述 CreateDomain 创建Domain 创建 domain。GetDomain 获取Domain ...CsiGetFileInfo 获取文件内容安全详情 获取文件的内容安全详情。其他 API 标题 API概述 Batch 批量调用API 支持批量调用部分API，提升调用效率。
性能监控FAQ
优化该参数将提升频繁读取文件属性场景的文件系统性能。maxFileToCache 最大缓存的inode数量。优化该参数将提升反复访问海量小文件场景的文件系统性能。prefetchPct、prefetch及write-behind buffer 占用page pool的最大比例。优化该参数将...
API概览
GetFileProtectDashboard 获取文件保护看板数据 获取核心文件监控功能大盘信息，包括生效规则数量、插件安装情况等。ListFileProtectEvent 获取核心文件保护告警事件列表 根据相关条件，筛选出符合条件的规则列表。DeleteFileProtectRule ...
HDFS数据源
说明 实际启动的并发数是您的HDFS待读取文件数量和您配置作业并发数两者中的小者。当指定通配符，HDFS Reader尝试遍历出多个文件信息。例如指定/代表读取/目录下所有的文件，指定/bazhen/代表读取bazhen目录下游所有的文件。HDFS Reader...
文件审核
功能项 文件检测 支持检测图片所在的文件格式 支持DOC、DOCX、PPT、PPTX、PDF、XLS、XLSX、TXT格式 检测图片中的文字 支持 文件大小限制 200 MB 同时检测文件的数量 10路 近线检测模式（用于批量文件检测）支持 其他 支持开启或关闭检测...
数据集管理
下载数据集 在 数据集列表 页面，单击目标数据集 操作 列的 下载，会将当前数据集中文件的签名路径（过期时间为24小时）写入到文本文件中，打开文本文件，复制文本文件中的签名路径到浏览器，可以下载数据集中的文件。删除数据集 在 数据集...
获取文件列表
1.组件介绍 说明 必要前置组件：无 利用本组件可以获取文件列表 2.输入项 说明 请参照可视化编辑器内组件面板中各输入项的帮助信息 3.输出项 说明 请参照可视化编辑器内组件面板中各输出项的帮助信息 4.组件使用示例 4.1.组件配置示例 在 ...
镜像回源配置示例
其中，bucket-03为公共读，bucket-04为私有，需实现如下场景：当请求者bucket-03根目录下 examplefolder 目录中不存在的文件时，可以从bucket-04的 examplefolder 目录中获取目标文件。允许将请求URL中携带的query string传递到源站。允许...
高级配置：内存缓存本地目录
无需修改业务代码，直接读取缓存配置的目标本地目录中的文件，即可享受加速效果。同一服务的不同实例之间会形成一个p2p网络。在进行实例扩容时，可以通过p2p网络从其他实例中就近读取缓存的文件，以加速实例扩容的速度。注意事项 为保持...
直播录制常见问题
当OSS Bucket权限为私有时，直播控制台无法获取OSS录制文件的鉴权地址，故播放会报错。请参见 设置Bucket ACL，修改存储空间读写权限，将录制文件所在的Bucket权限设置为公共读。或者您参见 直播录制到OSS中，如何获取录制文件的播放地址？...
Logtail采集详情
当日志文件产生了修改事件，才会触发采集流程，Logtail开始读取文件。如果您要采集历史日志文件，请参见 导入历史日志文件。为保证采集日志的时效性以及稳定性，Logtail会对待采集的目录注册事件监听（Linux下使用 Inotify）以及定期轮询。...
API概览
DescribeDirQuotas 查询文件系统的目录配额 获取文件系统每个目录配额的详细信息。生命周期管理 API 标题 API概述 CreateLifecyclePolicy 创建生命周期管理策略 创建一个生命周期管理策略。DeleteLifecyclePolicy 删除生命周期管理策略 ...
目录和文件访问权限
数字形式 短格式 说明 7 RWX 所有权限 5 R-X 读取+执行权限 4 R-读取权限 0-无权限 权限示例 例如，HDFS 中的一个目录结构为/Dir1/Dir2/file，Dir1是根目录中的一个目录，Dir2是Dir1中的一个目录，file是Dir2中的一个文件。当您需要对/，...
使用OSS Foreign Table进行数据湖分析
本文介绍如何使用OSS Foreign Table（OSS外表，简称OSS FDW）导入OSS中的数据并进行数据分析。功能介绍 OSS FDW基于PG FDW（PostgreSQL Foreign Data Wrapper）框架进行开发，通过OSS FDW，您可以进行如下操作：将OSS数据导入本地表（行存...
使用Fuse-DFS挂载文件存储 HDFS 版
背景信息 Fuse-DFS是Hadoop项目自带的一个功能模块，提供了使用FUSE（用户空间中的文件系统）在UNIX文件系统上映射HDFS的功能，在官方提供的Hadoop预编译版本中不包含Fuse-DFS的功能模块，如需使用该功能需要手动编译该功能模块并添加到...
通用型NAS计费
如果只读取文件的一部分，则按照读取的部分产生的流量收费。低频或归档读写流量不区分网络环境，只要发生读写就会产生读写流量费用。执行数据取回任务时，按照目标文件大小收取读流量费用。备份低频存储或归档存储中的文件时，按照目标文件...
文件存储NAS的审计事件
文件存储NAS已与操作...DescribeExtremeFileSystems 获取文件系统。DescribeExtremeMountTargets 获取挂载目标。DescribeExtremeRegions 获取可选的地域和可用区。DescribeFilesets 查询文件集列表。DescribeFileSystems 查询文件系统信息。...
导入Amazon S3文件
阿里云日志服务SLS支持导入Amazon S3中的日志文件。您可以通过数据导入的方式将Amazon S3的日志文件导入到阿里云的日志服务，实现日志的查询分析、加工等操作。目前日志服务只支持导入5GB以内的S3文件，压缩文件大小按照压缩后的大小计算。...
文件数据源
说明 请勿直接修改XLSX文件的后缀。推荐使用EXCEL、Numbers等软件导出，或使用Apache Commons-csv程序生成。在参数文件第一行不写列名，直接写参数数据。若参数文件第一行是列名（不是参数数据），上传文件时需选中 首行作为参数名 功能，...
文件数据源
说明 请勿直接修改XLSX文件的后缀。推荐使用EXCEL、Numbers等软件导出，或使用Apache Commons-csv程序生成。在参数文件第一行不写列名，直接写参数数据。若参数文件第一行是列名（不是参数数据），上传文件时需选中 首行作为参数名 功能，...
生命周期管理概述
生命周期策略 您可以基于最后一次访问时间的规则配置生命周期策略，定期将通用型NAS文件系统标准存储中的冷数据转储至低频存储或归档存储。低频存储：适用于较低访问频率（平均每月访问频率1到2次）的业务场景。支持将大于14天、30天、60天...
手把手教您配置通用型NAS容灾
您也可以为两个文件系统开启回收站功能，当您误删除业务或容灾文件系统中的文件后，可以通过NAS回收站恢复这些文件及其UID、GID和ACL等元数据信息。更多信息，请参见 回收站。配置定期任务迁移增量数据。使用crontab配置定期增量迁移。执行...
GetRecycleBinAttribute-获取回收站的属性
Size long 回收站中文件的存储量。单位：Byte。100 SecondarySize long 回收站中低频数据存储量。单位：Byte。100 Status string 回收站状态。包括：Enable：回收站已启用。Disable：回收站已关闭。Disable ReservedDays long 回收站中文件...
文本文件
读取纯文本文件，文件中的每一行将被解析为DataFrame中的一条记录，然后根据要求进行转换，由于文本文件能够充分利用原生类型（native type）的灵活性，因此很适合作为DataSetAPI的输入。前提条件 通过主账号登录 阿里云 Databricks控制台...
Windows挂载NFS协议的通用型NAS文件系统
前提条件 已创建NFS协议的通用型NAS文件系统，并获取到该文件系统的挂载点地址。具体操作，请参见 通过控制台创建通用型NAS文件系统。在创建文件系统的地域，已有可用的云服务器ECS（Windows）。具体操作，请参见 创建ECS实例。单击查看NFS...
锁诊断
AnalyticDB PostgreSQL版 新增锁诊断功能，帮助您快速诊断数据库中的锁情况。前提条件 实例资源类型为存储弹性模式。引擎版本为6.0。操作步骤 登录 云原生数据仓库AnalyticDB PostgreSQL版控制台。在控制台左上角，选择实例所在地域。找到...
CancelRecycleBinJob-取消回收站中的任务
取消运行中的文件恢复任务时，已恢复的文件可以在文件系统查询，未恢复的文件可以在回收站中查询。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 ...
基础管理FAQ
挂载成功后，为什么无法删除文件系统中的文件？可能是权限组权限不足或账号不支持。请确认权限组是否有允许读写的权限，登录操作的账号是否为管理员账号（Windows）或root（Linux）。为什么无法创建经典网络类型挂载点？自2022年11月21日起...
- 产品推荐
- 这些文档可能帮助您