文件存储 HDFS 版和对象存储OSS双向数据迁移
{HADOOP_HOME}/bin/hadoop fs-ls oss:/<bucket>/其中，为OSS的存储空间名称，为该存储空间下的文件路径。请根据实际情况进行替换。步骤三：数据迁移 为Hadoop集群挂载好 文件存储 HDFS 版 实例和安装OSS客户端Jindo SDK后，使用Hadoop ...
访问路径
选中后，您可以正常访问文件路径下的指定资源，且访问该Bucket产生的流量、请求次数等费用将由您支付。更多信息，请参见 开启请求者付费模式。单击 确定。文件路径添加之后，单击对应的路径名称，可直接跳转到对应文件路径。单击指定路径后...
教程示例：基于Bucket Policy实现跨账号访问OSS
选中 我已知晓并同意 后，您可以正常访问文件路径下的指定资源，且访问该Bucket产生的流量、请求次数等费用将由您支付。更多信息，请参见 开启请求者付费模式。单击 确定。您也可以 创建AccessKey，并通过AccessKey使用 ossutil、...
复制文件
组件配置示例 在 原始文件路径 中，填写“D:\data\新建文本文档.txt”在 目标文件夹路径 中，填写“D:\data”在 是否增加文件名后缀 中，选择单选框选项为“否”在 是否覆盖目标路径下的文件 中，选择单选框选项为“是”高级选项保持默认值...
ListRepositoryTree-查询文件树
使用阿里云 AK+SK 或使用 STS 临时授权方式不需要传该字段 f0b1e61db5961df5975a93f9129d2513 repositoryId long 是 代码库 ID 2851516 path string 否 代码仓库内的文件路径，获取该路径下的文件目录，默认获取代码库文件树的全部结构 ...
文件
[string]data：待存入文件的内容，文件会存储在 WindVane 缓存文件路径/fileName，如果路径不存在，则自动创建路径。[string]fileName：文件名，如果文件不存在，则创建文件（不允许包含"/"）。[string]share：是否允许共享。回调参数 回调...
JindoCache统一命名空间缓存加速
jindocache-mount/nas local:/mnt/nas 您也可以将多个NAS本地文件路径挂载到不同的路径下面。使用统一命名空间访问文件系统 例如，已挂载了OSS Bucket的指定目录到Jindo文件系统中的/oss 目录下。执行以下命令，查看Jindo文件系统的根目录...
常见命令
您可以在已经创建好的E-MapReduce（简称EMR）集群中，直接使用Alluxio Shell命令来对Alluxio中的文件进行操作，也可以使用Hadoop Shell命令操作Alluxio中的文件。本文为您介绍Alluxio的常见命令。前提条件 已创建集群，并选择了Alluxio服务...
HDFS常见命令介绍
ls 在文件或者目录创建完之后，您可以查看指定路径下的文件或目录信息。在查看文件或目录信息的时候需要给出绝对路径。put 上传本地文件到HDFS的指定路径。du 显示文件的大小或者目录中所有文件的大小。cat 查看HDFS上文件的内容。cp 在...
读OSS数据
读OSS数据组件用来读取对象存储OSS Bucket路径下的文件或文件夹。本文为您介绍读OSS数据组件的参数配置。前提条件 已完成OSS授权，详情请参见 云产品依赖与授权：Designer。参数配置 您只需在画布右侧的 字段设置 页签，配置 OSS数据路径 ...
使用NAS静态存储卷
kubectl get pod 预期输出：NAME READY STATUS RESTARTS AGE nas-static-5b5cdb85f6-n*1/1 Running 0 32s nas-static-c5bb4746c-4*1/1 Running 0 32s 执行以下命令，查看名为 nas-static-5b5cdb85f6-n*的Pod/data 路径下的文件。...
使用PyJindo访问阿里云OSS-HDFS
fs.remove(file_path2)de_file=fs.listdir(sub_dir)print("删除文件后的pyjindotest目录下文件为%s."%(de_file))执行测试文件。python3.8 fs_test.py 执行结果如下所示。写入的数据为b'hello world,pyjindo'.目录文件为[*-sh.cn-*.oss-dls....
使用NAS动态存储卷
kubectl get pod 预期输出：NAME READY STATUS RESTARTS AGE nas-76b8f6df86-5*1/1 Running 0 32s nas-76b8f6df86-l*1/1 Running 0 32s 执行以下命令，查看任意一个Pod/data 路径下的文件，本文以名为 nas-76b8f6df86-5*的Pod为例。...
通过NFS使用NAS静态存储卷
kubectl get pod 预期输出：NAME READY STATUS RESTARTS AGE nas-static-5b5cdb85f6-n*1/1 Running 0 32s nas-static-c5bb4746c-4*1/1 Running 0 32s 执行以下命令，查看名为 nas-static-5b5cdb85f6-n*的Pod/data 路径下的文件。...
查询文件树
请求方式：GET/api/v4/projects/[ProjectId]/repository/tree 请求Action：ListRepositoryTree 请求参数：参数名 类型 说明 是否必须 默认值 ProjectId long 代码库id 是 Path string 仓库内路径，获取该路径下的文件目录 否 Type string ...
RAM凭据插件
说明 如果您的应用程序无法自动读取到managed_credentials_providers.properties文件，请参考代码示例，通过在代码中设置配置文件路径的方式读取。（推荐）使用应用接入点（AAP）的Client Key，通过KMS实例Endpoint获取凭据值。参数名称为 ...
使用NAS静态存储卷
kubectl get pod 预期输出：NAME READY STATUS RESTARTS AGE nas-static-5b5cdb85f6-n*1/1 Running 0 32s nas-static-c5bb4746c-4*1/1 Running 0 32s 执行以下命令，查看名为 nas-static-5b5cdb85f6-n*的Pod/data 路径下的文件。...
使用NAS静态存储卷
kubectl get pod 预期输出：NAME READY STATUS RESTARTS AGE nas-static-785b747ddf-6*1/1 Running 0 25s nas-static-785b747ddf-z*1/1 Running 0 2m 执行以下命令，查看名为 nas-static-785b747ddf-6*的Pod/data 路径下的文件。...
OSS数据源
注意事项 数仓模式 的注意事项如下：如果OSS数据源路径没有被DLA识别出来，您需要查看路径下的文件类型是否相同。如果是CSV文件，您可以在解析器CSV中配置具体的参数比如分隔符、转义字符、是否有表头等。由于元信息发现通过采样的方式并不...
使用NAS实现共享存储和持久化存储-Flexvolume
kubectl exec nas-static-f96b6b5d7-w*-ls/data 预期输出：nas 说明 在任意一个Pod的/data 下创建的文件，两个Pod下的/data 路径下均存在此文件，说明两个Pod共享一个NAS。NAS的持久化存储 执行以下命令，删除该应用的所有Pod。kubectl ...
使用OSS API恢复被冻结的文件
移动文件 如果您之前配置扫描任务时，设置文件的冻结方式为 移动文件，即将您Bucket中违规的文件移动到Bucket中的备份目录（位置：${bucket}/aligreen_freeze_backup/），并删除原路径下的文件。移动到备份目录冻结方案会在您对应Bucket下...
统一命名空间缓存加速
本文为您介绍如何通过Jindo命令配置统一命名空间缓存加速。背景信息 JindoFSx存储加速系统提供统一命名空间挂载的...hdfs dfs-ls jindo:/emr-header-1:8101/nas 返回信息为 jindo:/emr-header-1:8101/nas，等价于访问/mnt/nas 路径下的文件。
使用云盘动态存储卷
kubectl exec mysql-0-df|grep data 预期输出：/dev/vdb 25626852 24 25610444 1%data 执行以下命令，查看/data 路径下的文件。kubectl exec mysql-0-ls/data 预期输出：lost+found 在云盘里创建文件。执行以下命令，在/data 路径下创建...
部署高可用及共享存储Web服务
方案架构 方案提供的默认设置完成部署后在阿里云上搭建的高可用及共享存储Web服务运行环境如下图所示。实际部署时您可以根据资源规划修改部分设置，但最终形成的运行环境与下图相似。本方案的技术架构包括以下基础设施和云服务：1个专有...
高级配置
两者的区别在于：默认路径的权限可以是640，其他路径下的配置文件权限必须是600。同一个账号配置文件里可以保存多条账号信息，一条记录一行。ossfs会根据挂载的存储空间名称匹配到正确的账号上。配置示例：echo bucket-test-1:AAAIbZcdVCmQ...
生成 H5 离线包
重要 在新增离线包配置中，离线包客户端范围的 iOS 最低版本需低于 iOS 客户端 info.plist 文件中的 Product Version 字段（见下图），iOS 客户端的最低版本建议填写 1.0.0。建议 info.plist 文件中的 Product Version 与 Bundle versions ...
功能和性能选项设置
pattern=.%2b 其中 file:/后面紧接着固件版本号所寄存的文件绝对路径，为标准 Unix 文件路径格式 URI 的 query 部分（?符号后面的部分），query 字段只有一个，query key 为固定的“pattern=”，其值为固件版本号寄存文件内容当中进行正则...
功能和性能选项设置
7.PROTECTED_PATH：目标设备取证扫描的自定义路径，在此路径之下的所有文件将被取证和加入完整性保护，建议配置成目标设备上可执行程序、共享库、配置文件等重要文件存放的目录。支持配置多个路径，中间用:隔开。8.SCAN_DUTY_CYLCLE：取证...
对象存储OSS
例如，如果在OSS源表中定义了元信息列 file.path，则该列的值为该行数据所在的文件路径。元信息列的使用示例如下。CREATE TABLE MyUserTableWithFilepath(column_name1 INT,column_name2 STRING,`file.path` STRING NOT NULL METADATA)WITH...
上传本地文件到ECS实例
是否覆盖 设置是否覆盖同路径下的同名文件。默认不覆盖。超时时间 设置发送文件执行的超时时间。超时后，云助手将强制终止发送文件的任务进程。取值范围：10～86400，单位为秒，默认值为60秒。标签 设置文件发送的 标签键 和 标签值，方便...
上传文件到轻量应用服务器
是否覆盖 设置是否覆盖同路径下的同名文件。默认不覆盖。文件名称（必选）输入文件名称。重要 如果参数 是否覆盖 未开启，文件名称必须唯一。目标路径（必选）文件在轻量应用服务器上的保存路径，必须是已存在的绝对路径。默认目标路径如下...
集成Windows SDK时的常见问题
通过阅读本文，您可以了解集成Windows SDK时常见的问题及解决方法。...屏幕共享打开速度慢，接近5秒钟 问题现象：等待5秒左右才打开屏幕共享 可能原因：缺少依赖的文件 解决方案：复制 kashost.exe 及依赖的 krt.dll 到程序的执行路径下。
备份和恢复
指定目录：备份ECS上指定目录的文件，需要指定 备份文件路径 和 备份文件规则。备份文件路径规则如下：无通配符（*）的情况下，可以输入20行路径。使用通配符（*）时，只能输入1行路径，支持形如/*/*的通配符。每行只支持绝对路径，例如以/...
对象存储服务路径
OSS文件路径 基于OSS的文件路径格式如下：oss:/<access_id>:<secrect_key>@[]/path_to/file[:]说明 如果是具有SubSet的NetCDF，可以通过:方式指定。其中Endpoint可以被省略，系统会自动寻找相应的Endpoint。如果Endpoint被省略，路径必须以...
对象存储服务路径
OSS文件路径 基于OSS的文件路径格式如下：oss:/<access_id>:<secrect_key>@[]/path_to/file[:]说明 如果是具有SubSet的NetCDF，可以通过:方式指定。其中Endpoint可以被省略，系统会自动寻找相应的Endpoint。如果Endpoint被省略，路径必须以...
保存联邦表
file_uri String/Dict 可选 是否要指定保存的文件路径，格式为，ID 为参与方 ID，Path 为文件路径。文件路径应为绝对路径。若为 None，则将使用/home/admin/agent/data/dataset/feddataframe/<UID>.csv 作为默认路径。默认为 None。请求...
修改文件
是 encoding string 编码规则 可选：text base64 否 text new_path string 修改后的文件路径 是 old_path string 要修改的文件路径 是 返回 body:{"ErrorCode":"","ErrorMessage":"","RequestId":"","Success":true,"Result":{"BranchName...
路由到对象存储OSS
创建OSS Sink Connector任务后，平台将在此OSS Bucket一级目录下生成.tmp/系统文件路径，请勿删除和使用该路径下的OSS Object。oss-sink-connector-bucket 保存路径 OSS Object规则分Path和Name两部分，例如ObjectKey为 a/b/c/a.txt 时，...
创建OSS Sink Connector（新版）
创建OSS Sink Connector任务后，平台将在此OSS Bucket一级目录下生成.tmp/系统文件路径，请勿删除和使用该路径下的OSS Object。oss-sink-connector-bucket 保存路径 OSS Object规则分Path和Name两部分，例如ObjectKey为 a/b/c/a.txt 时，...
边缘文件服务接口说明
接口定义 path Content-Type POST/home/paas/file/delete json 入参 字段 类型 是否必传 备注 filePath Text 是 写入的文件路径 出参 字段 类型 备注 code Integer 返回码 message String 返回信息 示例 请求示例 {"filePath":"aaa/bbb/ccc...
- 产品推荐
- 这些文档可能帮助您