管理数据流动任务
本文介绍如何在文件存储控制台创建、管理CPFS智算版文件系统的数据流动任务及查看任务报告。前提条件 已创建数据流动。具体操作，请参见 创建数据流动。任务说明 数据流动任务可分为导入（Import）和导出（Export）两种类型。类型 说明 ...
Jindo DistCp场景化使用指导
如果要Copy的所有文件中小文件的占比较高，大文件较少，但是单个文件数据较大，在正常流程中是按照随机方式来进行Copy文件分配，此时如果不做优化很可能造成一个Copy进程分配到大文件的同时也分配到很多小文件，不能发挥最好的性能。...
Jindo DistCp场景化使用指导
如果要Copy的所有文件中小文件的占比较高，大文件较少，但是单个文件数据较大，在正常流程中是按照随机方式来进行Copy文件分配，此时如果不做优化很可能造成一个Copy进程分配到大文件的同时也分配到很多小文件，不能发挥最好的性能。...
如何优化数据导入导出
19.836s 504133 100.8 batch tool工具文件数=1 csv格式 10.806s 925411 185.1 总结：source语句和mysql命令导入方式，都是单线程执行SQL语句导入，实际是Batch Insert语句的运用，Batch size大小会影响导入性能。Batch size和mysqldump导出...
常见问题
本文介绍使用数据迁移工具ossimport的常见问题及解决方法。通用说明 本文提到的所有涉及ossimport的命令均为简写，实际操作时，需补全命令。Windows系统需加上 console.bat 进行补全，例如 submit 实际为 console.bat submit。Linux系统...
数据迁移概述
从HDFS迁移数据到OSS-HDFS 在OSS-HDFS服务不同Bucket之间迁移数据 JindoDistJob工具 JindoDistJob工具支持半托管JindoFS全量和增量迁移文件元数据，支持您在不迁移数据块的同时平稳切换到JindoFS服务化的方案上。将半托管JindoFS集群迁移到...
ECS实例数据传输的实现方式
文件传输原理 文件传输是信息传输的一种形式，它是在数据源和数据宿之间传送文件数据的过程，也称为文件数据通信。操作系统把文件数据提取到内存中做暂存，再复制到目的地，加密是在文件外加了一个壳，文件本身仍然是一个整体，复制只是把...
使用WinSCP连接服务器
如果您的本地主机为Windows操作系统，可以使用WinSCP工具远程连接Linux服务器进行文件管理。前提条件 已下载并安装了WinSCP文件传输工具。具体的下载与安装方式，请参见 WinSCP官网。背景信息 本文将介绍WinSCP连接Linux服务器的两种方式，...
配置KMS硬件密钥管理实例的密码机集群
工具运行操作系统 说明 Windows系统 方式一：在windows文件夹，双击鼠标左键运行hsm_certificate_generate.exe文件，在certs文件夹获取证书文件。说明 该方式生成的PKCS12格式证书文件（后缀为.p12）和CA私钥文件（后缀为.key）的口令为...
迁移HDFS数据到OSS
开启后，DistCp将对源路径和目标路径的文件名称、文件大小以及文件的Checksum进行比较。如果源路径或目标路径下的文件名称、文件大小或者文件的Checksum不一致时，将自动触发增量迁移或拷贝任务。如果您不需要对源路径和目标路径的文件的...
内置发布
工具名称 用途 sed 查找和替换文本文件内容的工具。jq JSON文件解析工具。base64 Base64加密工具。（可选）若网关上没有 sed、jq、base64 工具，您需要执行如下步骤，确保内置驱动Shell脚本工具正常运行。进入Link IoT Edge默认配置目录。...
通用型NAS备份
为避免存储在NAS文件系统中的数据丢失或受损影响业务，建议您通过云备份服务定期备份通用型NAS中的所有目录及文件。云备份服务支持配置灵活备份策略，将数据备份至云端，您可以随时查看和恢复数据。本文介绍如何通过云备份服务备份通用型...
NFS文件系统传输加密
本文介绍如何使用NAS客户端工具挂载文件系统实现数据传输加密。工作原理 NAS客户端工具定义了一个网络文件系统类型alinas，与标准 mount 命令兼容。在ECS实例挂载alinas类型文件系统时，如果指定 tls 参数，NAS客户端工具会启动一个Stunnel...
查看NAS性能监控
文件存储 NAS 已与云监控无缝集成。通过性能监控功能，您可以实时查看文件系统的IOPS、吞吐、延迟等性能概况。本文介绍如何查看 NAS 文件系统的性能监控数据。前提条件 已创建 NAS 文件系统。具体操作，请参见 创建文件系统。已开通云监控...
使用Fuse-DFS挂载文件存储 HDFS 版
本文主要介绍如何使用Fuse-DFS工具实现 文件存储 HDFS 版 在本地文件系统的映射。前提条件 已 创建文件系统 和 添加挂载点。已为Hadoop集群所有节点安装JDK，且JDK版本不低于1.8。建议您使用的Hadoop版本不低于2.7.2，本文使用的Hadoop版本...
扩容分区和文件系统（Linux）
在ECS控制台上扩容云盘容量后，对应分区和文件系统并未扩容，您还需要进入ECS实例内部继续扩容云盘的分区和文件系统，将扩容部分的容量划分至已有分区及文件系统内，使云盘扩容生效。本文为您介绍如何通过两个步骤完成Linux实例云盘的分区...
Windows客户端以AD域用户身份挂载并使用SMB文件系统
mklink命令行工具 您可以使用mklink命令行工具，在Windows本地磁盘为SMB文件系统挂载点生成符号链接，同时查看和编辑文件或目录的ACL。使用命令提示符工具创建文件系统映射。mklink/D c:\myshare \ as-mount-target.nas.aliyuncs....
如何选用NAS、OSS和EBS？
对比项 文件存储NAS 对象存储OSS 块存储EBS 特点 原有使用单机本地文件系统的应用无需修改，即可直接访问。提供高吞吐和高IOPS的同时，支持文件的随机读写和在线修改 支持公网访问，一个低成本的海量共享存储空间，适合存储写入后较少修改...
旧版计费项
迁移完成后校验数据需要一次请求：HeadObject 针对源地址和目的地址都存在的同名文件，但文件不需要迁移至目的地址时 对源端的操作 迁移前对比数据需要一次请求：HeadObject 对目的端的操作 迁移前对比数据需要一次请求：HeadObject 迁移...
新版计费项
迁移完成后校验数据需要一次请求：HeadObject 针对源地址和目的地址都存在的同名文件，但文件不需要迁移至目的地址时 对源端的操作 迁移前对比数据需要一次请求：HeadObject 对目的端的操作 迁移前对比数据需要一次请求：HeadObject 迁移...
脚本文件上传后无法执行
将脚本文件上传到Linux云虚拟主机后，可能会因为上传文件时使用的文本格式不正确（例如文件保存为DOC格式），Linux文本编辑器无法正确识别该文件中的换行结束符，导致网站中脚本文件的部分功能无法执行。本文介绍这种情况的可能原因和解决...
Mac OS系统如何通过FTP工具上传文件
Mac OS系统自带FTP终端工具 您可以通过Mac OS系统自带FTP终端工具上传文件。请注意选择正确的上传路径。第三方FTP工具 下载并安装YummyFTP软件。说明 关于如何下载并安装该软件，请参见其官网文档。填写FTP服务器的IP地址、用户名和密码。...
NAS性能测试
本文介绍如何在Linux/Windows系统中使用FIO工具对文件系统进行吞吐和IOPS的性能测试。前提条件 您已经创建了待测试的文件系统，并将文件系统挂载到ECS实例上。具体操作，请参见 快速入门。背景信息 本文示例的性能参数，均为Linux/Windows...
TensorFlow常见问题
说明 使用工具上传文件时，需要配置AccessKey ID和AccessKey Secret，您可以登录阿里云管理控制台创建或查看该信息。如何读取OSS数据？Python不支持读取OSS数据，因此所有调用Python Open()及 os.path.exist()等文件和文件夹操作函数的代码...
文件类型判断和处理
使用阿里云视觉智能开放平台服务时，大部分算法都对文件类型有要求，视觉智能开放平台根据传入的文件URL或者对文件Base64进行解码之后还原文件，会先进行文件类型判断，文件类型校验通过之后，再进行后续智能处理。说明 阿里云视觉智能开放...
文件存储 HDFS 版和数据库MySQL双向数据迁移
本文介绍如何使用Sqoop工具实现 文件存储 HDFS 版 和关系型数据库MySQL之间的双向数据迁移。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已搭建Hadoop集群。建议您使用的...
Linux操作系统云虚拟主机无法通过FTP工具删除目录
您可以通过FTP工具显示文件列表中的隐藏文件，具体操作，请参见 如何显示FTP页面下文件列表中的隐藏文件 或 FTP软件如何管理UNIX虚拟主机隐藏文件。说明 上图示以.code隐藏文件为例，具体页面请以实际显示为准。右键单击待删除的隐藏文件，...
PC端、Web端版本更新说明（2023年1月）
文件传输设置本地限速：桌面端新增文件传输设置限速功能。更新内容详情 权限模板 支持单选/多选权限组合进行禁用，权限禁用后，用户在创建共享和授权管理操作时将不展示所选权限，支持将已禁用的权限组合重新启用。查看分享页面 对外分享...
SFTP协议运维
运维人员可以通过堡垒机查看，使用SFTP协议的客户端工具或者命令行方式上传或下载文件时的审计记录。本文介绍如何使用SFTP协议的客户端工具和命令连接堡垒机进行文件传输审计。通过客户端工具传输文件 运维人员可以通过客户端工具（例如...
使用ossftp工具上传文件到OSS失败的解决方法
问题原因 出现文件无法上传的原因如下：并发量比较高：并发量比较高的情况下，会出现ossftp上传失败的现象。存在跨境访问的问题：在跨境请求的场景下，由于跨境链路的限制，出现访问慢或无法访问等普遍现象。Bucket和Endpoint不匹配：OSS会...
工作流常见问题
您可以通过媒体处理控制台或OSS官方提供的图形化管理工具进行文件上传工作，支持分片上传、断点续传、批量上传。详细信息参见 控制台上传、OSS图形化管理工具上传。音视频文件上传后转码操作是自动执行的么？文件后缀名在指定范围内的文件...
媒体上传概述
工具上传 为满足部分用户快速上传或在较低门槛的运营场景下上传大文件等需求，视频点播提供界面化的上传工具，包括 视频点播控制台 和 PC端上传工具。两种工具的说明如下：上传方式 适用场景 使用说明 控制台 快速、便捷地将媒体资源上传到...
手机版 OSS 文件管理器
您也可以直接在 App 应用市场搜索“阿里云”下载安装哟~OSS 文件管理功能在阿里云 App 中有两个入口：控制台-常用工具-文件管理 控制台-对象存储 OSS-Bucket-文件管理 核心功能 Bucket 创建和 Object 管理 文件预览 文件批量上传 文件批量...
安装并登录ossbrowser
当您需要快速使用图形化工具上传文件、下载文件、删除文件、设置权限策略时，可以下载并安装ossbrowser工具，使用多种方式登录工具，进行相关操作。版本 本文以最新版本1.18.0版本为例进行说明。关于ossbrowser的所有版本，请参见 all-...
OSS有哪些批量操作？
ossbrowser工具 使用ossbrowser工具勾选多个文件夹或文件，将一个或多个文件复制到另一个文件目录或同账号下另一个存储空间内。详情请参见 复制文件。批量删除 您可以使用以下方法，批量删除文件：警告 文件删除后不可恢复，请谨慎操作。...
概述
本文简要说明非阿里云数据迁移至阿里云文件存储NAS的费用说明、操作流程及迁移工具选择。费用说明 非阿里云数据迁移至阿里云NAS时，会涉及如下费用：文件存储NAS存储费用，推荐购买资源包抵扣。关于NAS的计费详情，请参见 计费概述。如果您...
Windows应用程序
将SMB文件系统挂载点接入AD域 Windows客户端以AD域用户身份挂载并使用SMB文件系统 数据访问 SMB文件系统数据的上传下载 通过NAT网关实现本地客户端访问NAS SMB文件系统 SQLServer SQLServer使用NAS SMB文件卷 Windows工具 使用Windows ...
SDK和工具下载
云游戏平台为开发者提供了多端SDK包、多端演示Demo应用和一系列的辅助工具，帮助开发者高效率完成对接工作。游戏上传工具下载 游戏上传工具是开发者向云游戏平台上传游戏安装包的操作工具，使用阿里云账号的AccessKey ID和AccessKey Secret...
如何使用HAR文件快速开始压测
HAR（HTTP Archive format）是用来记录HTTP请求和响应信息的标准格式文件，Google Chrome、Charles、Fiddler等工具均支持导出HAR格式文件。您可以使用HTTP Archive Format（.har）导入场景功能将录制的HTTP流量导入PTS压测场景。本文为您...
使用ossimport工具上传大文件时报“The part number ...
问题描述 使用数据迁移工具ossimport上传文件到阿里云对象存储OSS中，在上传大文件时报以下错误：java.lang.IllegalArgumentException:The part number should be in the range of[1-10000].问题原因 在上传大文件时ossimport工具自动使用...
- 产品推荐
- 这些文档可能帮助您