文件元数据离线分析
上传文件系统元数据至OSS 使用Jindo命令行工具上传命名空间的元数据至OSS，命令格式如下。jindo jfs-dumpMetadata<nsName><nsName>为Block模式对应的namespace名称。例如，上传并离线分析test-block的元数据。jindo jfs-dumpMetadata test-...
文件元数据离线分析
上传文件系统元数据至OSS 使用Jindo命令行工具上传命名空间的元数据至OSS，命令格式如下。jindo jfs-dumpMetadata<nsName><nsName>为Block模式对应的namespace名称。例如，上传并离线分析test-block的元数据。jindo jfs-dumpMetadata test-...
文件元数据离线分析
上传文件系统元数据至OSS 使用Jindo命令行工具上传命名空间的元数据至OSS，命令格式如下。jindo jfs-dumpMetadata<nsName><nsName>为Block模式对应的namespace名称。例如，上传并离线分析test-block的元数据。jindo jfs-dumpMetadata test-...
任务执行记录投递
在该目录下会显示以ECS实例ID为名称的目录、命令的脚本文件，其中脚本文件名可能为：commandContent.bat：对应Windows实例中执行Bat命令。commandContent.ps1：对应Windows实例中执行PowerShell命令。commandContent.sh：对应Linux实例中...
二级索引
命令格式 create_index-t<tableName>-n<indexName>-i<indexType>-pk,primaryKeyName>-attr,definedColumn>配置项说明请参见下表。配置项 是否必填 示例值 说明-t，-table 否 mytable 数据表名称。n，-name 是 index0 二级索引名称。i，-...
SFTP协议运维
文件下载命令 get<主机文件名><本地文件目录>文件上传命令 put<本地文件名><主机文件目录>可选：登录堡垒机，查看上传或下载文件的审计记录。具体操作，请参见 登录系统 和 搜索和查看会话。相关文档 修改用户信息 开启双因子认证 堡垒机...
手动下载备份集
通过 file<下载任务ID>.tar 命令查看gzip命令执行后的文件格式：如果文件格式为 POSIX tar archive，则执行 tar xvf<下载任务ID>.tar 命令，获得<下载任务ID>文件。如果文件格式为 Zip archive data,at least v2.0 to extract，则执行 ...
ProtoBuf数据解析示例
protoc 为示例数据生成.desc和.data 文件 本示例以设备通过自定义Topic上报ProtoBuf格式数据为例，通过.desc 文件读取对应的二进制数据.data 文件，最终解析输出JSON格式数据，以便数据解析任务后续处理和存储。本示例解析的JSON格式数据...
离线扩容分区和文件系统（Linux数据盘）
ext*文件系统：sudo e2fsck-n/dev/vdb1 xfs文件系统：sudo xfs_repair-n/dev/vdb1 btrfs文件系统：sudo btrfsck/dev/vdb1 不同文件系统的查询示例如下：ext*和xfs文件系统的示例结果如下所示，当文件系统状态为 clean，表示文件系统状态...
使用阿里云CLI管理OSS中的数据
在阿里云命令行（Alibaba Cloud Shell）中，已经集成了以命令行方式管理OSS数据的工具ossutil的功能。您可以通过使用阿里云CLI统一的命令格式，快速管理您在OSS中的数据。背景信息 您可以通过使用本教程来管理您OSS中的如下数据：管理存储...
Linux实例中存在未正确挂载的云盘
云盘分区>/<挂载目录><文件格式>defaults 0 0 本文的挂载信息以/dev/vdb1/mnt ext4 defaults 0 0 为例，具体的配置信息以实际环境为准。说明<云盘分区>表示挂载云盘的分区，本文以/dev/vdb1 为例。挂载目录>表示设备挂载的目录，本文以/...
开始创作
创建知识库 开始写作的第一步，为你的团队、部门或者项目创建一个知识库：创建内容、添加协作者 进入知识库，点击目录右边的「+」，即可创建：在线文档、文件、文件夹。目录通过树形结构组织，点击节点左边的箭头，即可展开、收起节点（最...
常见问题
log-cli-v-0.1.17,log-python-sdk-v-0.6.53,sys.version_info(major=3,minor=6,micro=8,releaselevel='final',serial=0),linux 执行CLI命令后返回数据格式混乱，如何格式化？日志服务CLI命令提供全局参数-format-output 用于对返回结果进行...
配置ossutil
该命令提供了交互式方式生成配置文件。以Linux环境为例进行说明。输入配置命令。ossutil64 config 根据提示设置配置文件路径。您可以根据实际需要设置配置文件的路径。默认情况下，配置文件保存到~/.ossutilconfig 文件里，直接按回车则...
如何在ECS实例上搭建RDS备库
2019年2月20日后创建的RDS MySQL 5.6实例，数据备份文件的格式为xbstream文件包，即以qp.xb为后缀文件。更多过于迁移物理备份文件的信息及操作，请参考 RDS MySQL物理备份文件恢复到自建数据库。执行以下命令，下载RDS的备份文件并重命名为...
UNLOAD
MaxCompute客户端 使用SQL分析连接 使用云命令行（odpscmd）连接 使用DataWorks连接 MaxCompute Studio 功能介绍 MaxCompute支持使用 unload 命令将MaxCompute的数据导出至 OSS、Hologres 外部存储，OSS支持以CSV格式或其他开源格式存储...
UNLOAD
MaxCompute客户端 使用SQL分析连接 使用云命令行（odpscmd）连接 使用DataWorks连接 MaxCompute Studio 功能介绍 MaxCompute支持使用 unload 命令将MaxCompute的数据导出至 OSS、Hologres 外部存储，OSS支持以CSV格式或其他开源格式存储...
管理数据树
GeoJSON格式文件支持以.json 或.geojson 后缀的文件进行上传。确认无误后，单击 下一步。在 文件存储目录 页签，自定义 数据表名称 并选择需要上传的文件夹，单击 保存至此处。说明 数据表名称不支持重复。数据表创建规范：长度不超过63个...
pg_dump
pg_dump-Fc mydb>db.dump 执行以下命令，将数据库备份到目录格式的存档文件中：pg_dump-Fd mydb-f dumpdir 执行以下命令，将数据库与5个辅助作业并行备份到目录格式的存档文件中：pg_dump-Fd mydb-j 5-f dumpdir 执行以下命令，将存档文件...
在Linux云电脑挂载NAS文件系统
如果同一个办公网络下的Linux云电脑之间需要共享文件，您需要手动挂载NAS文件系统，挂载成功后，您可以在云电脑中把NAS文件系统当作一个普通的目录来访问和使用。本文以SMB协议的NAS文件系统为例介绍相关操作。背景信息 无影云电脑支持在云...
HDFS常见命令介绍
您可以在已经创建好的E-MapReduce（简称EMR）集群中，直接使用hadoop fs命令来对HDFS中的文件进行操作。本文为您介绍HDFS的常见命令。背景信息 HDFS常见命令如下表所示。命令 功能 mkdir 在HDFS文件系统中创建目录。touchz 在HDFS文件系统...
基于NVMe共享盘部署集群文件系统
基于EBS的NVMe（Non-Volatile Memory Express）共享盘的多重挂载能力部署集群文件系统，可以实现多实例对同一个文件系统、同一块盘的并发读写访问。本文将为您演示如何基于NVMe共享盘部署集群文件系统。背景信息 在当今的企业级数据中心和...
文件管理
Workbench支持可视化管理云服务器ECS上的文件，包括上传文件、下载文件、增删改查等。本文为您介绍如何通过Workbench管理ECS上的文件。前提条件 已远程连接ECS实例。具体操作，请参见 使用Workbench连接Linux实例 或者 使用Workbench连接...
mkdir（创建目录）
当您希望按实际业务场景对上传至存储空间（Bucket）下的文件（Object）进行合理归类时，您需要先创建目录，然后将目标文件存放至指定目录。本文介绍如何使用 mkdir 命令创建目录。注意事项 要创建目录，您必须具有 oss:GetObject 和 oss:...
在裸设备上创建文件系统
裸设备是指没有做过分区且没有经过任何文件系统格式化的云盘设备。如果您的数据盘为裸设备，即只呈现为一个独立的分区（例如/dev/vdb）且不需要划分逻辑分区（例如/dev/vdb1、/dev/vdb2等），云盘初始化时直接在裸设备上创建文件系统即可。...
常见问题
例如，通过cp命令上传文件时指定配置文件路径：./ossutil64 cp examplefile.txt oss:/examplebucket/destfolder/-c/home/admin/.ossutilconfig 通过ossutil上传的文件的content-type为什么会有charset=utf-8 问题分析：上传文件时，ossutil...
文件中转站
当您需要将本地电脑中保存的大模型或其它较大文件上传到DSW实例时，文件中转站可加速文件上传流程，且不会产生额外费用。在此基础上，您的大文件仅需上传一次，就可以在同RAM账号下的多个DSW实例中保存和使用。使用限制 支持多选文件同时...
通过控制台提交作业
作业指提交到E-HPC集群进行高性能计算的基本工作单元，包括Shell脚本、可执行文件等，具体作业执行顺序根据您设置的队列以及调度器决定。E-HPC管理控制台提供了作业相关的提交作业、停止作业、查看作业状态等功能，本文介绍如何使用E-HPC...
数据操作
创建数据表后，您可以通过命令行工具在数据表中插入新数据、更新一行数据、读取数据、删除一行数据、扫描数据以及导入导出数据。插入新数据 在表中插入新数据。您也可以通过导入JSON格式的配置文件来插入新数据到表中。命令格式 put-pk '...
字符串函数
本文为您介绍MaxCompute支持的字符串函数的命令格式、参数说明及示例。MaxCompute SQL支持的字符串函数如下。函数 功能 ASCII 返回字符串的第一个字符的ASCII码。CHAR_MATCHCOUNT 计算A字符串出现在B字符串中的字符个数。CHR 将指定ASCII码...
sync（同步本地文件到OSS）
sync 命令用于将本地文件同步到OSS。注意事项 要将本地文件同步到OSS，您必须具有oss:PutObject、oss:ListObjects和oss:DeleteObject权限。具体操作，请参见 为RAM用户授权自定义的权限策略。Binary名称 本文各命令行示例均基于Linux 64位...
Workbench终端助手
例如：传输文件中忘记创建文件命令，扩容云盘时忘记扩容命令，此时，可以通过终端助手快速查询。计费说明 当前终端助手为免费试用。使用限制 终端助手有5分钟5次的限制，当使用中出现以下错误，请过5分钟再使用。操作步骤 使用Workbench...
使用mount命令挂载ext4文件系统
在Linux系统中创建ext4文件系统后，您可以根据需求使用不同的 mount 命令挂载文件系统，以满足您对文件系统的数据安全性和性能要求。对数据安全性和性能都有一定要求 如果您对文件系统的数据安全性和性能都有一定要求，建议使用该命令（不...
如何优化数据导入导出
sed 's/\t/,/g'>/home/data_1000w.csv#csv文件以逗号分隔，数据格式：188092293,27267211,59775766593-64673028018-.-09474402685,01705051424-.-54211554755 原始数据格式适合load data语句导入数据，使用方法可参考：LOAD DATA 语句，...
使用Robocopy工具迁移数据
本文介绍如何使用robocopy工具实现阿里云文件存储NAS SMB协议文件系统之间的数据迁移。前提条件 拥有一个存有数据的SMB协议文件系统，并且拥有一个专有网络类型挂载点。背景信息 Robocopy是Windows系统自带的目录复制命令，该功能可以创建...
导出结构和数据
导出文件格式 ODC 导出工具会将导出数据到以.zip 结尾的压缩文件包中，压缩包中包含元数据文件 MANIFEST.bin 和 Schema 下导入导出对象的结构定义文件和数据文件。创建导出任务时，如果您指定 数据格式 为 SQL 格式，那文件包中的结构定义...
安装PFX格式证书
本文介绍如何在Tomcat服务器配置PFX格式的SSL证书，具体包括下载和上传证书文件，在Tomcat上配置证书文件和证书密码等参数，以及安装证书后结果的验证。成功配置SSL证书后，您将能够通过HTTPS加密通道安全访问Tomcat服务器，确保数据传输的...
初始化概述
一块全新的数据盘挂载到ECS实例后，还不能直接存储数据，您需要为数据盘创建分区、挂载文件系统等初始化操作后才可以正常使用。本文介绍云盘初始化的操作场景、操作指导、分区格式及设备名介绍。操作场景 初始化操作仅适用于全新（没有数据...
通过spark-submit命令行工具开发Spark应用
本文以ECS连接 AnalyticDB MySQL 为例，介绍如何通过 AnalyticDB MySQL Spark-Submit命令行工具进行Spark作业开发。背景信息 当您使用客户端连接 湖仓版（3.0）集群时，在进行Spark开发时，需要通过 AnalyticDB MySQL Spark-Submit命令行...
lrb（列举地域级别下的Bucket）
命令格式./ossutil64 lrb conf_file[-e]参数及选项说明如下：配置项 说明 conf_file 如果您希望获取多个Region下的Bucket信息时，请输入一个本地配置文件，并在文件中换行填写多个Region对应的Endpoint。e 如果您仅希望获取单个Region下的...
- 产品推荐
- 这些文档可能帮助您