功能概览
本文介绍 云备份 ECS文件备份的功能概览，包括优势、工作原理、操作流程和费用等。简介 ECS文件备份功能是阿里云 云备份 提供的针对您ECS上的文件系统的数据保护方案，通过简单、安全及可靠的方式将ECS文件数据备份到备份库，确保客户生产...
导入概述
在导入流程中主要负责导入执行计划的生成和导入任务的调度工作。BE Backend，StarRocks系统的计算和存储节点。在导入流程中主要负责数据的ETL和存储。Tablet StarRocks表的逻辑分片，一个表按照分区、分桶规则可以划分为多个分片，详情请...
高级管理FAQ
以下操作会更新访问时间：读取文件 写入文件 以下操作不会更新访问时间：重命名一个文件 修改文件的用户（user）、用户组（group）、模式（mode）等文件属性 如果一个目录配置了多项生命周期管理策略，文件系统会执行哪一项策略？...
Flink Python作业快速入门
如果Python作业文件为.zip文件，则需要在此处输入您的Entry Module，例如word_count。无需填写 Entry Point Main Arguments 填写输入数据文件的OSS路径。说明 本示例中输入数据文件、输出文件和测试Python存放路径一致。统一放在OSS控制台...
E-MapReduce的审计事件
CreateFlowCategory 创建子文件夹。CreateFlowForWeb 创建工作流。CreateFlowJob 创建作业。CreateFlowProject 创建数据开发项目。CreateFlowProjectClusterSetting 创建项目集群设置。CreateFlowProjectUser 创建项目用户。CreateJob 创建...
部署作业
资源上传 作业部署前，您可以根据需要将JAR包、Python作业文件或Python依赖上传到Flink开发控制台。登录 实时计算控制台。在 Flink全托管 页签，单击目标工作空间 操作 列下的 控制台。在左侧导航栏，单击 资源管理。单击 上传资源，选择您...
搭建Linux开发环境
任选其中一种即可：方式一：通过Spark参数上传文件 MaxCompute Spark支持Spark社区版原生的-jars、-py-files、-files、-archives 参数，您可以在提交作业时，通过这些参数上传文件，这些文件在作业运行时会被上传到用户的工作目录下。...
功能概览
本文介绍 云备份 大规模文件系统（除NAS以外）备份的功能概览，包括优势、工作原理、操作流程和费用等。NAS备份请使用 云备份 的阿里云NAS备份或者本地NAS备份功能。简介 大规模文件系统备份功能是阿里云份服务提供的针对客户本地大规模...
服务器端加密
本文介绍服务器端加密的工作原理、支持的地域及相关操作。使用限制 仅支持在创建文件系统时开启数据加密功能。已开启数据加密功能的文件系统不能关闭此功能。加密方式 当您对文件存储有高安全性或者合规性要求时，建议您开启服务器端加密...
创建工作流
背景信息 工作流（Workflow）是预先编排好的一系列任务流程，可以实现在指定OSS Bucket上传一个文件后，自动（或手动）触发按照预先编排好的环节和条件依次执行作业。您可以在工作流中设置 转码、分析、截图、打包、审核、视频DNA、智能...
项目管理
创建Databricks 数据洞察集群后，您可以在数据开发中创建项目，并在项目中进行作业的编辑和工作流的调度。新建项目之后，您可以对项目进行管理，为项目关联集群资源、添加项目成员以及设置全局变量。前提条件 已创建集群，详情请参见 集群...
Databricks数据洞察的审计事件
CreateFlowCategory 创建工作流子文件夹。CreateFlowEditLock 创建工作流编辑锁。CreateFlowJob 创建工作流作业。CreateFlowProject 创建数据开发项目。CreateFlowProjectClusterSetting 创建项目集群设置。CreateFlowProjectUser 添加项目...
管理媒体
经过控制台上传或工作流处理的视频文件会在媒体列表中生成媒体文件，您可以对媒体文件进行搜索、查看、发布及删除。功能概览 功能 说明 条件查询 支持按时间、上传文件名和视频ID（即媒体ID）查找媒体文件。查看媒体信息 源视频文件及工作...
Cromwell 工作流引擎支持
如下所示：{"workflow_name.task_name.input1":"xxxxxx"} 运行成功后，WDL 文件中描述的工作流中的一个 task 会作为批量计算的一个作业（Job）来提交。此时登录批量计算的控制台就可以看到当前的 Job 状态。当 workflow 中所有的 task 对应...
LAMMPS Ehpc服务实例部署文档
默认作业结果文件输出/home/<用户名>/目录下，本示例中的作业结果文件为/home/testuser/lammps.pbs.o0。预期返回如下：.Per MPI rank memory allocation(min/avg/max)=3.777|3.801|3.818 Mbytes Step Temp E_pair E_mol TotEng Press 0 1....
常见问题
集群配置问题包括：内存参数是否合理、跨集群联通性是否正确、安全集群访问是否通过、principal是否正确等等，作业问题包括作业描述文件格式是否正确、输入数据是否能够正常被解析，以及一些其他的作业相关的配置（例如ioConfig）。...
入门概述
创建作业 作业指提交到E-HPC集群进行高性能计算的基本工作单元，包括Shell脚本、可执行文件等，具体作业执行顺序根据您设置的队列以及调度器决定。您可以在集群中使用GROMACS软件运行水分子算例。查看作业结果 您可以在E-HPC管理控制台查看...
开通实时计算Flink版
使用实时计算Flink版需要开通工作空间，每个工作空间的计算资源隔离，开发控制台相互独立。本文为您介绍开通Flink工作空间的操作步骤，以及开通过程中的注意事项。前提条件 已拥有阿里云账号。如果您还没有阿里云账号，请先完成注册，详情...
触发工作流
媒体处理中工作流的触发方式根据文件路径以及自动触发的设置情况，一共可分为3种触发方式。本文介绍不同工作流触发方式的适用场景和要求。触发方式对比 触发方式 适用场景 自动触发 文件上传到指定路径后立即按固定流程处理 手动 触发...
使用Logview 2.0查看作业运行信息
作业详情 您可以通过作业详情区域全方位了解作业，作业详情区域包含如下功能区：Job Details 作业执行图 Job Detail 页签的上半部分为作业执行图。执行图以可视化方式展示三个维度的子任务依赖关系：Fuxi Job层、Fuxi Task层和Operation层...
Gromacs Ehpc计算巢快速部署文档
权限策略名称 备注 AliyunECSFullAccess 管理云服务器服务（ECS）的权限 AliyunEHPCFullAccess 管理弹性高性能计算（EHPC）的权限 AliyunNASFullAccess 管理文件存储（NAS）的权限 AliyunVPCFullAccess 管理专有网络（VPC）的权限 ...
通过控制台上传文件
例如：运行Python或JAR作业时，需要通过Python或JAR文件定义作业逻辑；运行Spark SQL作业时，需要通过JAR文件定义UDF函数。Lindorm支持通过HDFS Shell或控制台上传自定义文件资源。操作步骤 登录 Lindorm管理控制台。在页面左上角，选择...
作业停止
如果您对作业进行了修改（例如更改SQL代码、增删改WITH...输出窗口数（Drain）：该选项用于永久性终止作业，具体原理请参见 Drain。重要 如果您希望稍后再重新启动作业，请不要选中该选项。因为恢复作业时，可能会出现错误的结果。单击 确定。
功能概览
本文介绍阿里云NAS备份的功能概览，包括优势、工作原理、操作流程和费用等。简介 阿里云NAS备份是阿里云 云备份 提供的针对阿里云通用型NAS的高效率低成本数据保护解决方案。云备份支持备份容量型和性能型NAS，支持NFS和CIFS/SMB协议，提供...
新功能发布记录
2019-05-06 全部 极速型NAS计费 极速型NAS 文件存储NAS推出极速型规格，针对海量小文件的工作负载进行时延优化，提升IOPS性能，同时增强数据保护能力。2019-04-05 全部 极速型NAS 表 5.2018年 功能名称 功能概述 发布时间 发布地域 相关...
客户端功能概述
E-HPC客户端主要面向作业操作员，支持作业提交、作业文件管理等功能。具体功能如下：功能模块 说明 作业查询 支持按多种条件查询作业数据，以便调整作业任务。作业提交 支持通过界面、脚本或者作业模板来提交作业。应用中心 支持配置...
媒体信息
媒体信息作业是指对输入文件进行深度分析和元数据提取，并返回输入文件的媒体信息。本文提供了Java SDK媒体信息作业相关功能的API调用示例，包含提交媒体信息作业、查询媒体信息作业。前提条件 使用前请先初始化客户端，详细说明请参见 ...
添加服务调用任务
功能页签 说明 任务信息 您可以查看任务信息，修改任务描述和作业配置，下载设备任务文件。作业概览 您可以查看任务下各状态的作业统计。您可以单击目标设备的 查看，在 设备详情 页面：单击 任务 页签，查看该设备下的所有任务列表。单击 ...
添加消息批量下发任务
功能页签 说明 任务信息 您可以查看任务信息，修改任务描述和作业配置，下载设备任务文件。作业概览 您可以查看任务下各状态的作业统计。您可以单击目标设备的 查看，在 设备详情 页面：单击 任务 页签，查看该设备下的所有任务列表。单击 ...
添加属性设置任务
功能页签 说明 任务信息 您可以查看任务信息，修改任务描述和作业配置，下载设备任务文件。作业概览 您可以查看任务下各状态的作业统计。您可以单击目标设备的 查看，在 设备详情 页面：单击 任务 页签，查看该设备下的所有任务列表。单击 ...
添加自定义任务
功能页签 说明 任务信息 您可以查看任务信息，修改任务描述和作业配置，下载设备任务文件。作业概览 您可以查看任务下各状态的作业统计。您可以单击目标设备的 查看，在 设备详情 页面：单击 任务 页签，查看该设备下的所有任务列表。单击 ...
视频DNA数据类型
FpFileDeleteJob 描述 指纹文件删除作业类型。参数 类型 描述 Id String 作业ID。PipelineId String 管道ID。Status String 作业状态。Code String 错误码。Message String 错误信息。UserData String 用户自定义数据。FpDBId String 指纹...
迁移开源HDFS的数据到文件存储 HDFS 版
准备工作 开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。基于阿里云ECS搭建Hadoop集群（下称"迁移集群"），用于访问 文件存储 HDFS 版 实例和迁移数据，并满足以下条件：迁移集群与 ...
使用前须知
本文介绍该应用的功能、工作原理、资产、费用等信息。重要 本文档为阿里云原创文档，知识产权归阿里云所有，由于本文档旨在介绍阿里云与第三方产品交互的服务能力，因此可能会提及第三方公司或产品等名称。功能说明 提供便捷的配置，帮助您...
使用rsync工具迁移数据
准备工作 NAS文件系统之间进行数据迁移时，需要云服务器可以同时访问源NAS和目的NAS。因此，您需要确保通过同一个阿里云专有网络VPC可以同时访问两个NAS。查看源文件系统挂载点信息。迁移之前请记录源文件系统的挂载点和所属的专有网络VPC...
媒体信息
请按照规范填写文件名称，否则会找不到文件导致作业失败。详细名称规范，请参见 参数详情。建议您在提交媒体信息作业时记录任务的JobID，便于后续进行相关操作。提交媒体信息作业*@param client*@return*/func SubmitMediaInfoJob(client*...
认识MaxCompute Studio
作业管理 作业状态说明 全部活动作业 等待：作业提交后等待进入队列。排队中：作业进入队列，等待分配资源。运行中：作业正在执行中。全部历史作业 成功：作业运行成功。失败：作业运行失败。取消：作业被人手工取消执行。编译作业 单击SQL...
提交作业和查看作业信息
方式二：通过文件提交作业 您可以把需要执行的DDL或DML语句，写在一个文件中（例如，test.sql），然后使用以下命令启动流式作业。yarn-client方式（默认）streaming-sql-f test.sql yarn-cluster方式 streaming-sql-master yarn-deploy-...
清理过期数据
Paimon表的消费依赖 快照文件，快照过期时间太短或消费作业效率低会导致正在消费的快照文件因过期被删除，消费作业出现 File xxx not found,Possible causes 报错，解决方法请参见 读Paimon作业出现File xxx not found,Possible causes。
生命周期管理概述
阿里云文件存储NAS推出的生命周期管理功能，可以帮助您将低频访问的冷文件数据从标准存储转换到低频存储或归档存储中，并采用低频存储或归档存储计费方式，从而减少文件系统的存储费用。本文主要介绍生命周期的策略、使用限制、应用场景、...
- 产品推荐
- 这些文档可能帮助您