实例自定义数据

当系统离开这些运行级别时,作业会停止执行。运行频率 重启实例:实例每次启动都会自动运行。更换操作系统:自动运行。重新初始化系统盘:自动运行。说明 如果更换操作系统使用的是自定义镜像且来源于原实例,或实例的系统盘来源于原实例,...

基本概念

同时计算作业在失败后,可由平台智能重启调度,从而生成新的计算作业。模板/Template 用于批量创建运行任务的模板,包含使用的应用和实体表格信息,可以用于分析表格中的数据记录。投递/Submission 批量运行任务的投递操作记录,用于查询、...

Cache模式使用说明

缓存模式(Cache)主要兼容原生OSS存储方式,文件以对象的形式存储在OSS上,每个文件根据实际访问情况会在本地进行缓存,提升EMR集群内访问OSS的效率,同时兼容了原有OSS原有文件形式,数据访问上能够与其他OSS客户端完全兼容。本文主要...

Cache模式使用说明

缓存模式(Cache)主要兼容原生OSS存储方式,文件以对象的形式存储在OSS上,每个文件根据实际访问情况会在本地进行缓存,提升EMR集群内访问OSS的效率,同时兼容了原有OSS原有文件形式,数据访问上能够与其他OSS客户端完全兼容。本文主要...

Cache模式使用说明

缓存模式(Cache)主要兼容原生OSS存储方式,文件以对象的形式存储在OSS上,每个文件根据实际访问情况会在本地进行缓存,提升EMR集群内访问OSS的效率,同时兼容了原有OSS原有文件形式,数据访问上能够与其他OSS客户端完全兼容。本文主要...

Cache模式使用说明

缓存模式(Cache)主要兼容原生OSS存储方式,文件以对象的形式存储在OSS上,每个文件根据实际访问情况会在本地进行缓存,提升EMR集群内访问OSS的效率,同时兼容了原有OSS原有文件形式,数据访问上能够与其他OSS客户端完全兼容。本文主要...

Cache模式使用说明

缓存模式(Cache)主要兼容原生OSS存储方式,文件以对象的形式存储在OSS上,每个文件根据实际访问情况会在本地进行缓存,提升EMR集群内访问OSS的效率,同时兼容了原有OSS原有文件形式,数据访问上能够与其他OSS客户端完全兼容。本文主要...

Cache模式使用说明

缓存模式(Cache)主要兼容原生OSS存储方式,文件以对象的形式存储在OSS上,每个文件根据实际访问情况会在本地进行缓存,提升EMR集群内访问OSS的效率,同时兼容了原有OSS原有文件形式,数据访问上能够与其他OSS客户端完全兼容。本文主要...

Cache模式使用说明

缓存模式(Cache)主要兼容原生OSS存储方式,文件以对象的形式存储在OSS上,每个文件根据实际访问情况会在本地进行缓存,提升EMR集群内访问OSS的效率,同时兼容了原有OSS原有文件形式,数据访问上能够与其他OSS客户端完全兼容。本文主要...

JindoFS缓存模式使用说明

缓存模式(Cache)主要兼容原生OSS存储方式,文件以对象的形式存储在OSS上,每个文件根据实际访问情况会在本地进行缓存,提升EMR集群内访问OSS的效率,同时兼容了原有OSS原有文件形式,数据访问上能够与其他OSS客户端完全兼容。本文主要...

DSW连接EMR集群

本文为您介绍如何在DSW环境中连接至EMR集群,提交并执行Spark作业,以及通过PySpark实现交互式应用开发。您可以在同一DSW实例中,充分利用EMR的强大计算性能高效处理数据,并无缝衔接至模型开发、训练和部署阶段,感受一体化的大数据与AI...

智能外呼机器人的审计事件

resumeJobs 重启暂停的作业。RollbackScript 回滚发布的话术。saveAfterAnswerDelayPlayback 保存接听后延迟播报时间。saveBaseStrategyPeriod 编辑基础策略有效时间窗口。saveContactBlocklist 保存禁止外呼名单。saveContactWhitelist ...

JindoFS缓存模式使用说明

缓存模式(Cache)主要兼容原生OSS存储方式,文件以对象的形式存储在OSS上,每个文件根据实际访问情况会在本地进行缓存,提升EMR集群内访问OSS的效率,同时兼容了原有OSS原有文件形式,数据访问上能够与其他OSS客户端完全兼容。本文主要...

JindoFS缓存模式使用说明

缓存模式(Cache)主要兼容原生OSS存储方式,文件以对象的形式存储在OSS上,每个文件根据实际访问情况会在本地进行缓存,提升EMR集群内访问OSS的效率,同时兼容了原有OSS原有文件形式,数据访问上能够与其他OSS客户端完全兼容。本文主要...

动态文件剪枝

动态文件剪枝(Dynamic File Pruning,DFP)可以大幅改善许多Delta表查询的性能。动态文件剪枝对于未分区的表或者未分区列的join来说更加有效。DFP的性能提升通常还和数据的聚集相关联,可以考虑使用ZOrdering来最大化DFP的性能收益。说明 ...

配置NAS共享存储

阿里云文件存储NAS(Network Attached Storage)是面向阿里云ECS实例、E-HPC和ACK等计算节点的文件存储服务。阿里云NAS服务具有无缝集成、共享访问、安全控制等特性,非常适合跨多个ECS、E-HPC或ACK实例部署的应用程序访问相同数据来源的...

常见问题

Spark作业 您可以通过对Spark executor的 spark.executor.extraJavaOptions 和Spark drivers的 spark.driver.extraJavaOptions 添加-Dproperty=value 格式的命令,向Spark作业传递JVM环境参数。例如,提交Spark作业时,将Alluxio写类型设置...

常见问题

集群有状态重启包括 RM Restart 和 NM Restart 两部分,ResourceManager(简称RM)负责维护应用级基础信息与状态,NodeManager(简称NM)负责维护运行时的Container信息与状态,它们持续将相关状态同步至外部存储(Zookeeper、LevelDB和...

Jindo AuditLog使用说明

Jindo AuditLog提供块存储模式的...在E-MapReduce控制台,创建MR类型作业作业内容示例如下。jindo auditlog-src oss:/<yourbucket>/auditlog/-ns test-type ip-day 1-top 2 返回信息如下。16 openFileStatusRequest 6 deleteFileletRequest

Jindo AuditLog使用说明

Jindo AuditLog提供块存储模式的...在E-MapReduce控制台,创建MR类型作业作业内容示例如下。jindo auditlog-src oss:/<yourbucket>/auditlog/-ns test-type ip-day 1-top 2 返回信息如下。16 openFileStatusRequest 6 deleteFileletRequest

pg_settings

pending_restart bool 如果配置文件中修改了该值但需要重启,则为 true,否则为 false。对于 context 有多种可能的取值,取值如下:internal:这些设置不能被直接修改,它们反映了内部决定的值。某些可能在使用不同配置选项重建系统时或者...

pg_settings

pending_restart bool 如果配置文件中修改了该值但需要重启,则为 true,否则为 false。对于 context 有多种可能的取值。为了降低改变设置的难度,它们是:internal 这些设置不能被直接修改,它们反映了内部决定的值。某些可能在使用不同...

集群概述

sudo权限组:适用于需要管理集群的管理员,除提交、调试作业外,还可以执行sudo命令进行安装软件、重启节点等操作。重要 root用户仅能在创建集群时初始化创建,不推荐使用root用户提交任何作业,避免作业脚本中的误操作导致E-HPC集群数据...

使用SSL加密Kafka链接

如果是在Kafka集群以外的环境执行作业,您可以将Kafka集群中任意节点相应目录下的 truststore 和 keystore 文件,拷贝至运行环境进行相应配置。执行以下命令,创建Topic。kafka-topics.sh-partitions 10-replication-factor 2-bootstrap-...

配置MaxCompute Studio

单击 Install latest version 安装最新版本软件,安装完成后需要重启IntelliJ IDEA。SDK&Console配置选项 在 Settings 对话框左侧导航栏上,单击 MaxCompute Studio>SDK&Console,进入SDK&Console配置选项页。SDK&Console配置选项对话框...

机器学习的审计事件

RestartService 重启服务。SearchMCTables 搜索MaxCompute表。StartBenchmarkTask 启动压测任务。StartPipelineRun 启动工作流任务。StartRun 启动任务。StartService 开启服务。StartStress 启动压测任务。StartTensorboard 开始运行...

功能特性

新增服务 新增服务 Add services 重启服务 当配置项修改后,需要重启对应的服务使配置生效,或当某个服务出现故障或异常时,重启服务可以尝试修复服务的问题,并恢复其正常运行状态。重启服务 重启服务 Restart a service 管理配置项 支持...

常见问题

您可以在Log页面,根据失败作业的日志信息处理。如何手动重启失败的DAG?您可以按照以下步骤操作:在Airflow的 DAGs 页面,单击目标调度任务的DAG。在 Tree View 页面,单击 图标。弹出相应Task的对话框。单击Task对话框中的 Clear。单击 ...

Block模式使用说明

重启后即可通过 jfs:/test/的形式访问JindoFS上的文件。磁盘空间水位控制 JindoFS后端基于OSS,可以提供海量的存储,但是本地盘的容量是有限的,因此JindoFS会自动淘汰本地较冷的数据备份。我们提供了 storage.watermark.high.ratio 和 ...

Block模式使用说明

重启后即可通过 jfs:/test/的形式访问JindoFS上的文件。磁盘空间水位控制 JindoFS后端基于OSS,可以提供海量的存储,但是本地盘的容量是有限的,因此JindoFS会自动淘汰本地较冷的数据备份。我们提供了 storage.watermark.high.ratio 和 ...

Block模式使用说明

重启后即可通过 jfs:/test/的形式访问JindoFS上的文件。磁盘空间水位控制 JindoFS后端基于OSS,可以提供海量的存储,但是本地盘的容量是有限的,因此JindoFS会自动淘汰本地较冷的数据备份。我们提供了 storage.watermark.high.ratio 和 ...

文件存储CPFS(NFS协议)备份

您可以使用 云备份 备份文件存储CPFS(NFS协议)的数据,并在数据丢失或损坏时及时恢复。本文介绍使用本地NAS方式备份CPFS的操作方法。前提条件 已创建文件存储CPFS,并已获取挂载地址(例如 file-system-id.region.cpfs.aliyuncs....

通过执行命令卸载挂载目录

如果您为NFS或SMB文件系统配置了自动挂载脚本且需要重启服务器,您还需要删除或修改自动挂载配置文件/etc/fstab,取消开机自动挂载文件系统。执行 mount-l 命令,查看卸载结果。如果回显中未找到您挂载的NAS文件系统信息,表示该文件系统...

提交训练作业

PAI Python SDK提供了更易用的API(即HighLevel API),支持您将训练作业提交到PAI,并使用云上资源运行训练作业。本文为您介绍如何准备训练作业脚本,以及如何使用SDK提交训练作业。概要介绍 SDK提供了HighLevel的训练API:pai.estimator....

提交作业

E-HPC客户端支持以下两种方式上传作业文件:通过数据管理功能,您可以新建并编辑作业文件,或者直接将本地的作业文件上传到集群。具体操作,请参见 管理文件。通过会话管理功能,您可以远程登录到集群,执行命令创建作业文件。具体操作,请...

如何将本地.rdb文件恢复到云数据库 Redis 版实例

本地RDB文件可以恢复到 云数据库 Redis 版 实例。您需要先将RDB文件恢复到自建Redis数据库再将自建Redis数据库的数据迁移到 云数据库 Redis 版 实例。操作步骤 创建 云数据库 Redis 版 实例,具体操作请参见 步骤1:创建实例。如果已有 云...

Flink Python作业快速入门

如果Python作业文件为.zip文件,则需要在此处输入您的Entry Module,例如word_count。无需填写 Entry Point Main Arguments 填写输入数据文件的OSS路径。说明 本示例中输入数据文件、输出文件和测试Python存放路径一致。统一放在OSS控制台...

云虚拟主机无法删除文件

本文介绍使用Windows操作系统的云虚拟主机时,无法删除文件的可能原因和解决方案。问题现象 Windows操作系统云虚拟主机无法删除文件。可能原因 文件异常 文件权限异常 解决方案 通过主机管理控制台强制删除文件。登录 云虚拟主机管理页面。...

功能发布记录

提交版权水印提取作业 提交溯源水印提取作业 查询版权水印提取作业 查询溯源水印提取作业 提交智能生产作业 查询智能生产作业 2021-11-19 接口优化:新增QPS限制、使用说明。QPS限制 2021-11-24 计费调整:不足一分钟部分计费改为按比例...

媒体信息

媒体信息作业是指对输入文件进行深度分析和元数据提取,并返回输入文件的媒体信息。本文提供了Java SDK媒体信息作业相关功能的API调用示例,包含提交媒体信息作业、查询媒体信息作业。前提条件 使用前请先初始化客户端,详细说明请参见 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储 CPFS 文件存储HDFS版 数据库文件存储 开源大数据平台 E-MapReduce 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用