Hadoop
用户可以通过登录集群master节点，通过/etc/hosts文件查看域名和IP的对应关系，或者直接采取ping域名的方式获取，或者通过步骤1获取相应配置。spark.dla.eni.vswitch.id 您的交换机ID。无 spark.dla.eni.security.group.id 您的安全组ID。...
文件上传后的最近修改时间显示错误
使用FTP客户端将文件上传到云虚拟主机后，可能会因为FTP客户端和云虚拟主机的时区（或本地主机时区）不一致，从而导致该上传文件的最近修改时间显示错误。本文介绍这种情况的可能原因和解决方案。问题现象 云虚拟主机的时间设置与本地时间...
2021-03-16版本
开发控制台界面全新升级，作业上线后，您可以在开发界面继续对作业进行修正而不影响上线作业状态。Session模式作业支持设置Checkpoint和Savepoint。优化用户管理界面，可以添加用户名并显示用户名。支持Pyflink作业的提交。详情请参见 部署...
在Windows实例无法访问外部网络如何处理？
或 Windows实例ping外网地址提示“一般故障”。检查Windows实例是否存在性能问题 Windows实例可能存在CPU资源占用高、内存耗尽、带宽占用满、网络动态端口耗尽等问题，您可以通过如下方式进行检查：使用工具进行分析，具体操作，请参见 ...
压缩文件失败
问题现象 在主机管理控制台压缩文件后，没有在指定的保存位置找到压缩文件。可能原因 主机的可用网页空间不足。待压缩的文件正在被访问或使用。解决方案 登录 主机管理控制台。在左侧导航栏，单击 站点信息。在 站点信息 页面的 网站信息 ...
作业浏览
通过MaxCompute Studio的Job Explorer可以方便查看当前用户提交的MaxCompute实例情况，包括运行状态、作业类型、起止时间等。打开Job Explorer 在顶部菜单栏，单击 View>Tool Windows>Job Explorer 打开 Job Explorer。查看项目的作业实例 ...
使用Schrodinger软件计算分子结构
背景信息 Schrodinger基于物理学的计算平台，集成了用于预测建模、数据分析的差异化解决方案，以实现对化学空间的快速探索，主要应用于药物发现，以及航空航天、能源、半导体和电子显示器等不同领域的材料科学。更多信息，请参见 ...
通过VPN网关实现本地数据中心访问阿里云NAS
确认ping通后，在本地数据中心的服务器上挂载VPC内的文件系统。具体操作，请参见 挂载文件系统。跨地域挂载文件系统至ECS 已部署一台VPN网关时跨地域挂载文件系统 此处以处于不同地域的VPC1和VPC2为例进行说明。创建文件系统和挂载点。登录...
本地验证
您可以在将 hosts 文件复原后，放心修改域名的DNS解析，将网站流量解析到WAF进行防护。更多信息，请参见 修改域名DNS解析设置。如果网站访问不正常，说明WAF中添加的域名设置可能有问题，建议您检查WAF中的域名接入设置，修复问题后重新...
本地验证
您可以在将 hosts 文件复原后，放心修改域名的DNS解析，将网站流量解析到WAF进行防护。更多信息，请参见 修改域名DNS解析设置。如果网站访问不正常，说明WAF中添加的域名设置可能有问题，建议您检查WAF中的域名接入设置，修复问题后重新...
部署初始化
请输入：用户名：owner 密码：changepassword 登录成功后，显示下面的界面：输入命令：ls/etc/sysconfig/network-scripts 上面示例，显示有6个网卡配置文件（ifcfg-enp61s0f0、ifcfg-enp61s0f1、ifcfg-enp95s0f0、ifcfg-enp95s0f1、ifcfg-...
无法连接Windows实例
故障现象 无法ping通ECS实例，在排除Iptables和网卡IP配置问题且回滚系统后，仍然无法ping通。故障原因 可能是ECS实例安全组默认的公网规则被删除。解决方法 重新配置ECS实例的安全组公网规则，具体操作请参见 ECS实例安全组默认的公网规则...
常见问题
550 Create directory operation failed 创建文件时报错：553 could not create file 使用FTP下载文件时出现中断 脚本文件上传后无法执行 文件上传后的最近修改时间显示错误 使用FTP客户端传输文件到云虚拟主机速度缓慢的解决方法 不同的...
提交作业和查看作业信息
方式二：通过文件提交作业 您可以把需要执行的DDL或DML语句，写在一个文件中（例如，test.sql），然后使用以下命令启动流式作业。yarn-client方式（默认）streaming-sql-f test.sql yarn-cluster方式 streaming-sql-master yarn-deploy-...
Linux系统ping默认DNS地址时出现“sendmsg:Operation ...
问题描述 访问网站慢，ping默认DNS地址显示如下。ping本地回环地址显示如下。ping:sendmsg:Operation not permitted 系统负载不高，网络线路通畅，资料库无死锁进程。系统日志出现大量信息，如下所示。kernel:printk:xxxx messages ...
使用rsync工具迁移数据
本文介绍如何使用rsync工具实现阿里云文件存储NAS NFS协议文件系统之间的数据迁移。前提条件 已拥有一个存有数据的NFS协议文件系统，并且拥有一个专有网络类型挂载点。费用说明 NAS与NAS之间的迁移，会涉及如下费用：使用ECS作为数据传输的...
通过spark-submit命令行工具开发Spark应用
本文以ECS连接 AnalyticDB MySQL 为例，介绍如何通过 AnalyticDB MySQL Spark-Submit命令行工具进行Spark作业开发。背景信息 当您使用客户端连接 湖仓版（3.0）集群时，在进行Spark开发时，需要通过 AnalyticDB MySQL Spark-Submit命令行...
计费常见问题
本文介绍文件存储NAS（通用型NAS/极速型NAS）计费常见问题。包括通用型NAS资源包如何使用或抵扣、NAS服务如何停止计费、购买资源包为什么还欠费等问题。开通NAS服务后，就开始计费吗？仅开通NAS服务，不会产生费用。当您在通用型NAS中写入...
访问云虚拟主机的PHP网站时显示为空白页面
缓存问题 部分程序在缓存文件中占比过大时会导致网站页面显示空白，出现这种问题时，一般网站后台还是可以访问，您可以登录网站后台清空程序缓存即可。访问网站时，部分网站程序会生成一个静态页面，在生成过程中因种种原因，生成的首页...
作业引擎版本升级
升级流程 步骤一：备份作业状态 您可以在 作业运维 页面，单击目标作业，在作业详情中的 状态集管理 页签查看作业状态集，详情请参见 查看状态生成总览。如果您的作业属于有状态计算，那么在升级版本时，首要考虑的是状态能否复用。升级前...
NFS文件系统传输加密
为避免已挂载文件系统的ECS实例重启后，挂载信息丢失，您可以通过在Linux ECS实例中配置/etc/fstab 文件，实现在ECS实例重启时NFS文件系统自动挂载。打开/etc/fstab 配置文件，添加挂载配置。file-system-id.region.nas.aliyuncs....
2022-03-04版本
企业级状态后端存储介绍 企业级状态后端存储配置 系统检查点或作业快照的超时与失败 性能优化 企业级状态存储后端在本次新版本中包含了大量优化，极大提升了双流或多流Join作业的性能，计算资源利用率平均可以提升50%，典型场景下可以提升...
创建作业
相关操作 修改下探分析作业 创建下探分析作业后，您可以在下探分析作业列表中，找到目标下探分析作业，单击对应的 图标，修改该作业。删除下探分析作业 创建下探分析作业后，您可以在下探分析作业列表中，找到目标下探分析作业，单击对应的...
自定义聚合函数（UDAF）
上传自定义函数JAR包到附加依赖文件中后，只能在本作业中使用该自定义函数，其他作业中不可使用。如果创建的临时函数名称为mysum，则在作业中使用该函数的代码示例如下。CREATE TEMPORARY TABLE ASI_UDAF_Source(a BIGINT)WITH('connector'...
常见问题
集群配置问题包括：内存参数是否合理、跨集群联通性是否正确、安全集群访问是否通过、principal是否正确等等，作业问题包括作业描述文件格式是否正确、输入数据是否能够正常被解析，以及一些其他的作业相关的配置（例如ioConfig）。...
排查和处理文件备份客户端状态异常
说明 重新安装服务器操作系统后，文件备份客户端会和云备份控制台之间失去联系，造成文件备份客户端在云备份控制台显示异常。您重新安装文件备份客户端并注册后，会出现第二台名称相同的文件备份客户端。先停止新文件备份客户端服务。在 云...
安装登录问题
输入企业标识并单击确认后，进入白屏，左上角显示“bad request”？可能是管理员在自定义身份源中未添加任何用户信息导致，需要添加用户信息后再尝试登录 SASE App。具体操作，请参见 配置SASE身份源。企业员工是否可以自行卸载 SASE App？...
提交作业
提交一个目录（多文件）的作业 一般这种情况：src目录下有多个文件,如：src|-test.py|-dep.py 而 test.py 需要依赖dep.py，则可以将整个目录一起打包。bcs sub"python test.py"-p./src/将src目录下的所有文件打包到 worker.tar.gz,然后上传...
迁移Batch批量计算到分布式工作流Argo集群
批处理作业（Batch）通常用于数据处理、仿真计算、科学计算等领域，往往需要大规模的计算资源。分布式工作流Argo集群基于开源Argo Workflows项目开发，完全符合开源工作流标准。通过 工作流集群，您可以轻松编排工作流，每个工作流步骤使用...
普通作业快速开始
查看作业运行状态 bcs j#获取作业列表,每次获取作业列表后都会将列表缓存下来，一般第一个即是你刚才提交的作业 bcs ch 1#查看缓存中作业的状态，这里的1是bcs j命令查询出的刚刚提交的作业序号 bcs log 1#查看缓存中序号为1的作业日志 ...
运行模式
Local模式 MaxCompute Spark支持用户以原生Spark Local模式进行作业调试。与Yarn Cluster模式类似，您首先需要做以下准备工作：准备MaxCompute项目以及对应的AccessKey ID、AccessKey Secret。下载MaxCompute Spark客户端。准备环境变量。...
智能生产
配置后会导致同名文件转码完成后写入OSS失败，建议不要设置输出文件与源文件同名。单击 提交任务，完成创建智能封面任务。任务提交后您可以在当前页签下方列表中查看任务的执行状态以及配置信息和输入、输出地址等。使用工作流提交智能封面...
实例的节点故障处理机制
本文档介绍云数据库MongoDB版实例的节点故障处理机制。单节点实例 由于单节点实例架构的特殊性，单节点实例仅拥有一个节点。当节点发生故障后，系统会对故障节点进行检查与修复。节点故障期间实例的相关服务不可用。说明 单节点实例适用于...
Docker 作业示例
4.查看作业运行状态 bcs j#获取作业列表,每次获取作业列表后都会将列表缓存下来，一般第一个即是你刚才提交的作业 bcs ch 1#查看缓存中第一个作业的状态 bcs log 1#查看缓存中第一个作业日志 5.查看结果 Job 结束后，可以使用以下命令查看...
什么是文件存储NAS
阿里云文件存储NAS（Apsara File Storage NAS）是面向阿里云ECS实例、E-HPC、容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。产品概述 NAS基于POSIX文件接口，天然适配原生操作系统...
快速使用EMR on ACK
提交作业的详细信息请参见：提交Spark作业 使用CLI提交Presto作业 提交Flink作业 通过kubectl连接Kubernetes集群，详情请参见 获取集群KubeConfig并通过kubectl工具连接集群。新建 spark-pi.yaml 文件，文件内容如下。apiVersion:...
创建普通转码任务
配置后会导致同名文件转码完成后写入OSS失败，建议不要设置输出文件与源文件同名。其他常见问题请参见上文中 待转码文件地址 的说明。单击 下一步。设置 转码模板。参数 说明 模板类型 选择转码模板类型。预置模板说明，请参见 预置模板...
在Linux云电脑挂载CPFS文件系统
您可以通过NFS协议服务将CPFS文件系统挂载至对应 办公网络 内的云电脑上。挂载成功后，您可以在云电脑上把CPFS文件系统当作一个普通的目录来访问和使用。本文介绍将CPFS文件系统挂载到云电脑的相关操作。背景信息 文件存储CPFS（Cloud ...
功能特性
用户使用工具（如 SDK，命令行工具等）向 BatchCompute 提交作业，BatchCompute 使用用户指定的镜像（如：ubuntu）启动虚拟机（VM）,在虚拟机中运行用户程序,运行完成后释放虚拟机（VM）。BatchCompute 中使用 OSS 作为持久化存储。您可以...
设计方案
从提前发现系统风险、提升测试质量、完善风险预案、加强监控告警、提升故障应急效率等方面做到故障发生前有效预防，故障发生时及时应对，故障恢复后回归验证。基于故障本身打造分布式系统韧性，持续提升软件质量，增强团队对软件生产运行的...
- 产品推荐
- 这些文档可能帮助您