Windows系统实例的宕机问题排查
定位宕机原因 您可以通过以下方式，定位ECS实例发生宕机的具体原因。方式一：（推荐）通过自助诊断工具定位 登录 ECS管理控制台，左侧导航栏单击 自助问题排查。单击 实例问题排查 页签。选择 实例无法连接或启动异常>实例出现宕机，然后...
批处理
使用批处理对存储空间（Bucket）中存量文件进行批量处理。例如将Bucket某个目录中后缀为.docx的文件转换成PDF格式、将所有MOV格式的文件转码为MP4等。说明 新版数据处理功能API、SDK支持在 IMM服务接入点 中的地域进行使用。注意事项 批...
UpdateBatch-更新批处理任务
更新批处理任务信息，如输入的数据源配置、数据处理的配置、批处理任务标签等信息。接口说明 更新批处理任务时，当批处理任务状态处于 Ready（就绪）或 Failed（失败）时可以更新，更新时不会改变当前的任务状态。更新完成后，之前未完成的...
ResumeBatch-恢复批处理任务
将一个Suspend（暂停）或Failed（失败）的批处理任务恢复。接口说明 只有 Suspended（暂停），Failed（失败）状态的批处理任务可以恢复，恢复后继续执行未完成的任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的...
SuspendBatch-暂停批处理任务
将一个 Running（正在执行）的批处理任务暂停。接口说明 任务状态 Running（正在执行）时，可以暂停任务。如果想继续执行，需要调用 ResumeBatch 接口。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后...
Transaction Table2.0概述
随着当前数据处理业务场景日趋复杂，很多业务场景并不要求延时秒级更新可见或者行级更新，更多的需求是分钟级或者小时级的近实时数据处理叠加海量数据批处理场景，MaxCompute支持基于Transaction Table2.0实现近实时的增全量一体的数据存储...
变量
在使用数据处理功能的批处理或触发器功能时，每个Object都会触发一个任务，任务中需要指定处理后的文件保存的输出路径，如果多个任务输出路径是同一个路径，则会产生文件覆盖，因此需要保证输出路径为动态路径，所以引入变量。此外，您可以...
产品优势
批流一体 在实际的业务场景中，往往既有批处理的需求，也有流式计算的需求。您不仅需要清楚地划分批流两种作业，还需要分别进行开发。Databricks Delta Lake可以使用一套API接口同时处理批作业和流作业，达到事半功倍的效果。协同分析 数据...
使用EasyTransfer进行文本分类
如果是多卡训练，则为每个GPU上的批处理大小。32 INT numEpochs 否 训练总Epoch的数量。1 INT optimizerType 否 优化器类型，取值包括：adam lamb adagrad adadeleta adam STRING learningRate 否 学习率。2e-5 FLOAT advancedParameters ...
方案实现
外表order_source用于流批处理的SQL执行。DROP TABLE IF EXISTS order_source;CREATE TABLE order_source USING tablestore OPTIONS(endpoint="http://vehicle-test.cn-hangzhou.vpc.tablestore.aliyuncs.com",access.key.id="",access.key...
主机选项说明
开启会话备注 登录主机时需要写明登录主机的原因或目的才可登录，便于事后审计。开启历史会话审计 表示允许堡垒机对运维会话内容进行审计，关闭后会产生会话记录，但没有具体内容。开启实时会话监控 表示管理员可以对主机进行实时监控，...
内核热补丁FAQ
Alibaba Cloud Linux 2系统的ECS实例中断处理释放内存页时由于访问空指针导致系统宕机 Alibaba Cloud Linux 2系统的ECS实例中使用已释放的文件系统inode出现系统宕机如何处理？Alibaba Cloud Linux 2系统的ECS实例OverlayFS的dentry泄露...
产品优势
对比项 X86服务器 手机农场 手机板卡 阿里云（ARM服务器虚拟化）性能 需要进行二进制指令翻译，性能损失大 与真机性能一致 性能不会超过真机 底层基于第三代神龙架构，可提供超越真机的性能 稳定性 开源软件实现，稳定性较差 消费级产品，...
ECS实例宕机并报错“Out of memory and no killable ...
如果您的ECS实例出现宕机，并且报错日志中存在 Out of memory and no killable processes 信息，则可以参考本文提供的方案解决问题。问题现象 ECS实例在运行过程中出现宕机，并且有类似于如下所示的调用栈：[28663.625353][pid]uid tgid ...
设备和交换机之间的链路故障
本文介绍SAG-1000设备发生设备和交换机之间链路故障的原因和处理方法。问题现象 设备和交换机接口之间ping不通。设备的Web端口配置页，端口前的状态灯为红色。动态路由OSPF接入时，Web端口配置页，端口前的状态灯为红色。设备的Web状态查询...
DeleteBatch-删除批处理任务
删除指定的一个批处理任务。接口说明 删除批处理任务时，当任务状态处于 Ready（就绪），Failed（失败），Suspended（暂停），Succeeded（完成）时可以删除，其他运行中的状态禁止删除。删除批处理任务时，可以先通过 GetBatch 查询批处理...
机器阅读理解预测
如果使用多机多卡，则表示每个GPU上的批处理大小。INT类型，默认值为256。篇章最大长度 表示系统可处理的篇章最大长度，INT类型，默认值为384。问句最大长度 表示系统可处理的问句最大长度，INT类型，默认值为64。回复最大长度 表示系统可...
漏洞管理常见问题
在您使用云安全中心修复Linux软件漏洞、Windows系统漏洞时，如果提示漏洞修复失败，请参考以下步骤进行排查和处理：说明 建议您针对以下表格中的说明，按照 从上到下 的顺序来排查漏洞修复失败的原因。问题原因 具体说明 处理方案 漏洞所在...
服务协议
此外，您自行升级操作系统可能会造成宕机等不良影响，请把握风险并谨慎操作。5.5.您了解阿里云无法保证其所提供的服务毫无瑕疵（如阿里云安全产品并不能保证您的硬件或软件的绝对安全），但阿里云承诺不断提升服务质量及服务水平。所以您...
设置宕机自动迁移
为了降低物理故障对业务的影响，阿里云为您提供专有宿主机DDH宕机自动迁移的功能。本章节介绍在创建DDH后如何开启或者关闭宕机自动迁移。背景信息 宕机自动迁移开启后，当DDH因故障停机时，会自动迁移至健康的DDH。若您未开启宕机自动迁移...
产品概述
什么是批量计算 批量计算（BatchCompute）是一种适用于大规模并行批处理作业的分布式云服务。BatchCompute 可支持海量作业并发规模，系统自动完成资源管理、作业调度和数据加载，并按实际使用量计费。通俗的讲，就是您可以提交一个任意的...
方案背景
介绍表格存储结合Spark流批处理实现一体化存储和计算的背景、适用场景、样例场景和架构设计。背景 电子商务模式是指在网络环境和大数据环境下基于一定技术基础的商务运作方式和盈利模式。在电商运营中数据的分析和可视化是最重要的部分之一...
更新故障详情
P1 故障等级 relatedServiceId Long Body 否 123 关联服务 progressSummary String Body 否 进展摘要xxxx 进展摘要 preliminaryReason String Body 否 原因是服务宕机 初步原因 mainHandlerId Long Body 否 678 主要处理人 feedback String...
任务拆分和执行
拆分阶段：对数据进行分片，不限制拆分层数，将拆分结果上报给服务端，由服务端根据拆分的 chunk（一批待处理数据的索引集合）通知客户端来拉取数据进行处理。执行阶段：客户端接收到通知后拉取数据进行处理，处理完后继续拉取新的数据，...
修改主机的服务端口
目前堡垒机对于服务器的RDP和SSH协议使用的是默认端口（RDP协议默认使用3389端口，SSH协议默认使用22端口），如果您在主机中自定义了端口，需要在服务端口中做相应修改。本文档介绍如何修改主机的服务端口。前提条件 在您修改服务端口前，...
简介
批量计算服务（Batch Computing Service，简称BatchCompute）是一种适用于大规模并行批处理作业的分布式云服务。我们提供了丰富的API接口，您可以基于此API很方便使用BatchCompute的服务以及开发自己的应用程序。请确保在使用这些接口前，...
消息幂等
消息重复的可能原因如下：发送时消息重复 当一条消息已被成功发送到服务端并完成持久化，此时出现了网络闪断或者客户端宕机，导致服务端对客户端应答失败。如果此时Producer意识到消息发送失败并尝试再次发送消息，Consumer后续会收到两条...
Hologres SQL语句的常见问题
解决方法：提交工单排查Hologres实例宕机原因。报错：value too long for type character varying(256)问题原因：字段长度超过了VARCHAR类型的长度限制。解决方法：处理数据或将VARCHAR的长度设置得更长。报错：internal error:Write is ...
使用实例时镜像相关问题
cd/root/rpmbuild/RPMS/aarch64 rpm-ivh kexec-tools-2.0.15-51.el7.aarch64.rpm 如果再次发生宕机，通过 ls-lh/var/crash 查询dump文件，可以正常生成 vmcore 文件，表示问题已解决。CentOS/RedHat 7.x升级Systemd重启进入救援模式如何...
流计算实现细节
图中MicroBatchExecutor为Spark的微批处理框架，Source为Structured Streaming抽象的接口类，SourceRDD为Spark的RDD抽象类，TablestoreClient为表格存储的客户端。实线表示详细操作，虚线表示请求成功返回。从整体上看，时序流程是...
BatchExecuteStatementResult
名称 类型 描述 示例值 object BatchExecuteStatement 的返回值。GeneratedFieldsList array 批处理 SQL 执行过程中的自增列。array 批处理 SQL 中的一条 SQL 执行的自增列。Field 自增列的值，详情请参见 Field。
如何处理Redis集群数据倾斜
建议您及时对实例进行数据倾斜的原因排查，并根据对应处理方法在业务层进行改造，对实例进行优化，更多信息请参见 数据倾斜的原因与处理方法。倾斜场景 可能原因 临时方案 内存倾斜 大Key、Hash Tags。升级实例规格，具体操作请参见 变更...
如何处理Tair集群数据倾斜
建议您及时对实例进行数据倾斜的原因排查，并根据对应处理方法在业务层进行改造，对实例进行优化，更多信息请参见 数据倾斜的原因与处理方法。倾斜场景 可能原因 临时方案 内存倾斜 大Key、Hash Tags。升级实例规格，具体操作请参见 变更...
数据消费框架原理
初始化TunnelStateMachine，用于进行Channel状态机的自动化处理。固定间隔进行Heartbeat 心跳的间隔由TunnelWorkerConfig中的heartbeatIntervalInSec参数决定。进行Heartbeat请求，从Tunnel服务端获取最新可用的Channel列表，Channel中会...
Spark SQL执行方式
AnalyticDB for MySQL 湖仓版（3.0）支持使用批处理和交互式两种方法执行Spark SQL，两种执行方式都直接与 AnalyticDB for MySQL 的元数据服务连通，可以读写 AnalyticDB for MySQL 的库表。本文介绍批处理和交互式两种执行方式的注意事项...
文本摘要训练
如果使用多机多卡，则表示每个GPU上的批处理大小。文本最大长度 表示系统可处理的序列整体最大长度。INT类型，范围为（1，512），默认值为512。训练轮数 训练总Epoch的数量。INT类型，默认值为3。学习率 模型构建过程中的学习率。FLOAT类型...
机器阅读理解训练
如果使用多机多卡，则表示每个GPU上的批处理大小。篇章最大长度 表示系统可处理的篇章最大长度，INT类型，默认值为384。问句最大长度 表示系统可处理的问句最大长度，INT类型，默认值为64。滑动窗口大小 对篇章进行滑动窗口切分时，滑动...
工作流常见问题
您可以通过媒体处理控制台或OSS官方提供的图形化管理工具进行文件上传工作，支持分片上传、断点续传、批量上传。详细信息参见 控制台上传、OSS图形化管理工具上传。音视频文件上传后转码操作是自动执行的么？文件后缀名在指定范围内的文件...
网站耗资源（客户程序故障）常见问题
由于我们是对主机服务器进行实时监控的，出现问题后必须马上采取措施，否则将会导致服务器宕机，所以发出此通知信的同时，已将您的网站暂停，希望您能理解，因此给您带来的不便向您表示深深的歉意，谢谢您的支持与理解。云虚拟主机会因为...
消费幂等
消息重复的场景如下：发送时消息重复 当一条消息已被成功发送到服务端并完成持久化，此时出现了网络闪断或者客户端宕机，导致服务端对客户端应答失败。如果此时生产者意识到消息发送失败并尝试再次发送消息，消费者后续会收到两条内容相同...
- 产品推荐
- 这些文档可能帮助您