Windows系统实例的宕机问题排查
定位宕机原因 您可以通过以下方式，定位ECS实例发生宕机的具体原因。方式一：（推荐）通过自助诊断工具定位 登录 ECS管理控制台，左侧导航栏单击 自助问题排查。单击 实例问题排查 页签。选择 实例无法连接或启动异常>实例出现宕机，然后...
服务介绍
升降级能力 边缘一体机处于繁忙状态时，可配置升降级策略来处理算法识别到的事件，降低边缘一体机在高压力情况下出现宕机的风险。任务感知 支持在边缘计算控制台，远程开启边缘一体机中的执行计划任务，开启执行计划任务后，可通过执行记录...
什么是边缘智能一体机（执行计划版本）
升降级能力 支持一体机识别到现场AI事件超出硬件可处理的拼接时，一体机会根据用户配置的升降次策略进行处理，降低硬件在高压力情况下出现宕机的风险；任务感知 支持在云端对边缘一体机中的任务进行远程开关，同时可通过执行记录对边缘运行...
实时模式配置概述
配置项 描述 资源配置 开源Flink实时计算源 对于开源Flink创建的实时任务，任务的实时模式资源配置支持配置任务的生产环境和开发环境的资源队列、引擎版本以及任务的并行度、Task Manager数量、Job Manager Momory和Task Manager Momory。...
配置Ververica Flink离线模式资源
重要 集群切换后提交生效的任务执行可能有差异，请谨慎操作。生产环境引擎版本 默认为创建Flink SQL任务时选择的生产环境引擎版本。您可在此处切换引擎版本。开发环境集群及引擎版本 支持系统默认配置和自行配置。系统默认配置：默认选择，...
配置Ververica Flink离线模式资源
重要 集群切换后提交生效的任务执行可能有差异，请谨慎操作。生产环境引擎版本 默认为创建Flink SQL任务时选择的生产环境引擎版本。您可在此处切换引擎版本。开发环境集群及引擎版本 支持系统默认配置和自行配置。系统默认配置：默认选择，...
离线模式配置概述
对于流批一体任务的离线模式您需定义该任务实时相关的属性，包括任务资源、时间参数、Checkpoint 等。本文为您介绍流批一体任务实时模式配置的相关内容。离线模式配置入口 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入 ...
实时模式配置概述
对于流批一体任务的实时模式您需定义该任务实时相关的属性，包括任务资源、时间参数、Checkpoint 等。本文为您介绍流批一体任务实时模式配置的相关内容。实时模式配置入口 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入 ...
配置开源Flink离线模式资源
重要 切换后提交生效的任务执行可能存在差异，请谨慎操作。生产环境引擎版本 默认为创建Flink_SQL任务时所选择的引擎版本。您可在此处切换引擎版本。开发环境资源队列及引擎版本 默认为创建Flink_SQL任务时所选择的配置，您可在此处进行...
配置开源Flink实时模式资源
重要 切换后提交生效的任务执行可能存在差异，请谨慎操作。生产环境引擎版本 默认为创建Flink SQL任务时所选择的引擎版本。您可在此处切换引擎版本。开发环境资源队列及引擎版本 默认为创建Flink SQL任务时所选择的配置，您可在此处进行...
离线模式配置概述
资源配置 Ververica Flink实时计算源 对于Ververica Flink创建的流批一体任务，任务的离线模式资源配置支持配置任务的生产环境和开发的资源集群、引擎版本以及任务的并行度、Task Manager数量、Job Manager Momory和Task Manager Momory。...
流程配置
任务编排 添加并行任务 在流水线编辑页面，鼠标移动到一个阶段会出现“+并行任务”按钮，点击打开 选择任务组 面板，选择合适的任务组模板，即可完成并行任务的添加。添加串行任务 在流水线编辑页面，鼠标移动到一个任务会出现“+”，可以...
新建FLINK_SQL任务
说明 Dataphin实时计算支持流批一体任务，使用统一的流批计算引擎，在一份代码上可同时配置 流+批 的任务配置，基于同一份代码生成不同模式下的实例。开启批处理需在任务配置页面开启离线模式并进行资源、调度依赖等相关配置。实时模式 ...
计算层高可用
同时对于interactive模式下本身目标在于延迟敏感的分析场景，目前对于计算节点异常宕机的场景，计算引擎会通过查询级别重算，保证查询稳定性。Batch模式 对于类似ETL等数据清洗任务，这类任务计算时间长，计算资源消耗大，如果依然查询级别...
FLINK
并行度 用于设置执行Flink任务的并行度。主程序参数 设置Flink程序的输入参数，支持自定义参数变量的替换。选项参数 填写Flink命令所需的选项参数。例如，-yt 或-C。资源 选择任务执行时所需的资源文件，请确保您已在 资源中心 的 文件管理...
使用多机MPP对海量数据分析提速
本文介绍了多机并行执行能力的技术背景、技术原理、适用场景以及使用说明等内容。背景信息 列存索引（IMCI）是PolarDB的HTAP解决方案。随着用户查询数据量、查询复杂度以及对OSS等外部表的查询需求的增加，单个只读列存节点已无法满足海量...
新建FLINK_DATASTREAM任务
实时模式 资源配置（必选）：配置任务生产环境和开发环境对应的资源队列、引擎版本以及任务的并行度、Task Manager数量、Job Manager Memory和Task Manager Memory信息。配置说明，请参见 配置开源Flink实时模式资源。变量配置：变量参数...
离线异步任务场景
本文介绍什么是GPU离线异步任务场景和如何使用函数计算GPU异步调用、异步有状态调用服务离线AI推理、离线AI训练、离线GPU加速场景，以及如何基于非Web Server模式的Custom Container满足离线GPU应用场景。场景介绍 在离线异步应用场景中，...
新建BLINK_SQL任务
说明 Dataphin实时计算支持流批一体任务，使用统一的流批计算引擎，在一份代码上可同时配置 流+批（实时模式+离线模式）的任务配置，基于同一份代码生成不同模式下的实例。开启批处理需在任务配置页面开启离线模式并进行资源、调度依赖等...
新建BLINK_SQL任务
说明 Dataphin实时计算支持流批一体任务，使用统一的流批计算引擎，在一份代码上可同时配置 流+批（实时模式+离线模式）的任务配置，基于同一份代码生成不同模式下的实例。开启批处理需在任务配置页面开启离线模式并进行资源、调度依赖等...
新建FLINK_SQL任务
说明 Dataphin实时计算支持流批一体任务，使用统一的流批计算引擎，在一份代码上可同时配置 流+批 的任务配置，基于同一份代码生成不同模式下的实例。开启批处理需在任务配置页面开启离线模式并进行资源、调度依赖等相关配置。实时模式 ...
新建FLINK_SQL任务
说明 Dataphin实时计算支持流批一体任务，使用统一的流批计算引擎，在一份代码上可同时配置 流+批 的任务配置，基于同一份代码生成不同模式下的实例。开启批处理需在任务配置页面开启离线模式并进行资源、调度依赖等相关配置。实时模式 ...
任务类型
下面的图中，首先理清各个任务之间的依赖关系，count1 和 count2 是并行的任务，它们依赖 split 任务，merge任务依赖 count1 和 count2。依据上面的依赖关系，在Job中可以这样描述：from batchcompute.resources import(JobDescription,...
CreateJob-创建任务
vpc-abcdef*SwitchId string 否 用户交换机的 ID，可选参数 参数值为空时系统会根据库存情况自动选择合适的交换机；也可以自己指定交换机 ID。vs-abcdef*SecurityGroupId string 否 用户安全组的 ID。sg-abcdef*ExtendedCIDRs array 否 ...
任务常见问题
可能原因：任务实例停止后，SchedulerX会把Kill消息发送到客户端。客户端接收到Kill消息后，会停止下发和停止执行未执行的子任务、销毁该实例的上下文、销毁实例所有的线程池。对于已经在执行中的子任务不会被停止掉，只会中断对应的线程，...
最佳实践
PolarDB PostgreSQL版（兼容Oracle）支持弹性跨机并行查询(elastic Parallel Query，简称ePQ)，能够高效支持轻量级的分析型查询，满足用户日渐需要的HTAP能力。简介 当查询使用ePQ特性时，PolarDB PostgreSQL版（兼容Oracle）将通过ePQ优化...
最佳实践
PolarDB PostgreSQL版（兼容Oracle）支持弹性跨机并行查询(elastic Parallel Query，简称ePQ)，能够高效支持轻量级的分析型查询，满足用户日渐需要的HTAP能力。简介 当查询使用ePQ特性时，PolarDB PostgreSQL版（兼容Oracle）将通过ePQ优化...
最佳实践
PolarDB PostgreSQL版 支持弹性跨机并行查询(elastic Parallel Query，简称ePQ)，能够高效支持轻量级的分析型查询，满足用户日渐需要的HTAP能力。简介 当查询使用ePQ特性时，PolarDB PostgreSQL版 将通过ePQ优化器，生成能够被多个计算节点...
产品规格
通用型+低延时网络 ecs.sccg5.24xlarge 处理器：2.5 GHz主频的Intel ® Xeon ® Gold 6149（Skylake）vCPU：96 内存：384GiB GPU：无 以太网：10Gbit/s RDMA：50Gbit/s 高效云盘 SSD云盘 需要多机并行的业务，如仿真制造场景。不支持ESSD云...
矢量金字塔
指定构建矢量金字塔的并行任务数，默认为0（表示并行最大化）。并行任务数最大不应该超过CPU数量的4倍。并行构建使用了两阶段事务机制，需要设置数据库max_prepared_transactions参数，需要设置max_prepared_transactions=100或者更高，...
矢量金字塔
指定构建矢量金字塔的并行任务数，默认为0（表示并行最大化）。并行任务数最大不应该超过CPU数量的4倍。并行构建使用了两阶段事务机制，需要设置数据库max_prepared_transactions参数，需要设置max_prepared_transactions=100或者更高，...
矢量金字塔
指定构建矢量金字塔的并行任务数，默认为0（表示并行最大化）。并行任务数最大不应该超过CPU数量的4倍。并行构建使用了两阶段事务机制，需要设置数据库max_prepared_transactions参数，需要设置max_prepared_transactions=100或者更高，...
任务常见问题
可能原因：任务实例停止后，SchedulerX会把Kill消息发送到客户端。客户端接收到Kill消息后，会停止下发和停止执行未执行的子任务、销毁该实例的上下文、销毁实例所有的线程池。对于已经在执行中的子任务不会被停止掉，只会中断对应的线程，...
任务常见问题
可能原因：任务实例停止后，SchedulerX会把Kill消息发送到客户端。客户端接收到Kill消息后，会停止下发和停止执行未执行的子任务、销毁该实例的上下文、销毁实例所有的线程池。对于已经在执行中的子任务不会被停止掉，只会中断对应的线程，...
常见报错
可能原因：启动尚未购买的任务。解决方法：购买任务后再启动。DTS.Msg.CheckJobFailed.ServerUnAvailable 报错场景：配置任务过程中。可能原因：由于系统无法连接任务运行的服务器节点，导致无法检测服务器节点到源或目标库的网络是否通畅...
设置宕机自动迁移
为了降低物理故障对业务的影响，阿里云为您提供专有宿主机DDH宕机自动迁移的功能。本章节介绍在创建DDH后如何开启或者关闭宕机自动迁移。背景信息 宕机自动迁移开启后，当DDH因故障停机时，会自动迁移至健康的DDH。若您未开启宕机自动迁移...
将ElasticJob迁移至SAE Job
背景信息 SAE Job以任务为中心，当前聚焦支持单机广播、并行分片模型的任务，同时支持事件驱动、并发策略和超时重试等特性，提供低成本、多规格、高弹性的资源实例来满足短时任务的执行。ElasticJob作为分布式任务框架，在使用过程中存在...
将Spring Task迁移至SAE Job
背景信息 SAE Job以任务为中心，当前聚焦支持单机广播、并行分片模型的任务，同时支持事件驱动、并发策略和超时重试等特性，提供低成本、多规格、高弹性的资源实例来满足短时任务的执行。借助Spring Task，您可以通过注解快速实现对指定...
将XXL-JOB迁移至SAE Job
背景信息 SAE Job以任务为中心，当前聚焦支持单机广播、并行分片模型的任务，同时支持事件驱动、并发策略和超时重试等特性，提供低成本、多规格、高弹性的资源实例来满足短时任务的执行。在XXL-JOB迁移的过程中，您只需部署XXL-JOB客户端，...
对分区表使用跨机并行查询
PolarDB PostgreSQL版（兼容Oracle）支持对分区表使用跨机并行查询的功能。通过对分区表使用跨机并行查询，提升数据库的性能。功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询...
- 产品推荐
- 这些文档可能帮助您