创建以CPFS为共享存储的E-HPC集群
背景信息 CPFS（Cloud Paralleled File System）是一种高性能并行文件存储系统，专为AI训练和E-HPC等高性能计算场景打造，最大支持数十GB/s吞吐能力。CPFS的数据存储在集群中的多个数据节点，并可由多个客户端同时访问，从而能够为大型E-...
Catalog概述
本文为您介绍什么是Catalog（数据目录），以及如何使用Catalog查询内外部数据。基本概念 内部数据：保存在StarRocks中的数据。外部数据：保存在外部数据源（例如，Apache Hive、Apache Iceberg和Apache Hudi）中的数据。Catalog StarRocks ...
使用云存储
文件存储CPFS 阿里云完全托管、可扩展的并行文件存储系统，针对高性能计算场景的性能要求进行了深度优化，提供对数据毫秒级的访问和百万级IOPS的数据读写请求。更多信息，请参见 文件存储CPFS概述。更多信息，请参见 阿里云存储服务。存储...
羲和分析计算引擎
相对于同步执行，尽管增加了查询执行实现的复杂度，但是通过用户态的并行管理能力，提高了系统CPU的并行执行的效率。这是羲和分析计算引擎极致性能的基础能力。向量化执行模型 基于全异步的执行引擎之上，羲和采用了向量化的查询执行模型。...
Catalog概述
本文为您介绍什么是Catalog（数据目录），以及如何使用Catalog管理和查询内外部数据。基本概念 内部数据：保存在StarRocks中的数据。外部数据：保存在外部数据源（例如Apache Hive、Apache Iceberg和Apache Hudi）中的数据。Catalog ...
PolarDB并行查询
自适应执行策略 在早期版本中，串行优化和并行优化，并行优化和并行计划生成之间存在一定的耦合性，导致在开始并行优化后会无法退化回串行的问题，如果系统中这样的查询并发较多，会同时占用很多worker线程导致CPU打爆。新的并行优化器解决...
基本概念
什么是弹性容器实例 负载均衡实例 负载均衡实例是一种对流量进行按需分发的服务，通过将流量分发到不同的后端服务来扩展应用系统的服务吞吐能力，并且可以消除系统中的单点故障，提升应用系统的可用性。负载均衡SLB产品家族介绍 RDS实例 云...
并行循环步骤
本文介绍了并行循环步骤和其相关使用示例。介绍 并行循环（Foreach）步骤遍历输入中的某个数组类型参数，对于数组中的每个元素并行执行其串行步骤。并行循环步骤类似于编程语言中的 foreach，不同之处是这里的迭代是并行执行的。并行循环...
客户案例
而 OceanBase 提供的丰富的分区方式及 OLAP 能力有效地解决了不同场景下，业务指标的构建问题，这对于我们业务开发工作者来说可以更多的关注我需要什么样的指标，而不用考虑如何从存储系统中得到这些数据。大数据处理能力：随着阿里巴巴...
PolarDB MySQL版8.0.1版本发布日志
在监控数据库性能时，忽略系统运维人员的访问对 slow_queries 状态指标的影响。2024-04-30 问题修复 修复开启RECYCLE BIN功能回收OSS IBD表时，重启集群后回收站中表的OSS路径映射错误的问题。修复启动NewHA vector voting disk时，只读...
实践教程概览
创建以CPFS为共享存储的E-HPC集群 CPFS是一种高性能并行文件存储系统，以CPFS为共享存储的E-HPC集群适合动画渲染、生命科学、气象预报、能源勘探等需要超高吞吐的应用场景。本教程介绍如何创建以CPFS为共享存储的高性能计算集群，为您提供...
读写访问文件类问题
当您访问文件系统中的文件时，文件系统中的文件会受到某些限制影响，导致文件操作错误、挂载点无响应或访问无响应等。您可以在本文中查找一些常见文件操作错误、文件属主、数据不同步或访问无响应的解决方案。交叉挂载兼容性问题 Linux挂载...
更换操作系统相关问题
更换操作系统与重新初始化系统盘有什么差异？主要差异如下表所示：差异项 重新初始化系统盘 更换系统盘（操作系统）功能差异 初始化会还原云服务器的初始化状态，初始化前后操作系统不变。将现有的操作系统类型切换为其他类型的操作系统。...
入门概述
文件系统常用操作 如果您想…您可以参考…创建文件系统 创建文件系统 添加挂载点 管理挂载点 创建权限组和规则 管理权限组 挂载文件系统 ECS实例挂载文件系统 容器挂载文件系统 函数计算挂载文件系统 跨网络或账户访问文件系统 本地数据...
PolarDB处理TPC-H查询的挑战和机遇
Detecting Correlation cardinality estimation存在以下问题：如何捕获2列之间的相关性->目标列是什么？如何量化衡量2列间的相关性->如何描述相关性？针对第一个问题，一般会采用查询反馈的方案。也就是在初始时，并不假定其相关性，然后在...
计划内事件常见问题
为提供更优质的体验，持续提升产品性能和稳定性，阿里云会不定期地发起迁移任务，系统会将您的某些实例迁移至新的服务器节点以完成软硬件和网络的换代升级。本文列举实例迁移过程中的常见问题供您参考。实例迁移事件的影响 时间点 说明 ...
计划内事件常见问题
为提供更优质的体验，持续提升产品性能和稳定性，阿里云会不定期地发起迁移任务，系统会将您的某些实例迁移至新的服务器节点以完成软硬件和网络的换代升级。本文列举实例迁移过程中的常见问题供您参考。实例迁移事件的影响 时间点 说明 ...
创建任务工作负载Job
超时时间 即设置 activeDeadlineSeconds 的值，指定Job可运行的时间期限，超过时间还未结束，系统将会尝试进行终止。重试次数 即设置 backoffLimit 的值，指定Job失败后进行重试的次数。默认是6次，每次失败后重试会有延迟时间，该时间是...
挂载访问FAQ
目前仅支持Linux操作系统挂载NFS文件系统，Windows操作系统挂载SMB文件系统、Windows操作系统挂载NFS文件系统及Linux操作系统挂载SMB文件系统场景，请您登录ECS实例执行命令挂载。更多信息，请参见 Windows系统挂载SMB文件系统、Windows...
配置备份计划
通过配置备份计划，您可以设置备份的库或表、备份频率、存储方式、备份周期等关键信息，系统将根据设置的备份策略自动对数据库进行定期备份。前提条件 已创建备份计划。具体操作，请参见 创建备份计划。准备数据库账号，并确认待备份数据库...
混合负载HTAP的实践和优化
OLTP系统查询慢，存在分析型场景和瓶颈的客户；读写分离需求。PolarDB-X HTAP架构更多信息，请参见 混合负载HTAP。HTAP集群 您购买的 PolarDB-X 主实例，主要面向在线通用业务场景。如果业务针对同一份数据有分析、专注离线拖数、跑批等...
PAI灵骏智算服务概述
为什么选择PAI灵骏 选择 PAI灵骏，您可以轻松构建具有以下优势的智能集群：算力即服务。提供高性能、高弹性异构算力服务，支持万张GPU规模的资源弹性，单集群网络容量高达4Pbps，时延低至2微秒。高资源效率。资源利用率提升3倍，并行计算...
其他问题
目前仅支持Linux操作系统挂载NFS文件系统，Windows操作系统挂载SMB文件系统、Windows操作系统挂载NFS文件系统及Linux操作系统挂载SMB文件系统场景，请您登录ECS实例执行命令挂载。更多信息，请参见 Windows系统挂载SMB协议文件系统、...
概述
默认情况下，本数据库允许在索引创建时并行地进行读（SELECT 命令），但写（INSERT、UPDATE 和 DELETE）则会被阻塞直到索引创建完成。在生产环境中这通常是不可接受的。一个索引被创建后，系统必须保持它与表同步。这增加了数据操作的负担...
执行补数据并查看补数据实例（旧版）
例如，业务日期为 1月11日~1月13日，并行数为2组，则会生成两个补数据实例（其中一个补数据实例会包含两个业务日期，这两个业务日期对应的任务串行执行），两个补数据实例并行执行。补数据告警 设置此次补数据操作是否会触发告警。是：满足...
基本概念
VM Virtual Machine，虚拟机，指通过软件模拟的具有完整硬件系统功能的、运行在一个完全隔离环境中的完整计算机系统。云边一体 云边一体，又叫云边协同，其中“云”指的是中心云计算，“边”指的是边缘云计算。云边一体主要是针对提供用户...
什么是图计算服务
Graph Compute 与其他开源图计算相比的优势 问题一：查询性能为什么能比开源好很多 图计算服务内核引擎iGraph在分区并发查询的基础上，通过自研的协程异步框架并发召回，将同步串行磁盘访问改造为异步并行，极大的提高了查询性能；...
创建任务工作负载Job
2+1 固定结束次数的并行Job 多个Pod同时处理工作队列 依次创建多个Pod运行直至Completions个成功结束 2+2+并行Job 多个Pod同时处理工作队列 创建一个或多个Pod直至有一个成功结束 1 2+操作步骤 说明 本例中创建的任务属于固定结束次数的...
CREATE INDEX
由于一个有序索引能前向或者反向扫描，通常创建一个单列 DESC 索引没什么用处—一个常规索引已经提供了排序顺序。这些选项的价值是可以创建多列索引，让它的排序顺序匹配有混合排序要求的查询，例如 SELECT.ORDER BY x ASC,y DESC。如果你...
南京银行：借助云效完成敏捷转身，实现新金融DevOps...
通过架构变革、并行开发、多分支管理、持续集成等方式，成功实现敏捷转身。业务特征及痛点 南京银行科技有运维中心、研发中心和科技管理部，正式的员工有200多人，外包合作厂商有600多人，在线运营的运营系统有300多个。有人说银行不就是有...
使用实例时镜像相关问题
在使用ECS实例过程中，可能会遇到一些与镜像有关的问题或咨询，比如实例启动慢、系统负载高、如何编译内核等。本文介绍在使用ECS实例过程中遇到的镜像相关问题及解决方案。Windows镜像问题 如何手动更新Windows实例的virtio驱动？Windows ...
什么是GPU云服务器
其作为阿里云弹性计算家族的一员，结合了GPU计算力与CPU计算力，满足您在人工智能、高性能计算、专业图形图像处理等场景中的需求，例如，在并行运算方面，使用GPU云服务器可显著提高计算效率。为什么选择GPU云服务器 阿里云GPU云服务器是...
发布单对接说明
为什么同一应用的发布单不支持并行 弹性场景 在 SAE 应用的发布、扩缩容场景下需要禁用弹性规则，否则会出现一系列不可预期的问题。如果此时有多个发布单并行，就会出现A发布单禁用了弹性，在A发布单未完结之前，B发布单又启动了弹性的情况...
离线异步任务场景
本文介绍什么是GPU离线异步任务场景和如何使用函数计算GPU异步调用、异步有状态调用服务离线AI推理、离线AI训练、离线GPU加速场景，以及如何基于非Web Server模式的Custom Container满足离线GPU应用场景。场景介绍 在离线异步应用场景中，...
云效常见问题
小团队可以选择自由模式，中等规模团队并行开发时采用分支开发模式，中大规模团队代码自动化程度较高的可以选择git-flow模式；多种开发模式说明 7.创建应用时，归档的镜像仓库名称填写错误，如何修改？可以在代码根目录下的应用名.release...
基本概念
FPGA云服务器概念 名词 说明 相关文档 FPGA 现场可编程门阵列（Field Programmable Gate Array），具有硬件并行加速能力和可编程特性。什么是FPGA云服务器 FaaS FPGA即服务（FPGA as a Service），阿里云在云端提供的统一硬件平台与中间件...
利用定时开关机节省成本
什么是OOS 系统运维管理 OOS（CloudOps Orchestration Service），简称OOS，是全面、免费的云上自动化运维平台，提供运维任务的管理和执行。典型使用场景包括：事件驱动运维，批量操作运维，定时运维任务，跨地域运维等，OOS为重要运维场景...
添加访问地址
原理介绍 OceanBase 数据库在数据库和应用程序之间提供网络代理服务，您可以根据业务需求在代理层添加只读地址和读写分离地址，充分利用 OceanBase 数据库的多副本能力，提升业务系统的执行效率。OceanBase 数据库的读写分离是指将数据库的...
什么是实时数仓Hologres
本文为您介绍什么是实时数仓Hologres以及Hologres的功能。Hologres是阿里巴巴自主研发的一站式实时数仓引擎（Real-Time Data Warehouse），支持海量数据实时写入、实时更新、实时加工、实时分析，支持标准SQL（兼容PostgreSQL协议和语法，...
数据迁移概述
将数据并行从OSS导入到AnalyticDB PostgreSQL 将数据并行导出到OSS 阿里云Jindo DistCp 阿里云Jindo DistCp（分布式文件拷贝工具）用于大规模集群内部或集群之间拷贝文件。Jindo DistCp使用MapReduce实现文件分发，错误处理和恢复，把文件...
- 产品推荐
- 这些文档可能帮助您