实时同步任务告警设置最佳实践
其基本原理为数据处理时间与数据在源端生产时间差。此告警指标为核心告警指标，建议所有重要实时同步任务（Kafka源端实时同步任务建议使用消息堆积量指标监控）均配置。告警阈值根据业务实际需要设置，建议告警阈值为分钟级别，防止由于...
使用SSL加密465端口发送邮件
背景信息 基本原理 使用SSL加密端口发送邮件的基本原理与本地主机使用客户端（例如Outlook等）连接邮箱服务器发送邮件一致。即主机通过连接外部邮箱的发邮件服务器，并通过程序配置的账号密码鉴权验证来发送邮件，而不是服务器本身来发送...
Broker Load
本文为您介绍Broker Load导入的基本原理、基本操作、系统配置以及最佳实践。背景信息 因为Doris表里的数据是有序的，所以Broker Load在导入数据时需要利用Doris集群资源对数据进行排序，相对于Spark Load来完成海量历史数据迁移，Broker ...
0007-00000201
关于上传回调的基本原理和使用方法，请参见 上传回调 与 Callback。关于上传回调中的常见错误及错误排查，请参见 上传回调错误及排除。关于基于Post Policy的使用规则在服务端通过各语言SDK代码完成签名，并且设置上传回调，然后通过表单直...
0007-00000202
关于上传回调的基本原理和使用方法，请参见 上传回调 与 Callback。关于上传回调中的常见错误及错误排查，请参见 上传回调错误及排除。关于基于Post Policy的使用规则在服务端通过各语言SDK代码完成签名，并且设置上传回调，然后通过表单直...
调优原理
基本原理 PolarDB-X 1.0 是一个支持计算存储分离架构的数据库产品。当一条查询SQL发往 PolarDB-X 1.0 节点时（此SQL也称为逻辑SQL），PolarDB-X 1.0 会将其分成可下推的、和不可下推的两部分，可下推的部分也被称为物理SQL。原则上，...
0007-00000017
相关文档 关于上传回调的基本原理和使用方法，请参见 上传回调 与 Callback。关于上传回调中的常见错误及错误排查，请参见 上传回调错误及排除。关于基于Post Policy的使用规则在服务端通过各语言SDK代码完成签名，并且设置上传回调，然后...
0007-00000018
相关文档 关于上传回调的基本原理和使用方法，请参见 上传回调 与 Callback。关于上传回调中的常见错误及错误排查，请参见 上传回调错误及排除。关于基于Post Policy的使用规则在服务端通过各语言SDK代码完成签名，并且设置上传回调，然后...
流水线上的部署任务（新版）
“应用”和“环境”的概念见 基本概念与原理。环境的配置，包括环境关联到哪些机器、部署时使用的脚本等等。详见部属配置系列文档，比如 部署配置：通过脚本部署。环境的配置是从应用入口进入的，进入后选择“环境”菜单项：部署任务的运行...
0007-00000301
关于上传回调的基本原理和使用方法，请参见 上传回调 与 Callback。关于上传回调中的常见错误及错误排查，请参见 上传回调错误及排除。关于基于Post Policy的使用规则在服务端通过各语言SDK代码完成签名，并且设置上传回调，然后通过表单直...
0007-00000302
关于上传回调的基本原理和使用方法，请参见 上传回调 与 Callback。关于上传回调中的常见错误及错误排查，请参见 上传回调错误及排除。关于基于Post Policy的使用规则在服务端通过各语言SDK代码完成签名，并且设置上传回调，然后通过表单直...
0007-00000303
关于上传回调的基本原理和使用方法，请参见 上传回调 与 Callback。关于上传回调中的常见错误及错误排查，请参见 上传回调错误及排除。关于基于Post Policy的使用规则在服务端通过各语言SDK代码完成签名，并且设置上传回调，然后通过表单直...
流水线上的部署任务
“应用”和“环境”的概念见 基本概念与原理。环境的配置，包括环境关联到哪些机器、部署时使用的脚本等等。详见部属配置系列文档，比如 部署配置：通过脚本部署。环境的配置是从应用入口进入的，进入后选择“环境”菜单项：
专家成长计划技术培训课程
1、ECS和磁盘使用基本介绍、Linux启动问题处理、Linux登录问题处理、Linux性能问题排查、windows启动问题处理、windows性能问题排查 2、负载均衡SLB原理介绍、无法访问SLB问题排查、健康检查原理和健康检查异常时处理思路、转发策略&多...
0007-00000004
相关文档 关于上传回调的基本原理和使用方法，请参见 上传回调 与 Callback。关于上传回调中的常见错误及错误排查，请参见 上传回调错误及排除。关于基于Post Policy的使用规则在服务端通过各语言SDK代码完成签名，并且设置上传回调，然后...
专家成长计划服务内容说明
云存储问题处理详解专题 8 全面介绍磁盘的基础知识，Linux和Windows操作系统的磁盘分区和文件系统结构，以及关键扇区的含义和作用，查看和编译磁盘结构的主要工具，例如Linux系统下的fdisk，并重点针对常见的磁盘故障进行了场景化的分析，...
消息队列 RocketMQ 客户端流控设计
限流方式有两种：针对消息订阅者的并发流控 针对消息订阅者的消费延时流控 针对消息订阅者的消费延时流控的基本原理是，每次消费时在客户端增加一个延时来控制消费速度，此时理论上消费并发最快速度为：MaxRate=1/ConsumInterval*...
功能特性
本文介绍使用Spark SelectDB Connector同步数据至云数据库 SelectDB 版的基本原理和使用方式。通过Spark导入数据 通过DataX导入数据 本文介绍使用DataX SelectDB Writer同步数据至云数据库 SelectDB 版。通过DataX导入数据 OSS Load 云数据...
HTAP中的行列混存查询优化
查询优化的作用及基本原理 在数据库处理查询语句的过程中，优化器接收用户输入的查询语句并进行一系列的等价变换后，通过查询中的基数与代价估计，从等价的执行计划中选取最优计划执行。由于在执行查询时使用的执行计划好坏对性能的影响...
概念
分类 名称 通用概念 FC函数、版本、别名、层、触发器、运行时、自定义域名 计费相关 按量付费、资源包 实例相关 弹性实例、GPU实例、冷启动、按量模式、预留模式 函数调用 同步调用、异步调用、调用分析 FC函数 函数计算 的资源调度与运行...
弹性并行查询（Elastic Parallel Query）常见问题
并行查询的基本原理是有效利用多核CPU并发处理来加速查询，开启并行查询会占用更多的计算资源，并行度设置的过大可能导致集群负载偏高，一般建议不超过CPU核数的1/4。另外并行度超过CPU的核数是没有意义的，当集群有多个RO节点时，可以在8....
基本概念
基本概念总览 分类 名称 通用概念 服务、FC函数、请求处理程序、版本、别名、标签、层、触发器、运行时、自定义域名 计费相关 按量付费、资源包 实例相关 弹性实例、GPU实例、冷启动、按量模式、预留模式、单实例并发数 函数调用 同步调用...
列存索引如何实现高效数据过滤
它能够减少为了处理查询而必须扫描的数据量，因为它只需要处理与查询范围相关的数据块。另外，minmax索引有助于减少存储索引所需的空间，因为它只需要存储每个块的最小值和最大值，而不是所有数据的索引。Bloom filter Bloom filter是一种...
Stream Load
本文为您介绍Stream Load导入的基本原理、基本操作、系统配置以及最佳实践。适用场景 Stream Load主要适用于导入本地文件或通过程序导入数据流中的数据。说明 本文部分内容来源于Apache Doris，详情请参见 Stream load。基本原理 下面为您...
导入概述
基本原理 导入执行流程如下图所示。一个导入作业主要分为以下五个阶段。阶段 描述 PENDING 非必须。该阶段是指用户提交导入作业后，等待FE调度执行。ETL 非必须。该阶段执行数据的预处理，包括清洗、分区、排序和聚合等。LOADING 该阶段先...
什么是物联网平台
工作原理 物联网平台与设备、服务端、客户端的消息通信流程如下。使用物联网平台实现设备完整的通信链接，需要您自行完成设备端的设备开发、云端服务器的开发（云端SDK的配置）、数据库的创建、手机App的开发。在设备和服务器开发中，您需...
一键MaxCompute Merge任务节点问题排查方案
Merge任务说明 基本原理 一键实时同步MaxCompute运行时会先将源表存量数据通过离线同步至Base表中（目标表），同时启动实时同步任务读取源库增量变更日志，写到增量日志表中（log表）。其后的数据处理逻辑：在T+1日的凌晨，启动Merge任务...
导入概述
基本原理 导入执行流程如下图所示。一个导入作业主要分为以下五个阶段。阶段 描述 PENDING 非必须。该阶段是指用户提交导入作业后，等待FE调度执行。Broker Load和Spark Load包括该步骤。ETL 非必须。该阶段执行数据的预处理，包括清洗、...
Spark Load
本文为您介绍Spark Load导入的基本概念、基本原理、使用示例、最佳实践以及常见问题。背景信息 Spark Load是一种异步导入方式，您需要通过MySQL协议创建Spark类型导入任务，并可以通过 SHOW LOAD 命令查看导入结果。说明 本文图片和部分...
写入或更新调优指南
基本原理 在了解写入或更新的调优手段前，先了解基本的原理，以帮助业务在使用过程中，对不同写入模式的写入性能有着更加合理的预估。不同表存储格式的写入或更新性能。全列写入或更新时，性能排序如下。行存>列存>行列共存。部分列写入或...
工作原理
日志服务提供定时SQL功能，用于定时分析数据、存储聚合数据、投影与过滤数据。本文介绍定时SQL功能的背景信息、功能简介、基本概念、调度与执行场景、使用建议等信息。背景信息 基于时间的数据（日志、指标）在日积月累后的数量是惊人的。...
ECS实例数据传输的实现方式
本文通过介绍文件传输的基本原理，以及常用的NETCAT、SCP和Rsync文件传输工具，您可以根据实际需要选择合适的文件传输工具。文件传输原理 文件传输是信息传输的一种形式，它是在数据源和数据宿之间传送文件数据的过程，也称为文件数据通信...
工作原理
本文介绍智能巡检的背景信息、工作原理、功能特性、基本概念、调度与执行场景和使用建议。背景信息 基于时间的数据（例如日志、指标）日积月累后会积累大量的数据。例如，某个服务每天产生1000万条数据，则一年大约为36亿条数据。对于这些...
Logtail基本问题
本文介绍Logtail的基本问题。什么是Logtail？Logtail是日志服务提供的一种便于日志接入的日志采集客户端。在您的机器上安装Logtail后，通过Logtail来监听指定的日志文件并自动将新写入到文件的日志上传到您所指定的Logstore。Logtail是否...
PolarDB PostgreSQL版架构介绍
数据一致性 传统数据库的内存状态同步 传统share nothing的数据库，主节点和只读节点都有各自的内存和存储，只需要从主节点复制WAL日志到只读节点，并在只读节点上依次回放日志即可，这也是复制状态机的基本原理。基于Shared-Storage的内存...
Prompt最佳实践
无具体情景 有具体情景 请阐述量子物理的基本原理及其在解释微观粒子行为中的核心作用，并举例说明量子力学中体现其非经典性的奇特现象。在高年级物理课程中，学生们正在探索微观世界的行为规律。现在，请详细解释一下量子物理这一理论是...
Routine Load
基本原理 Client向FE提交一个Routine Load作业的原理如下：+-+|Client|+-+-+|+-+|FE|+-v-+|Routine Load Job|+-+-+-+-+|+-v-+-v-+-v-+|task|task|task|+-+-+-+-+-+-+|+-+|v v v+-+-+-+-+-+|BE|BE|BE|+-+-+-+FE通过JobScheduler将一个导入...
文档修订记录
同时可以通过Query洞察快速判断当前Query是否产生了DDL冲突，以及表锁情况，辅助业务进一步排查问题和处理问题。Query洞察 2024.01.09 新增Hologres服务关联角色 新说明 服务关联角色是一种可信实体为阿里云服务的RAM角色，旨在解决跨...
部分克隆（Partial clone）介绍
下面，我们用git clone的方式来分别介绍blobless克隆和treeless克隆的使用以及基本原理。Blobless克隆 在克隆时使用-filter=blob:none 选项，即可开启blobless模式克隆。在这种情况下，仓库中历史 commit、tree 会被下载，blob 则不会。让...
通过对接外部LDAP登录云原生AI控制台
说明 如果不能成功登录，请参见 常见问题 排查处理。方法二：LDAP用户通过RAM对接支持SAML协议的IdP登录AI运维控制台 阿里云与企业进行用户SSO时，阿里云是服务提供商（SP），而企业自有的身份管理系统则是身份提供商（IdP）。通过用户SSO...
- 产品推荐
- 这些文档可能帮助您