数据脱敏
原理介绍 执行流程 项目管理员在 安全规范>脱敏算法 中查看内置脱敏算法并测试脱敏效果。项目管理员在 ODC 目标项目>敏感数据 中手动添加敏感列；如果通过自动扫描方式添加敏感列，需要先创建识别规则。用户在执行查看表数据、SQL 窗口查询...
使用Hologres和大模型免费定制专属聊天机器人
问题三：优化后的大模型可以很好地将 列存 理解为 列式存储优化，并完整总结JSONB列存原理。Human:Hologres中的列存jsonb是什么？Chatbot:Hologres中的列存JSONB是指将JSONB类型的数据按列式存储，即将JSONB中的每个键值对拆分成单独的列...
Bucket Shuffle Join
工作原理 SelectDB支持的常规分布式Join方式包括Shuffle Join和Broadcast Join。这两种Join都会导致相当大的网络开销。例如，当前存在A表与B表的Join查询，它的Join方式为Hash Join，不同Join类型的开销如下：Broadcast Join：如果根据数据...
API概览
ListWorkspaces 列出工作空间 列出符合条件的工作空间。GetWorkspace 查询工作空间详情 查询工作空间的详细信息，包括状态，描述，作业生命周期等。应用 应用 CreateApp 创建应用 工作空间中创建应用。TagApp 应用版本打标 对应用的版本...
什么是QUIC协议
工作原理 在阿里云DCDN中使用QUIC的工作原理如下图所示。对客户端的要求 QUIC协议对客户端的要求如下：如果您使用Chrome浏览器，当前阿里云DCDN已经支持HTTP/3的标准协议，Chrome支持直接对阿里云DCDN发起QUIC请求。如果您使用自研App，则...
什么是QUIC协议
工作原理 在阿里云CDN中使用QUIC的工作原理如下图所示。对客户端的要求 QUIC协议对客户端的要求如下：如果您使用Chrome浏览器，当前阿里云CDN已经支持HTTP/3的标准协议，Chrome支持直接对阿里云CDN发起QUIC请求。如果您使用自研App，则App...
活动工作表
本文介绍使用表格文档时如何获取可编辑区域对象、保护工作表、设置工作表是否可见等。获取活动工作表对象 获取活动工作簿中的活动工作表。语法 表达式.ActiveWorkbook.ActiveSheet 表达式：文档类型应用对象 示例 async function example()...
补丁管理原理介绍
该文档会详细介绍补丁管理的工作原理，以及如何扫描系统上的补丁状态，安装缺失的补丁等。Linux 补丁管理支持的Linux系统包括 CentOS/Alibaba Cloud Linux/Debian/Ubuntu 等，不同OS使用不同的包管理工具，具体如下，不同包管理工具扫描、...
分布式工作流Argo集群概述
分布式工作流Argo集群（简称 工作流集群）采用无服务器模式，使用阿里云弹性容器实例ECI运行工作流，通过优化Kubernetes集群参数，实现大规模工作流的高效弹性调度，同时配合抢占式ECI实例，优化成本。本文介绍 工作流集群 的控制台操作...
概述
工作原理 在 PolarDB 控制台上设置完脱敏规则后，控制台会将规则写入至Proxy中。当应用程序通过规则中指定的账号连接至数据库并查询规则中指定的列时，Proxy会先将数据库返回的数据脱敏转换，再将脱敏后的数据返回给客户端。上图的脱敏规则...
通过文件管理优化性能
重要 Z-Ordering只对已经收集了统计信息的列生效，在上一节我们介绍过，Delta Engine默认仅为前32列自动生成统计信息，意味着Z-Ordering也只能被用于前32列，如果您查询的列索引大于32，可以将该列索引调到32以内。Z-Ordering不是幂等的，...
使用跨域流量分析
跨域流量分析功能能够以一元组（本端IP）、二元组（本端IP、对端IP）...相关文档 API GetTransitRouterFlowTopN-获取跨域流量详情数据排名 跨域场景的更多信息 转发路由器工作原理 跨地域连接 使用云企业网实现跨地域跨账号VPC互通（企业版）
工作原理
ECI类型的伸缩组与ECS类型的伸缩组的工作原理一致，本文以伸缩组内的ECS实例为例，介绍弹性伸缩的工作原理。关于ECS实例和ECI实例的更多信息，请参见 什么是云服务器ECS 和 什么是弹性容器实例。工作流程 弹性伸缩增加ECS实例的工作流程...
读取优化
该机制基本工作原理为：客户端发起一个本地读，一旦一段时间之后还没有返回，客户端将会向其他DataNode发送相同数据的请求。哪一个请求先返回，另一个就会被丢弃。关闭swap区（已经默认关闭）swap是当物理内存不足时，拿出部分的硬盘空间...
使用须知
大多数场景都可以找到其他的业务字段来协助散列。考虑到其严重的副作用，我们不建议使用这个特性。副作用：写瓶颈：一般全表只有buckets个region用于承担写。当业务体量不断增长时，因为无法调整bucket数量，不能有更多的region帮助分担写...
列存索引如何实现高效数据过滤
其中，RANGE和LIST分区会把数据表分成若干个区间或列表，HASH分区会将数据散列到不同的分区。在使用分区剪枝技术时，需要使用符合分区条件的查询语句，并将分区键作为查询条件进行查询。例如，假设有一个订单表orders，根据订单日期分为12...
ANALYZE和AUTO ANALYZE
Auto Analyze工作原理 当开始Auto Analyze后，系统后台会定期巡检是否有表需要执行Analyze。普通表（内部表，包括单表和分区表）每隔1分钟巡检是否有表的最新动作（主要是INSERT、UPDATE、DELETE等DML操作，可能改变了数据量）。满足以下...
作业停止
在 Flink全托管 页签，单击对应工作空间 操作 列下的 控制台。在 作业运维 页面，单击目标作业 操作 列下的 停止。更多设置中的选项说明如下：停止前创建一次快照：如果您需要在停止前创建一次快照，则需要先单击 更多设置，然后选中 停止...
列存索引（IMCI）发布说明
技术原理 列存索引特性在 PolarDB MySQL版 中的功能架构图如下：从以上架构图可以看到，PolarDB MySQL版 从存储引擎、执行算子、优化器三个层面设计了列存索引的特性：存储引擎：支持实时事务级别一致性的行列混合存储；执行算子：面向列存...
GBDT二分类
GBDT（Gradient Boosting Decision Tree）二分类算法的原理是设置阈值，如果特征值大于阈值，则为正例，反之为负例。组件配置 您可以使用以下任意一种方式，配置GBDT二分类组件参数。方式一：可视化方式 在 Designer 工作流页面配置组件...
swing训练
swing是一种Item召回算法，您可以使用swing训练组件基于User-Item-User原理衡量Item的相似性。本文为您介绍swing训练的参数配置。使用限制 支持运行的计算资源为MaxCompute和Flink。组件配置 您可以通过以下任意一种方式，配置swing训练...
概述
技术原理 列存索引特性在 PolarDB MySQL版 中的功能架构图如下：从以上架构图可以看到，PolarDB MySQL版 从存储引擎、执行算子、优化器三个层面设计了列存索引的特性：存储引擎：支持实时事务级别一致性的行列混合存储；执行算子：面向列存...
HTAP中的行列混存查询优化
本文介绍了查询优化的作用及基本原理，以及列存索引优化器Join Reorder的实现原理。查询优化的作用及基本原理 在数据库处理查询语句的过程中，优化器接收用户输入的查询语句并进行一系列的等价变换后，通过查询中的基数与代价估计，从等价...
K近邻
K近邻算法进行分类的原理是针对预测表的每行数据，从训练表中选择与其距离最近的K条记录，将这K条记录中类别数量最多的类，作为该行的类别。组件配置 您可以使用以下任意一种方式，配置K近邻组件参数。方式一：可视化方式 在 Designer 工作...
双样本T检验
双样本T检验基于统计学原理用来检验两个样本的均值是否有显著差异。本文为您介绍 Designer 提供的双样本T检验的参数配置和使用示例。组件配置 您可以使用以下任意一种方式，配置双样本T检验组件参数。方式一：可视化方式 在 Designer 工作...
线性支持向量机
背景信息 本文中的线性支持向量机算法不通过核函数方式实现，具体实现理论请参见 算法原理 中的Trust Region Method for L2-SVM部分。使用限制 线性支持向量机算法组件仅支持二分类场景。组件配置 您可以使用以下任意一种方式，配置线性...
列式JSONB
列式JSONB原理介绍 如下图所示开启JSONB列式存储优化后，系统会在底层自动将JSONB的列转换为强Schema的列式存储，查询JSONB中某一个Value时就可以直接命中指定列，从而提升查询性能。同时因为JSONB中的Value是按列式存储的，在存储层可以...
管理工作流
工作流状态 您可以在目标工作流的 运行状态 列，查看该工作流运行的所有工作流实例的运行状态。例如，一个工作流每天运行一次，运行5天，则产生5条工作流实例，运行状态 列为这5条工作流实例的运行状况数量统计。状态 说明 紫色 排队中 ...
列存索引行列融合基础组件介绍
本文介绍了列存索引行列融合基础组件（优化器代价模型、执行器多引擎访问、存储引擎日志回放和事务处理）以及处理长尾请求问题的HybridIndexSearch算子的相关内容。背景信息 事务处理（OLTP）和分析处理（OLAP）混合工作负载在当前的业务...
数据写入、更新、点查场景压测最佳实践
特殊配置说明：为便于兼容各测试场景、高效推进测试与验证，测试工具会在配置的表列数基础上，额外增加以下列：主键列 id：作为表的主键和Distribution Key，在测试过程中从1开始逐条递增。时间列 ts：作为表的Segment Key，在测试过程中...
DataX Writer
在DataWorks的 工作空间列表 页面，单击目标工作空间操作列的 数据集成。在左侧导航栏，单击 数据源。单击右上角的 新增数据源。在 新增数据源 对话框中，新增StarRocks类型的数据源。创建离线同步任务流程。新建业务流程，详情请参见 创建...
标签传播分类
标签传播分类为半监督的分类算法，原理为用已标记节点的标签信息去预测未标记节点的标签信息。标签传播分类组件能够输出图中所有节点对应的标签及其权重占比。算法说明 在算法执行过程中，每个节点的标签按相似度传播给相邻节点，在节点...
管理资源配额
在 资源配额 页面中，单击资源配额 操作 列下的 新增子级资源配额，为没有绑定工作空间的资源配额新增子级资源配额，将资源按照树形结构进行划分。您可以将子级资源配额绑定到工作空间中，在工作空间中使用子级资源配额来提交训练任务。
管理域名
选择目标工作空间 操作 列下的 更多>管理域名。单击 新增域名，填写 域名 和 IP 后，单击 保存。请保证域名和IP均填写且合法。单击 确定。说明 新增后，需要重启作业才会生效。修改 域名 进入域名管理入口。登录 实时计算控制台，单击 ...
列存索引技术架构介绍
同时，结合 PolarDB 基于共享存储一写多读的架构特征，其包含如下几个关键的技术创新点：存储引擎（InnoDB）支持存储列式索引（Columnar Index），用户可以通过DDL语句为一张表中的全部列或者部分列创建列索引，列索引采用列压缩存储，其...
创建Grafana工作区
您可以在Grafana控制台创建工作区，接入不同版本的Grafana，实现对云资源指标数据的实时监控，便于及时发现和解决问题，提高运维团队的工作效率。创建工作区 登录 可观测可视化 Grafana 版 控制台。在 概览 页面，单击 创建工作区。在工作...
创建Grafana工作区
您可以在Grafana控制台创建工作区，接入不同版本的Grafana，实现对云资源指标数据的实时监控，便于及时发现和解决问题，提高运维团队的工作效率。创建工作区 登录 ARMS控制台，在左侧导航栏选择 Grafana服务>工作区管理。在 概览 页面，...
管理作业版本
在 Flink全托管 页签，单击目标工作空间 操作 列下的 控制台。在左侧导航栏，单击 SQL开发。双击目标作业名称。在页面右侧，单击 版本信息。在目标版本号对应的 操作 列，单击 对比。在左侧 选择版本 中选择目标对比版本。回滚作业版本 您...
DNS原理和配置说明
本文介绍ACS集群中的DNS服务原理，并针对不同场景介绍如何配置DNS策略。背景信息 ACS集群默认不会部署DNS服务，您需要在创建集群时选中CoreDNS。通过kube-dns的服务名暴露DNS服务。您可以执行以下命令查看kube-dns的服务详情。关于创建集群...
关键词抽取
方式一：可视化方式 在 Designer 工作流页面配置组件参数。页签 参数 描述 字段设置 标识文章id的列名 输入标识文章ID的列名。标识文章内容分完词结果 输入标识文章内容分完词结果名称。参数设置 输出前多少个关键词 整数，默认值为5。窗口...
- 产品推荐
- 这些文档可能帮助您