自定义算子管理
1 什么是自定义算子 自定义算子是用户自己开发的算法，例如某个预标注算法，通过打包成代码镜像的方式注册到数据管理平台上，可以在数据处理任务中使用。说明 此处定义的算子可在后续数据处理任务时调用运行，包括“数据标准化算子”、...
2021年7月13日 V3.12.0产品更新
2021年7月13日 V3.12.0产品更新，核心内容包括评分大盘、通话静音检测算子等功能优化。功能模块 亮点解释 优化评分大盘 将离线大盘拆分成离线语音和离线文本大盘，精细化统计热线、在线场景的客服评分情况，并支持分析数据导出。优化在线...
概述
什么是算子 算子是一种独立、可复用的逻辑表达，能够通过组合的方式实现更高维度的业务逻辑。行为 和 输入输出 是所有算子都有的属性，描述了算子可以做什么及相应的接口。对于不可解释算子（如图像识别），仅需定义行为和输入输出即可；...
使用执行计划分析查询
执行计划树分为两层：第一层是Stage层，第二层是算子（Operator）层。本文介绍如何使用Stage层和算子层执行计划树来分析查询。Stage层执行计划树 Stage层执行计划树由多个Stage节点组成，数据流向自下而上，先由具有扫描算子的Stage进行...
查询计划概述
时序引擎特有扩展算子 TSDBDataScanRel算子 面向Lindorm时序引擎实现最基础的数据扫描算子，由逻辑算子LogicalTableScan转换而来，表示在某个具体的指标（metric）上执行的Scan操作。该算子在展示时会包含以下内容：filter：扫描时同时自带...
模型画布简介
序号 区域 说明 ① 资源区 可拖拽数据表、本地数据、系统算子、脚本算子资源到画布的执行区组装模型。说明 系统算子是指将业务人员经常使用的计算逻辑进行组件封装，作为模型中心预置的算子。系统算子使用具体操作，请参见 算子手册。② ...
多表合并
本文介绍多表合并算子的使用方法及注意事项。用途 多表合并算子可以将多张数据表按照设置的对齐字段进行数据合并。多表合并 算子是 两表并集 算子的高级版本，满足多张数据表合并的需求。适用场景 计算链路 计算引擎 是否支持 离线 ...
一键诊断
异常算子检测 算子详细信息 计算层检测功能，可以帮助您快速查找异常算子（例如Join算子、Aggregation算子、Sort算子、Window算子），并按照当前检测指标降序排列。您可以根据内存消耗、CPU消耗、输入输出数据量等字段对异常算子进行分析，...
ePQ支持查看与分析执行计划
算子级别的统计信息如下：算子执行时间：取执行该算子的所有进程的最长执行时间。算子扫描总行数：取执行该算子的所有进程的扫描行数累加和。算子执行次数（循环）：取执行该算子的所有进程的循环次数累加和。算子的资源使用信息：取执行该...
查询流程和执行计划
物理执行计划由Stage和算子（Operator）组成，物理执行计划中的算子（Operator）会对数据按照一定规则进行处理。Executor节点将数据处理的最终结果返回到客户端，或者写入 AnalyticDB MySQL版 集群的内部表以及其它外部存储系统（如OSS）中...
多表连接
本文介绍多表连接算子的使用方法及注意事项。用途 多表连接算子可以将多张数据表按照设置的连接条件进行连接。多表连接 算子是 两表交集 算子的高级版本，满足多张数据表之间多种连接类型的需求。适用场景 计算链路 计算引擎 是否支持 离线...
子账号管理
子账号角色 角色名称 描述 译员 译员角色可以被分配翻译任务、查看语料/术语 语料经历 可以进行语料、术语、智能模型的管理和维护 项目管理员 可以创建项目，并对项目进行管理、查看语料/术语、查看子账号 账号管理员 可以查看/管理团队、...
标签对象
用途 标签对象 算子用于从和读数据表算子类似可以作为下游节点输入数据的来源，区别是标签算子的数据表是固定的，一个标签算子会由1到N张表连接而成。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 RDS/MySQL 是 使用...
算子介绍
算子介绍 含义 算子 可下推至DN的算子 LogicalView，LogicalModifyView，PhyTableOperation,IndexScan 连接（Join）BKAJoin，NLJoin，HashJoin，SortMergeJoin，HashSemiJoin，SortMergeSemiJoin，MaterializedSemiJoin 排序 MemSort，TopN...
PartitionedTable Scan Node
背景信息 查询算子Append是分区表的常用算子，但是它的性能低下，为了解决这个问题，PolarDB 推出了PartitionedTable Scan算子，它是一个分区表的查询算子，比Append更加高效。用于解决分区表分区数量过多时，查询性能慢的问题。使用限制 ...
PartitionedTable Scan Node
背景信息 查询算子Append是分区表的常用算子，但是它的性能低下，为了解决这个问题，PolarDB 推出了PartitionedTable Scan算子，它是一个分区表的查询算子，比Append更加高效。用于解决分区表分区数量过多时，查询性能慢的问题。使用限制 ...
执行计划和基本算子
本文介绍如何使用 EXPLAIN 命令查询执行计划，并介绍一些基本的算子（例如 LogicalView，Gather，MergeSort 等）。更多算子（例如Join、Agg、Sort等）的介绍在后续的章节中单独列出。背景信息 通常SQL调优的过程离不开以下两个步骤：分析...
Explain和Explain Analyze
Explain Analyze：代表SQL真实的运行计划，相比Explain会包含更多的实际运行信息，能 准确 的反映出SQL的执行算子和算子耗时，可以根据算子耗时去做针对性的SQL优化。说明 从Hologres V1.3.4x版本开始，支持通过Explain和Explain Analyze...
会话组质检规则创建
此外，每个类型的功能后面还有许多丰富的检测能力，我们称为“算子”。文字检查 文字检查是用于检测文字内容，包括 关键词检查、文本相似度检查、正则表达式检查、上下文重复检查；例如检测客服是否在服务中使用了哪些违禁词、重复词等。您...
计费项
算子与计费项的对应关系如下：算子 计费项 收费方 OSSMeta算子 GetRequest OSS MIME算子 不收费 无 FaceDetection算子 ImageFace 注*IMM LabelClassification算子（图片）ImageClassification 注*IMM LabelClassification算子（视频）...
元数据管理常见问题
什么是工作流模板？工作流模板（Template）定义了部分接口所需要执行的工作流。在创建智能媒体管理项目、数据集时，可以设置工作流模板ID（TemplateId）。在为存储在阿里云对象存储（OSS）、相册与网盘服务（PDS）等产品中的文件建立元数据...
质检规则配置
规则是进行质检所必须的元素，什么是规则？例如客服接通电话后必须说问候语，这就是一条基本的服务规范规则。在您开通服务时，我们已经为您准备了6个预置规则，您可以通过查看和使用预置规则，来快速理解规则的概念。规则组成说明 一个规则...
查看代码结构
经典结构主要用于查看SQL代码中涉及的SQL算子，及各算子之间的关联关系。鼠标悬停至对应算子的图标上，即可查看该算子的含义。常用的SQL算子如下。源表：查询的目标表。筛选：筛选目标表中需要查询的具体分区。中间表（查询视图）：存放...
阿里云智能质检
创建的质检规则 如图6所示是质检人员为了解决上面的场景创建的规则，条件a是为了发现客户是否提出了更换磁盘类型的需求，条件a利用正则表达式算子匹配各种类型的更换磁盘类型需求，检测范围是客户说的话，这个条件是这条规则的基础与前提。...
创建概述
填写基本信息”中“规则种类”选择了“普通质检规则”或“会话组质检规则”后，在新增检测条件时，主要是使用一系列质检算子。质检算子主要分为4类：文字检查、语音检查、模型检查和其他检查，如下图所示：说明 如果您想具体了解这4类算子...
查询优化器介绍
算子下推 算子下推是非常关键的一步，PolarDB-X 1.0 内置了如下算子的下推优化规则：优化规则 描述 谓词下推或列裁剪 将Filter及Project算子下推至存储层MySQL执行，过滤掉不需要的行和列。JOIN Clustering 将JOIN按照拆分方式及拆分键的...
域名检测工具
什么是域名检测工具？域名检测工具是阿里云DNS为用户提供的一款可视化、且易用的域名解析生效查询工具，可以帮助您对域名、DNS、网站三大模块进行异常检测。为什么要使用域名检测工具？1、可帮用户在设置完解析后，快速测试解析是否生效。2...
工作流模板与算子
TemplateId 算子 OSSMeta（OSS 元信息）MIME（文件类型）FaceDetection（人脸检测）LabelClassification算子（标签检测）ImageScoring（图片打分）ExtractImageEmbeddings（图片特征提取）ReGEO（地理位置）MediaMeta（视频信息）EXIF...
智能质检应用说明
产品全面提供语音检测和语义检测，规则检测和AI检测等15+检测算子，比如关键词检测、静音检测、情绪检测，以满足不同业务场景。举个例子：某金融企业的销售员在服务过程中会出现过度承诺的情况，如：无风险、稳赚不赔、全额赔付、绝对安全...
能量检测
能量等级取值范围是1-10，该算子通过对语音能量等级进行检测分析，从而判断客服/客户在通话过程中是否有大的情绪波动。配置方法：语音能量等级（一般设置5-6），相邻句波动（一般设置3），最大跨度（一般设置3-5）。使用示例：场景一：检测...
GetResultToReview-获取质检结果详情用于复核
90 关键信息 Val 详解 算子名称 val 值示例 说明 文字检查-关键字检查 你好 当前句子中命中该算子的文本，即为复核页面查看命中位置时，句子中红色高亮的文本内容 文字检查-文本相似度检查 82 相似度值 文字检查-正则表达式检查 你好 当前...
使用智能检测算子发现异常数据
可观测监控 Prometheus 版 可以通过智能检测算子算法自动地发现KPI时间序列数据中的异常波动，实现时间序列的异常检测，为后续的告警、自动止损、根因分析等提供决策依据，本文介绍使用智能检测算子发现异常数据波动的操作方法。检测...
使用智能检测算子发现异常数据
可观测监控 Prometheus 版 可以通过智能检测算子算法自动地发现KPI时间序列数据中的异常波动，实现时间序列的异常检测，为后续的告警、自动止损、根因分析等提供决策依据，本文介绍使用智能检测算子发现异常数据波动的操作方法。检测...
几何求交
本文介绍几何求交算子的使用方法。用途 几何求交算子用于计算主表与关联节点在空间位置上的交集。适用场景 计算链路 计算引擎 是否支持 离线 PostgreSQL 是 Polar_PG 是 AnalyticDB PostgreSQL(ADB_PG)是 使用说明 来源节点 几何求交算子...
几何求差
本文介绍几何求差算子的使用方法。用途 几何求差算子用于计算主表相对于关联节点（另一张数据表）在空间位置上的差集。适用场景 计算链路 计算引擎 是否支持 离线 PostgreSQL 是 Polar_PG 是 AnalyticDB PostgreSQL(ADB_PG)是 使用说明 ...
质检规则组成说明
目前有以下四种类型的算子：文字检查类 语音检查类 知识检查类 其他检查类 关键词检查 通话静音检查 客户检测模型 模型检测 文本相似度检查 语速检查 客服检测模型 正则表达式检查 抢话检查 上下文重复检查 角色判断 非正常挂机 录音时长...
GetRuleDetail-获取规则的明细信息
10 Conditions object[]所有条件的配置信息 ConditionInfoCid string 条件的 ID 7 OperLambda string 条件中算子的逻辑关系 7 Operators object[]条件包含的算子 Type string 算子类型 REGULAR_EXPRESSION Oid string 算子的 ID 8 OperName...
配置作业资源
如果您需要对单独的算子设置资源，需要配置对应的运行参数后让每个算子有自己独立的SLOT，这样就可以直接在对应的SLOT上设置算子的资源。具体的算子资源设置步骤如下：在作业 部署详情 页签 运行参数配置 区域的 其他配置 中添加如下参数...
新建脚本算子
您可以在算子中心新建 离线 类型的脚本算子，可作为模型画布中的算子节点运行。本文主要介绍如何新建脚本算子。新建离线脚本算子 登录 数据资源平台控制台。在页面左上角单击 图标，选择 探索。在顶部菜单栏，单击 图标，选择目标工作组，...
算子中心
算子中心包含算子管理、算子配置。算子管理 算子管理模块展示并管理用户添加的脚本算子，通过模型生成的模型算子，用于在构建模型时使用。算子配置 算子配置模块展示并管理用户上传的资源文件及函数信息、包含了资源文件和函数。资源文件 ...
- 产品推荐
- 这些文档可能帮助您