语义挖掘工具
【挖掘结果】处理语句总数：表示进行语义挖掘的话术数据总数，即对应了语义分析中的未命中条数 聚出类别个数：表示系统进行挖掘后聚类出意图相近的类别簇数 最多数量的类别共：表示系统进行挖掘后聚类出的所有类别簇数中占比最多的句子数量...
PolarDB-X（DRDS）同步方案选取指南
当您在使用PolarDB-X（DRDS），需要进行全文检索和语义分析时，可将PolarDB-X中的数据同步至阿里云Elasticsearch进行查询分析。阿里云Elasticsearch是一个基于Lucene的实时分布式的搜索与分析引擎，可近乎于准实时地存储、查询和分析超大...
构建数据仓库
用户的应用场景复杂，对非结构化的语音、自然语言文本进行语音识别、语义分析、情感分析等，同时融合结构化数据搭建企业级的数据管理平台，并且计算和存储成本最低。平台支撑多种形式的应用，包括使用机器学习算法进行复杂数据分析、使用BI...
文本分析器
某些场景下，中文语义分析器及单字分析器搭配使用，可以获得非常好的搜索效果。如查询query=title_index:’菊花茶’OR sws_title_index:’菊花茶’，精排表达式为：text_relevance(title)*5+field_proximity(sws_title)。可以实现包含“xx...
文本分析器
某些场景下，中文语义分析器及单字分析器搭配使用，可以获得非常好的搜索效果。如查询query=title_index:’菊花茶’OR sws_title_index:’菊花茶’，精排表达式为：text_relevance(title)*5+field_proximity(sws_title)。可以实现包含“xx...
Kafka实时入湖建仓分析
DLA Lakehouse实时入湖方案利用数据湖技术，重构数仓语义，分析数据湖数据，实现数仓的应用。本文介绍Kafka实时入湖建仓分析的操作步骤。前提条件 已在DLA中开通云原生数据湖分析服务。更多信息，请参见 开通云原生数据湖分析服务。已创建...
Lindorm实时入湖建仓分析
DLA Lakehouse实时入湖方案利用数据湖技术，重构数仓语义，分析数据湖数据，实现数仓的应用。本文介绍Lindorm实时入湖建仓分析的操作步骤。方案介绍 DLA Lakehouse的Lindorm实时入湖建仓分析助力企业构建大数据离在线一体化，主要包括三...
DLA Lakehouse实时入湖
分析数据湖数据，实现数仓的应用。本文以RDS MySQL数据源为例介绍了RDS MySQL从入湖到分析的操作步骤。背景信息 数据湖分析（Data Lake Analytics）是⽬前炙⼿可热的⽅向，主要是以对象存储系统为核心，构建海量、低成本的结构化、半结构化...
阿里云智能质检
背景分析 智能质检是一个刚性需求，有电话语音坐席、工单服务、IM服务的行业都有质检需求，几乎所有主流行业都需要对产生的服务对话数据进行智能化分析和质量检测。大量服务数据积累 随着云计算的快速发展，业务量和客户量的迅速增长，呼叫...
阿里云ES机器学习
ES提供了多种内置的文本分析器和分词器，如标准分词器、N-gram分词器、拼音分词器等，主要基于文本的字面形式进行分析和索引，缺乏语义理解，上下文感知，歧义消除等能力。为了克服这些限制，可以将ES与text embedding模型相结合，这些模型...
实体识别
功能介绍 实体识别，全称命名实体识别（Named Entity Recognition，简称NER），指对查询词中的具有特定意义的语义实体进行识别。查询分析根据识别的结果，依据实体类型的权重对查询词进行改写，使得召回的文档符合查询的意图。目前，...
查询分析——电商场景
OpenSearch中查询语义理解（Query Planner）就是用来理解Query搜索意图的功能；通过对Query进行一系列智能分析，将Query进行改写后再在引擎中执行检索和排序。目前查询分析可选功能包括同义词拓展、停用词省略、拼写纠错、词权重分析、类目...
语义意图增删改查
新建意图 目前新建意图有两种方式：直接添加 和 批量导入 直接添加 进入智能对话分析系统后，选择 智能工具>语义模型训练工具>意图管理，进入意图管理界面；点击“新建意图”按钮进行意图新建；填写意图基本信息 意图名称：即新建意图名字...
数据集管理
已建训练集查看界面如下图：训练集搜索、下载与删除 进入智能对话分析系统后，选择 智能工具>语义模型训练工具>数据集管理>训练集，进入训练集编辑查看界面；根据实际业务需求，点击“搜索、下载或删除”按钮完成训练集的搜索、下载或删除...
语义意图标注
新建标注任务 进入智能对话分析系统后，选择 智能工具>语义模型训练工具>意图管理，进入意图管理界面；点击 新建任务 按钮进行意图标注任务新建；填写意图标注任务信息后点击“确定”按钮完成 意图标注任务 新建，具体意图标注任务信息含义...
模型训练管理
新建模型训练任务 进入智能对话分析系统后，选择 智能工具>语义模型训练工具>模型训练管理，进入模型训练管理界面；点击“新建模型训练任务”按钮进行意图标注任务新建；3.根据实际业务需求填写有关信息，后再点击“确定”按钮完成任务创建...
模型测评管理
单独模型效果测评 进入智能对话分析系统后，选择 智能工具>语义模型训练工具>模型训练管理，进入意图模型训练管理界面；点击“测评”按钮进入模型测评界面；进入模型测评界面后点击“新建测评”按钮进行测评任务新建；选择进行测评的 测评...
英文分析器
英文-去词根分析器 分析器介绍 英文-去词根分析器（eng_standard）适合于英文语义搜索场景，对于分词后的每个英文单词默认会做去词根、单复数转化。例如：文档字段内容为“英文分词器 english analyzer”，则搜索“英文分词器”、“english...
英文分析器
英文-去词根分析器 分析器介绍 英文-去词根分析器（eng_standard）适合于英文语义搜索场景，对于分词后的每个英文单词默认会做去词根、单复数转化。例如：文档字段内容为“英文分词器 english analyzer”，则搜索“英文分词器”、“english...
类目预测功能介绍
什么是类目预测 搜索引擎效果优化在查询意图理解阶段有语义理解、命名实体识别、词权重分析、拼写纠错等手段，在排序阶段有文本相关度、人气模型、类目预测等手段。通过配置查询分析策略和调整排序公式，搜索效果优化有很大的提升空间，再...
基础防护规则和规则组
语义防护（默认开启）更智能的防护方法，通过分析请求的内容和上下文来理解语义与语法结构，能够更好地识别未知的攻击形式，可防御SQL注入攻击。智能运维（默认关闭）根据历史业务流量进行AI学习，发现URL粒度不适用的规则，并自动添加白...
中文通用分析器
分析器介绍 中文通用分析器（chn_standard），基于中文语义分词，适用于全网通用行业的分析器。中文分析器按照检索单元（最小粒度）进行分词，并且支持扩展分词。例如：文档字段内容为“菊花茶”，分词之后的结果为“菊花 茶 花茶”，其中...
中文通用分析器
分析器介绍 中文通用分析器（chn_standard），基于中文语义分词，适用于全网通用行业的分析器。中文分析器按照检索单元（最小粒度）进行分词，并且支持扩展分词。例如：文档字段内容为“菊花茶”，分词之后的结果为“菊花 茶 花茶”，其中...
管控台概览
集成全自研多语言query分析能力（分词、NER、纠错、改写、分类等），多模型结构的预训练向量表示能力（encoder-only、decoder-only），混合召回和多因子排序能力（文本匹配、深度语义匹配）等，相对比纯向量检索，提升为行业领先搜索效果。...
2023年4月27日V5.1产品更新
本文档描述了2023年1月-4月，智能对话分析产品主要的更新内容。功能模块 功能描述 质检支持语义意图标注模型训练 通过对于命中语句的标注，并发起模型训练的方式，创建一个语义意图。语义意图可应用于质检规则配置，而不再需要通过配置正则...
单字分析器
分析器介绍 单字分析器（chn_single）按照单字/单词分词，适合非语义的中文搜索场景。原始内容：菊花茶123 单字分析器：菊 花 茶 123 注意事项 该分析器只适用于TEXT类型字段，在配置schema的时候指定分析器为chn_single。该分析器不支持...
单字分析器
分析器介绍 单字分析器（chn_single）按照单字/单词分词，适合非语义的中文搜索场景。原始内容：菊花茶123 单字分析器：菊 花 茶 123 注意事项 该分析器只适用于TEXT类型字段，在配置schema的时候指定分析器为chn_single。该分析器不支持...
应用场景
能够提供：内容推荐：通过关键词提取、短文本相似度等技术，提取关键语义信息，精准匹配出语义相似的内容，快速构建推荐场景。翻译：通过文本语言分析，精准翻译语句，帮助用户跨语言沟通。舆情分析：挖掘突发事件、舆论导向，进行话题发现...
产品功能
图像分析 应用场景 功能描述 参考 图像色板分析 对输入图的颜色信息进行分析，给出颜色值（RGB形式和HEX格式）与对应的占比信息。输入图像：提取出色卡：图像风格分析 对输入图的风格类型进行分析，给出可能的风格标签。如：视觉风格：中国...
基本概念
本文汇总了使用智能对话分析过程中涉及的基本概念，方便您查询和了解相关概念。通用概念 概念 说明 规则/普通质检规则 规则是由逻辑运算符和条件组成的表达式，一个规则可以包含多个条件组成的逻辑表达式。条件 条件由检查范围和算子组成，...
智能语义理解的审计事件
智能语义理解已与操作审计服务集成，您可以在操作审计中查询用户操作智能语义理解产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户...
语义检索
IMM语义检索是采用向量检索方式，根据特定内容语义对多媒体数据进行搜索的过程，本文介绍如何使用语义检索。功能简介 传统的标量检索是根据文件携带的元数据信息进行检索，例如文件名称、文件创建时间、文件格式等。与标量检索不同的是，...
实体识别干预词典
由于语义实体是和分词器密切相关的，因此，创建实体识别干预词典时，必须选择分析器。且在查询分析配置使用时，只有索引对应的分析器和干预词典的分词器一致，才能被选择使用。重要 在创建实体识别干预的词典时，仅支持独享型应用配置定制...
基本概念
数据建模模块 负责OLAP多维分析模型构建，支持度量（例如业务量度量）、维度（例如日期型维度）、星型拓扑数据模型等常规语义的定义，可实现对数据源的模型进行转换。通过计算字段等功能，支持复用数据源的SQL语法，对多维分析模型的维度和...
模型创建
Lindorm AI引擎支持导入预训练AI模型，对数据库内的数据进行分析和处理或对时序数据进行建模，执行时序分析类任务。语法 CREATE MODEL model_name FROM {table_name|(select_statement)|model_file_path|huggingface_repo|modelscope_repo}...
文本-自定义分析器
以词条“开放搜索”，分析器为“中文通用”为例，开启二次分词的结果是：关闭二次分词的结果：注意事项 自定义分析器的词条是该分析器中分析器类型里的分析器的全部词条和手动添加的词条的总和，并且手动干预的词条优先级高于默认分析器的...
文本-自定义分析器
以词条“开放搜索”，分析器为“中文通用”为例，开启二次分词的结果是：关闭二次分词的结果：注意事项 自定义分析器的词条是该分析器中分析器类型里的分析器的全部词条和手动添加的词条的总和，并且手动干预的词条优先级高于默认分析器的...
CREATE MODEL
Lindorm AI引擎支持通过Lindorm SQL创建AI模型，对宽表引擎或时序引擎中的数据进行建模分析。您可以根据业务场景，在CREATE MODEL语句中设置推理任务类型、配置任务参数，创建不同类型的模型，例如文生图、检索问答、时序预测等模型。引擎...
功能概述
实现原理 分析型数据库MySQL版的向量分析旨在帮助您实现非结构化数据的近似检索和分析，其实现原理是通过AI算法提取非结构化数据的特征，然后利用特征向量唯一标识非结构化数据，向量间的距离用于衡量非结构化数据之间的相似度。向量分析...
2021年11月15日 V4.1.0产品更新
2021年11月15日 V4.1.0产品更新，核心内容包括质检重构一期和重复来电分析功能。功能模块 亮点解释 质检重构 新的质检流程是按照选择数据->选择质检方案->开始检测，三步流程进行。支持按照质检方案方式来配置质检规则，系统中已经包含了多...
- 产品推荐
- 这些文档可能帮助您