JAVA
示例：需要调用 基础版-中文分词-通用，进入 中文分词（基础版），复制下图中的示例值，将 GetPosChEcomRequest 替换为 GetWsChGeneralRequest，GetPosChEcomResponse 替换成 GetWsChGeneralResponse；替换后要注意更改算法的请求参数，...
2019年
PyODPS使用第三方包 2019-07-22 新增PyODPS节点实现结巴中文分词最佳实践。新实践 新增PyODPS节点实现结巴中文分词最佳实践。使用PyODPS节点进行结巴中文分词 2019-07-22 新增PyODPS参数传递最佳实践。新实践 新增PyODPS参数传递最佳实践。...
QueryMinSlideWindow
参数列表：params—算分输入参数，详情请参考OpsScorerInitParams.indexName—指定的索引名，分词类型为中文基础分词、自定义分词、单字分词、英文分词、模糊分词，必须是常量。fieldName—待匹配的字段名，该字段需要为TEXT或者SHORT_TEXT...
FieldLength
fieldName—要获取的字段名，该字段需要为TEXT或者SHORT_TEXT，并且分词类型为中文基础分词、自定义分词、单字分词、英文分词、模糊分词，必须是常量。double evaluate(OpsScoreParams params)获取分词词组个数。参数列表：params—算分...
全文索引的分词器
IK分词器 IK分词器是一个开源的轻量级中文分词工具包，支持通过全文词典使用实体词和停用词。IK配置项 如何查看和修改分词器的配置，请参见 查看和修改分词器配置。配置项 取值说明 CSTORE_IK_SEGMENTER_USE_SMART_ENABLE 分词的粒度。取值...
PyODPS节点实现结巴中文分词
准备工作：下载开源结巴中文分词包 请在GitHub下载 开源结巴分词中文包。实践1：使用开源词包进行分词 创建业务流程。操作详情请参见 创建业务流程。创建MaxCompute资源并上传 jieba-master.zip 包。右键创建的业务流程，选择 新建资源>...
搜索结果摘要
若对应用中某个字段分别创建不同分词类型，例如同时创建了中文基础及单字分词，此时中文单字分词摘要飘红会有问题，该摘要飘红内容只会匹配中文基础分词，或出现内容飘红不对。同一个请求query中，设置2种及以上不同类型分词索引进行搜索...
搜索结果摘要
若对应用中某个字段分别创建不同分词类型，例如同时创建了中文基础及单字分词，此时中文单字分词摘要飘红会有问题，该摘要飘红内容只会匹配中文基础分词，或出现内容飘红不对。同一个请求query中，设置2种及以上不同类型分词索引进行搜索...
QueryMatchRatio
indexName—待匹配的索引名，分词类型为中文基础分词、自定义分词、单字分词、英文分词、模糊分词，必须是常量。QueryMatchRatio(OpsScorerInitParams params,CString indexName,CString fieldName)构造QueryMatchRatio对象，计算查询词中...
FieldMatchRatio
indexName—待匹配的索引名，分词类型为中文基础分词、自定义分词、单字分词、英文分词、模糊分词，必须是常量。fieldName—待匹配的字段名，该字段需要为TEXT或者SHORT_TEXT，必须是常量。void setGroupScoreMergeOp(CString opName)设置...
FieldTermProximity
fieldName—待匹配的字段名，该字段需要为TEXT或者SHORT_TEXT，并且分词类型为中文基础分词、自定义分词、单字分词、英文分词、模糊分词必须是常量。void setGroupScoreMergeOp(CString opName)设置有多个query group时，多个group的分数...
KeyWordsMatched
fieldName—索引下的字段名，该字段需要为TEXT或者SHORT_TEXT，并且分词类型为中文基础分词、自定义分词、单字分词、英文分词、模糊分词，必须是常量。void setGroupScoreMergeOp(CString opName)设置多个查询分组之间分数组合规则，目前仅...
QueryTermMatchCount
fieldName—字段名称，该字段需要为TEXT或者SHORT_TEXT，并且分词类型为中文基础分词、自定义分词、单字分词、英文分词、模糊分词必须是常量。void setGroupScoreMergeOp(CString opName)设置多个查询分组之间分数组合规则，目前仅支持max...
文本-自定义分析器
功能介绍 分词是搜索引擎中一个基础但重要的组件，分词的结果直接影响搜索效果。由于业务场景的多样，同一个短语在不同的业务、不同的语境下，其语义可能会不一样，期望分词的结果也不一样。为此，OpenSearch除了提供面向通用领域的基础...
TextRelevance
fieldName—索引下的字段名，该字段需要为TEXT或者SHORT_TEXT，并且分词类型为中文基础分词、自定义分词、单字分词、英文分词、模糊分词，必须是常量。void setGroupScoreMergeOp(CString opName)设置多个查询分组之间分数组合规则，目前仅...
BM25
fieldName—索引下的字段名，该字段需要为TEXT或者SHORT_TEXT，并且分词类型为中文基础分词、自定义分词、单字分词、英文分词、模糊分词，必须是常量。void setGroupScoreMergeOp(CString opName)设置多个查询分组之间分数组合规则，目前仅...
FieldMatchWeighted
fieldName—索引下的字段名，该字段需要为TEXT或者SHORT_TEXT，并且分词类型为中文基础分词、自定义分词、单字分词、英文分词、模糊分词，必须是常量。void setGroupScoreMergeOp(CString opName)设置多个查询分组之间分数组合规则，目前仅...
文本-自定义分析器
功能介绍 分词是搜索引擎中一个基础但重要的组件，分词的结果直接影响搜索效果。由于业务场景的多样，同一个短语在不同的业务、不同的语境下，其语义可能会不一样，期望分词的结果也不一样。为此，OpenSearch除了提供面向通用领域的基础...
常见问题
中文分词建议使用IK分词器，英文分词建议使用English分词器。使用分词查询代替模糊查询时，可以使用双引号（""）将关键词括起来以提高匹配度，例如 where fieldName='"hello world"'。如果业务上确定是需要模糊查询，不是分词查询，可以...
阿里云Elasticsearch实例FAQ
阿里云ES支持哪些内置的中文分词器？通过OSS热更新词典文件，OSS侧词典文件内容发生变化，ES侧会自动更新吗？阿里云ES使用的IK分词器是否支持远程字典？阿里云ES 7.10版本实例如何安装向量检索插件（aliyun-knn）？安装插件重启会影响集群...
文本分析器
中文-通用分析器 介绍：按照检索单元做分词，基于中文语义分词，适用于全网通用行业的分析器。属于行业分析类型。注意：该分析器适用于TEXT、SHORT_TEXT字段类型。举例：例如：文档字段内容为“菊花茶”，则搜索“菊花茶”、“菊花”、“茶...
文本分析器
中文-通用分析器 介绍：按照检索单元做分词，基于中文语义分词，适用于全网通用行业的分析器。属于行业分析类型。注意：该分析器适用于TEXT、SHORT_TEXT字段类型。举例：例如：文档字段内容为“菊花茶”，则搜索“菊花茶”、“菊花”、“茶...
进阶使用
Step3：准备Tokenizer Tokenizer决定了分词的结果，分词的结果则直接影响Sparse Vector的生成，在特定领域下使用自定义Tokenizer会达到更好的效果。DashText提供了两种扩展Tokenizer的方式：使用自定义词表：DashText内置的Jieba Tokenizer...
内容社区行业
“面试”，“Java”两个词和用户只搜索“Java”的结果是有差异的，实现个性化召回，针对性满足不同用户的搜索需求，提示用户搜索体验。深度排序模型DeepRanking 模型参数规模可以达到1000亿级别，保障更优搜索效果，且模型训练、使用成本低...
游戏行业
3.个性化搜索引导 下拉提示实现了 基于用户文档内容的query智能抽取，可以通过中文前缀，拼音全拼，拼音首字母简拼查询以及汉字加拼音，分词后前缀，中文同音别字等查询下拉提示的候选query。热搜和底纹是一个完整搜索引擎必备的基本功能，...
英文分析器
英文-去词根分析器 分析器介绍 英文-去词根分析器（eng_standard）适合于英文语义搜索场景，对于分词后的每个英文单词默认会做去词根、单复数转化。例如：文档字段内容为“英文分词器 english analyzer”，则搜索“英文分词器”、“english...
英文分析器
英文-去词根分析器 分析器介绍 英文-去词根分析器（eng_standard）适合于英文语义搜索场景，对于分词后的每个英文单词默认会做去词根、单复数转化。例如：文档字段内容为“英文分词器 english analyzer”，则搜索“英文分词器”、“english...
ListUserAnalyzers-获取用户的自定义分词器列表
获取用户的自定义分词器列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action ...
词典配置
简介 高级配置中的词典配置主要为用户提供自定义分词的功能，当系统提供的分词器对query的分词结果无法满足用户的业务需求时，可以通过配置对应分词器的自定义词典来干预分词结果，以达到用户的目的 系统默认为用户提供两个词典配置版本，...
词典配置
简介 高级配置中的词典配置主要为用户提供自定义分词的功能，当系统提供的分词器对query的分词结果无法满足用户的业务需求时，可以通过配置对应分词器的自定义词典来干预分词结果，以达到用户的目的 系统默认为用户提供两个词典配置版本，...
单字分析器
分析器介绍 单字分析器（chn_single）按照单字/单词分词，适合非语义的中文搜索场景。原始内容：菊花茶123 单字分析器：菊 花 茶 123 注意事项 该分析器只适用于TEXT类型字段，在配置schema的时候指定分析器为chn_single。该分析器不支持...
单字分析器
分析器介绍 单字分析器（chn_single）按照单字/单词分词，适合非语义的中文搜索场景。原始内容：菊花茶123 单字分析器：菊 花 茶 123 注意事项 该分析器只适用于TEXT类型字段，在配置schema的时候指定分析器为chn_single。该分析器不支持...
功能特性
中文及中英文混合场景 8K/16K 是 否 标准版 艾达 aida 标准男声 通用场景 中文及中英文混合场景 8K/16K 是 否 标准版 宁儿 ninger 标准女声 通用场景 纯中文场景 8K/16K/24K 否 否 标准版 瑞琳 ruilin 标准女声 通用场景 纯中文场景 8K/16K...
GetIndex
chn Boolean false 是否包含中文。仅当 type 参数取值为 text 时，必须设置。true：包含中文。false：不包含中文。token Array of String,分词符列表。仅当 type 参数取值为 text 时，必须设置。type String text 索引的字段类型。支持text...
UserAnalyzer
1588054131,"updated":1588054131 } 结构 字段 类型 描述 id Integer 自定义分析器ID name String 名称 business String 分词器基础类型：chn_standard 中文-通用分析 chn_scene_name 中文－人名分析 chn_fecommerce 中文-电商分析 chn_it_...
UserAnalyzer
1588054131,"updated":1588054131 } 结构 字段 类型 描述 id Integer 自定义分析器ID name String 名称 business String 分词器基础类型：chn_standard 中文-通用分析 chn_scene_name 中文－人名分析 chn_fecommerce 中文-电商分析 chn_it_...
数据类型
VARCHAR/CHAR(N)java.lang.String 字符串，支持中文。VARCHAR：变长字符串类型。CHAR：定长字符串类型，需要指定长度N。BINARY(N)byte[]定长二进制类型，N表示字节数。写入数据时，包括以下两种情况。若给出的值不足N字节，系统会自动在...
基础数据类型
VARCHAR/CHAR(N)〇 〇 java.lang.String 字符串，支持中文。VARCHAR：变长字符串类型。CHAR：定长字符串类型，需要指定长度N。BINARY(N)〇 ✖️ byte[]定长二进制类型，N表示字节数。写入数据时，包含以下两种情况：若给出的值不足N字节，...
创建文档库
分词 创建文档库时可以指定Parser字段作为分词器，一般场景下，使用默认的中文zh_ch即可，如果有特殊的分词字符要求，请联系阿里云技术支持。在插入数据时，分词器会将全文检索指定字段的数据按照分词符切分，保存到to_tsvector中，供后续...
使用IK分词插件（analysis-ik）
IK分词插件（英文名为analysis-ik）是阿里云Elasticsearch的扩展插件，默认不能卸载。该插件在开源插件的基础上，扩展支持了对象存储服务OSS（Object Storage Service）词典文件的动态加载，可以实现IK词典的冷更新和热更新。本文介绍如何...
- 产品推荐
- 这些文档可能帮助您