分析数据
⑧ 合并居中 将选择的多个单元格合并成一个较大的单元格，并将新单元格内容居中。数字 序号 功能 描述 ① 数据类型 选择单元格格式，例如数字、货币、短日期、长日期、时间、百分比、分数、科学计数和文本等。② 百分比 将单元格的数据类型...
LLM-特殊内容移除（DLC）
去除HTML格式字符并解析出HTML文本 将文本中的 '<li>' 替换成 '*'，'<ol>' 替换成 '*'，并删除 '</li>' 和 '</ol>' 字符。最后解析HTML文本并返回。例如去除文章中的URL链接：处理前 处理后 配置组件 在Designer工作流页面添加 LLM-特殊...
LLM-特殊内容移除（MaxCompute）
算法简介 LLM-特殊内容移除组件支持以下功能：首先使用换行符将文本切分为多行。去除文章中的导航信息 导航信息关键字包括：'首页>'、'主页>'、'首页»'、'首页/'、'首页|'。导航信息正则表达式：'当前位置:.*[>]{1,}'、'的位置:.*[>]{1,}'...
多模态文生图模型
其中，stable-diffusion-v1.5模型通过clip模型能够将文本的embedding和图片embedding映射到相同空间，从而通过输入文本并结合unet的稳定扩散预测噪声的能力，生成图片。是一款基础的文生图模型，得到了业界广泛使用。而stable-diffusion-xl...
快速开始
前言 通用文本向量，是通义实验室基于LLM底座的多语言文本统一向量模型，面向全球多个主流语种，提供高水准的向量服务，帮助开发者将文本数据快速转换为高质量的向量数据。模型中文名 模型英文名 向量维度 单次请求文本最大行数 单行最大...
文本
使用场景 当页面中需要使用文本展示说明，您可以选择使用 文本 组件。使用说明 将 文本 组件拖入编排页面画布中，默认横向占满容器，你可以根据需求设置文本内容，修改样式。文本内容支持动态配置。使用示例 部署效果如下图所示。
通用文本向量
基于LLM底座的统一向量化模型，面向全球多个主流语种，提供高水准的向量服务，帮助用户将文本数据快速转换为高质量的向量数据。开发者可以通过以下链接，了解如何通过大模型服务平台调用通用文本向量API。快速开始 同步接口API详情 批处理...
Android客户端接入
说明 包签名 获取方式如下：方式一：上图的下方输出的 MD5 值移除冒号，将大写字母转换为小写字母即可生成 包签名。方式二：请通过手机终端下载并安装 Android App签名获取工具，获取Android App的 包签名 信息。添加配置 添加权限。在 ...
通过播报数字人实现对话效果
本文基于将文本转换为数字人流媒体（TTS：Text To Stream）的接口能力来举例说明如何完成对话效果。前置条件 1.开通并接入 3D播报数字人接入 或 2D播报数字人接入 服务 2.拥有可在公网环境访问的对话机器人，如果没有可以前往阿里云 开通...
模型测试
在模型的测试界面，您可以通过上传文件或文本在平台上进行测试，同时NLP自学习平台也支持通过API和SDK的方式进行模型的调用，具体方法参见API和SDK帮助文档...注意：对话分类模型的输入是JSON格式，请将文本框内替换为符合您数据格式的输入。
[推荐]模型服务灵积DashScope
本文介绍如何通过 模型服务灵积DashScope 将 文本转换为向量，并入库至向量检索服务DashVector中进行向量检索。模型服务灵积DashScope，通过灵活、易用的模型API服务，让各种模态模型的能力，都能方便的为AI开发者所用。通过灵积API，开发...
LLM-文本标准化（DLC）
LLM-文本标准化（DLC）组件主要用于将文本Unicode标准化以及繁体转简体。输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法...
文本输入框
使用场景 文本输入框 组件通常与 表单容器 组件配合使用，关于 表单容器 组件的信息，请参见 表单容器。...应用运行时，即可将 文本输入框 内的值传给绑定的账号变量内的账户名字段。文本输入框 组件部署效果图如下所示。
LLM-计数过滤（MaxCompute）
根据字母字符占文本token比例过滤 统计文本中所有字母字符的个数，并使用pythia-6.9b-deduped模型将文本切分为token，计算字母字符和token个数的比值。根据比值过滤样本。根据分隔符个数过滤 统计文本中的分隔符个数，根据阈值过滤样本。...
LLM-计数过滤（DLC）
根据字母字符占文本token比例过滤 统计文本中所有字母字符的个数，并使用pythia-6.9b-deduped模型将文本切分为token，计算字母字符和token个数的比值。根据比值过滤样本。配置组件 在Designer工作流页面添加 LLM-计数过滤（DLC）组件，并在...
API详情
在这一过程中，文本将被转换为语言模型可以处理的token序列。Token是模型用来表示自然语言文本的基本单位，可以直观的理解为“字”或“词”。对于中文文本来说，1个token通常对应一个汉字；对于英文文本来说，1个token通常对应3至4个字母或...
文本审核服务在决策引擎中的应用
将文本维度的风险转化为账号维度的风险特征 您可以将文本维度的风险转化为主体维度（即账号、设备、IP等）的风险，提升结果处理的准确率及效率。例如，对于每个账号发送的广告类消息有一定容忍度，但超过限度则进行处罚。相关文档 关于三种...
LLM-长度过滤（MaxCompute）
平均长度和最大行长度过滤默认会将文本按行切分再进行统计。使用限制 仅支持MaxCompute计算引擎。可视化配置参数 您可以在Designer中，通过可视化的方式配置组件参数。页签 参数 是否必选 描述 默认值 字段设置 选择目标处理列 是 选择要...
清空输入框（窗口）
5.流程搭建示例 搭建流程 创建并打开名为“新建文本文档-窗口示例”的文本文档 利用 获取窗口 组件，获取“新建文本文档-窗口示例”利用 清空输入框（窗口）组件，清空文本 执行结果 如下图所示，该流程成功将文本文档中内容清空。
LLM-文本标准化（MaxCompute）
LLM-文本标准化组件主要用于大语言模型（LLM）的文本数据预处理工作，可以将文本Unicode标准化以及繁体转简体。使用限制 仅支持MaxCompute计算引擎。算法简介 LLM-文本标准化组件支持以下功能：将Unicode文本标准化，使用NFKC的方式标准化...
百川智能
本文介绍如何通过 百川智能向量化模型 将 文本转换为向量，并入库至向量检索服务DashVector中进行向量检索。前提条件 DashVector：已创建Cluster：创建Cluster 已获得API-KEY：API-KEY管理 已安装最新版SDK：安装DashVector SDK 百川智能：...
Jina AI
本文介绍如何通过 Jina Embeddings v2模型 将 文本转换为向量，并入库至向量检索服务DashVector中进行向量检索。前提条件 DashVector：已创建Cluster：创建Cluster 已获得API-KEY：API-KEY管理 已安装最新版SDK：安装DashVector SDK Jina ...
基于文本分析算法实现新闻分类
④ 挖掘文本主题：PLDA文本挖掘组件的输入必须为三元形式，因此使用 三元组转kv 组件将文本转换为三元形式（文本转换为数字）。其中：append_id：每篇新闻的唯一标识。key_value：冒号前面的数字表示单词抽象成的数字标识，冒号后面的数字...
内容安全文本审核服务在决策引擎中的应用
将文本维度的风险转化为主体维度的风险特征 您可以将文本维度的风险转化为“主体”维度（账号、设备、ip等）的风险，提升处置的准确率及效率。例如，对于每个账号发送的广告类消息有一定容忍度，但超过限度则进行处罚。通过决策引擎透传...
LLM-文章内句子去重（MaxCompute）
算法简介 首先根据换行符将文本进行拆分，然后对拆分后的每行文本使用。……,\\?\\?等标点符号进行语句分割，再使用 hashlib.sha1 哈希算法计算文本哈希值，对文本去重。可视化配置参数 您可以在Designer中，通过可视化的方式配置组件参数...
LLM-Copyright信息移除（DLC）
将文本用换行符分隔，按行遍历文本是否以/、#、-注释符号开头，一旦匹配到符合条件的某行，继续统计连续的注释行，直到注释符号终止，则遍历终止。最后删除文本中的连续注释片段并返回。以上步骤均检测第一次匹配到的注释片段，即默认检测...
LLM-Copyright信息移除（MaxCompute）
将文本用换行符分隔，按行遍历文本是否以/、#、-注释符号开头，一旦匹配到符合条件的某行，继续统计连续的注释行，直到注释符号终止，则遍历终止。最后删除文本中的连续注释片段并返回。以上步骤均检测第一次匹配到的注释片段，即默认检测...
文本摘要预测
当使用文本摘要训练组件微调过的模型时，您需要将 文本摘要训练 组件的模型输出端连接到 文本摘要预测 的模型输入端。当使用自有模型时，您可以将 字段设置 页签的 使用自定义模型 参数配置为 是，并配置 模型存储路径 参数为存储模型的OSS...
案例：构建文本语义检索系统
文本语义检索概述 文本语义检索的架构如下图所示，通常包括两个组件：文本向量化和索引构建 文本向量化：指利用机器学习模型将文本转换为向量特征。机器学习模型能够对文本进行编码，使得在语义上与其他文本相似的文本，被编码为在向量空间...
文本摘要训练
使用说明 您可以在文本摘要训练组件的上游接入 句子拆分 组件，将文本拆分成一句一行的形式。可视化配置组件参数 您可以在 Designer 中，通过可视化的方式配置组件参数。输入桩 输入桩（从左到右）数据类型 建议上游组件 是否必选 训练数据...
文本搜索函数和操作符
numnode('(fat&rat)|cat':tsquery)→5 plainto_tsquery([config regconfig,]query text)→tsquery 将文本转换为 tsquery，根据指定的或默认配置对单词进行标准化。字符串中的任何标点符号都会被忽略（它不决定查询操作符）。结果查询匹配...
文本摘要
使用说明 您可以在文本摘要组件的上游接入 句子拆分 组件，将文本拆分成一句一行的形式。组件配置 您可以使用以下任意一种方式，配置文本摘要组件参数。方式一：可视化方式 在 Designer 工作流页面配置组件参数。页签 参数 描述 字段设置 ...
pg_trgm
show_trgm-{"a","ab","abc","bc"}(1 row)将文本拆解为Trigram后，可以通过对两个字符串之间共享的Trigram计数来度量它们的相似度。这种简单的思想已经成为在很多自然语言中度量词相似度的有效方法。下文介绍pg_trgm插件的几个使用场景。...
通用文本向量模型
模型简介 通用文本向量，是通义实验室基于LLM底座的多语言文本统一向量模型，面向全球多个主流语种，提供高水准的向量服务，帮助开发者将文本数据快速转换为高质量的向量数据。模型中文名 模型英文名 向量维度 单次请求文本最大行数 单行...
混合查询最佳实践
对比传统的 文本+向量 多路召回，向量检索版中的稀疏-稠密向量是将稠密向量和稀疏向量嵌入组合为单个向量，而其中的稀疏向量是将文本向量化成稀疏向量，稠密向量是传统的向量。稀疏向量和稠密向量代表不同类型的信息并支持不同类型的搜索。...
ImportFpShotJob-提交文本导库任务
接口说明 本接口将文本批量导入文本 DNA 库，通过提取文本特征进行保存。文本 DNA 相关功能目前仅支持华东 2（上海）地域使用。QPS 限制 本接口的单用户 QPS 限制为 100 次/秒。超过限制，API 调用会被限流，这可能会影响您的业务，请合理...
ModelScope魔搭社区
本文介绍如何通过 ModelScope魔搭社区 中的 文本向量开源模型 将 文本转换为向量，并入库至向量检索服务DashVector中进行向量检索。ModelScope魔搭社区 旨在打造下一代开源的模型即服务共享平台，为泛AI开发者提供灵活、易用、低成本的一站...
电子表格支持函数说明
REPLACEB 根据特定字节数，将文本字符串的一部分替换为其他文本字符串。REPT 返回指定文本的多次重复。RIGHT 返回从指定字符串尾部提取的子串。RIGHTB 返回从指定字符串尾部提取的子串。SEARCH 返回字符串在文本中首次出现的位置。如果没有...
普通节点
语音答案：对话能力可以通过语音合成技术，将文本转换为自然流畅的语音回答。当用户提出符合触发条件的问题时，对话能力会将设定的文本回答转换为语音，并以语音的形式回答用户。条件回复 在机器人问答配置中，可以根据特定的用户标签（或...
图文解释
图文解释模板用于关联图片选区与文本实体。数据格式示例 说明 CSV 及 XLSX 格式中每一列数据；Manifest 格式中 data 字段的下一级字段均对应一个数据集...关联文字和图片 在右侧图片处选择下拉框中的图片，可以将文本实体和对应图像关联起来。
- 产品推荐
- 这些文档可能帮助您