LLM-N-Gram重复比率过滤（DLC）
LLM-N-Gram重复比率过滤（DLC）组件主要用于保留字符级或词语级N-Gram重复比率在指定范围内的样本。输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。...
LLM数据处理
LLM-长度过滤-2 使用该组件根据空格将样本切分成单词列表，根据切分后的列表长度过滤样本，实际是根据单词个数过滤样本。LLM-文章相似度去重-1 使用该组件去除相似的文本。单击画布上方的运行按钮，运行工作流。工作流成功运行后，右键单击...
使用Envoy过滤器模板创建Envoy过滤器
在 多版本适配Envoy过滤器模板 区域，单击 添加Envoy过滤器模板适配版本，选择 适配Istio版本，输入适配该版本的Envoy过滤器内容，然后单击 创建。说明 如果您的ASM版本为1.18.0.146及以上，适配Istio版本 区域默认选中 无最小版本下限 和 ...
Envoy过滤器（Envoy Filter）CRD说明
您可以使用Envoy Filter修改配置中某些字段的值、添加特定的过滤器、添加全新的监听器、Cluster（Envoy中Cluster指一组接受来自Envoy的流量的上游主机）等。与其他Istio网络对象不同，Envoy Filters是叠加应用。对于特定命名空间中的给定...
下拉框选择器
参数 说明 下拉搜索 打开开关，输入框可自定义输入搜索内容，过滤选出对应下拉列表内的数据内容；关闭开关，无法使用自定义输入搜索内容功能。选中清除 打开开关，输入框选中一个条目后右侧会出现 图标，单击该图标可以清除输入框内被选中...
下拉框选择器
参数 说明 下拉搜索 打开开关，输入框可自定义输入搜索内容，过滤选出对应下拉列表内的数据内容；关闭开关，无法使用自定义输入搜索内容功能。选中清除 打开开关，输入框选中一个条目后右侧会出现 图标，单击该图标可以清除输入框内被选中...
LLM-N-Gram重复比率过滤（MaxCompute）
LLM-N-Gram重复比率过滤组件主要用于大语言模型（LLM）的文本数据预处理工作，保留字符级或者词语级N-Gram重复比率在指定范围内的样本。使用限制 仅支持MaxCompute计算引擎。算法简介 将文本中的内容按照字符或词语进行大小为N的滑动窗口...
级联选择器
参数 说明 下拉搜索 打开开关，输入框可自定义输入搜索内容，过滤选出对应下拉列表内的数据内容；关闭开关，无法使用自定义输入搜索内容功能。选中清除 打开开关，在输入框有值的情况下，当鼠标移入时，出现清除按钮 图标，单击该图标可以...
微服务洞察
自定义日志规则：提供接口、实例、条件等不同维度的过滤能力以及丰富的打印内容种类，满足不同的场景下的不同需求。登录 MSE治理中心控制台，并在顶部菜单栏选择地域。在左侧导航栏，选择 治理中心>应用治理，然后单击目标应用的资源量卡片...
最佳实践
本文以轮播列表柱状图组件使用数据过滤器筛选出B站网页内的视频为例，为您演示如何使用数据过滤器。操作步骤 登录 DataV控制台。在 我的可视化 页面，选择您创建的可视化应用，单击 编辑。在 画布编辑器 页面，单击 图标打开 资产列表，在...
动态过滤器（Dynamic Filter）
动态范围过滤器或布隆过滤器（Dynamic Range|Bloom Filter）从上图可知，在原始的执行计划中不存在过滤器，过滤器是由系统根据JOIN的特性自动产生的，它的作用就是判断B表中的元素是否存在于A表生成的集合中，如不存在，则过滤掉。...
动态过滤器（Dynamic Filter）
动态范围过滤器或布隆过滤器（Dynamic Range|Bloom Filter）从上图可知，在原始的执行计划中不存在过滤器，过滤器是由系统根据JOIN的特性自动产生的，它的作用就是判断B表中的元素是否存在于A表生成的集合中，如不存在，则过滤掉。...
使用示例
本文以 轮播列表柱状图 组件，使用数据过滤器筛选出B站网页内的每日推荐数据为例，为您演示数据过滤器的详细使用方法。前提条件 在可视化应用编辑器页面，添加所需要的 轮播列表柱状图 组件，详情请参见 添加资产。操作步骤 登录 DataV控制...
算子功能详解
召回过滤字段：召回表字段内容与过滤表中的字段内容相同时，该条记录将被过滤丢弃。表达式：支持运算符>、<、=、!AND、OR、in()、notin()、contain()、notcontain()。示例如下：1)>例：item_id>1 2)<例：item_id)=String类型：item_set_...
内容模板语法（新版）
{{ quote(alert.results[0].query)}} } 结果 {"query":"*|select count(*)as pv"} {"query":"*|select count(*)as pv"} 说明 JSON格式不合法 JSON格式合法 过滤器 在函数嵌套使用场景中，通知内容的编辑麻烦且不够直观，例如 {{ block(to_...
列存索引中TopK算子的实现
由于cutoff value过滤和TableScan中使用Predicate过滤是类似的，因此在具体实现中直接复用处理Predicate的表达式，提升过滤的效率，减少计算TopK的时间。Zonemap-based Pruning 在内存不足时，采用归并排序，并基于offset和limit做truncate...
为弹性网卡（ENI）配置白名单
eni_tag_filter":{"creator":"terway"}"eni_tag_filter"表示网络接口的标签过滤器，{"creator":"terway"} 则是具体的标签过滤条件，表示只有由Terway创建的网络接口才会被匹配。示例如下：eni_conf:|{"eni_tag_filter":{"creator":"terway...
产品优势
面向阿里云存储产品OSS的用户，我们也提供界面配置化的内容风险审核的功能，无需接口对接即可启用内容审核与过滤的能力。此外，我们还提供分布各国与各地域的网络与计算节点，以便满足对访问时延和数据计算区域有更高要求的业务和场景需求...
通过CEL编写访问日志过滤规则
在访问量较大的业务场景中，按照特定条件过滤日志，可以节约Sidecar的性能开销，并专注于关键日志内容。ASM支持使用CEL（Common Expression Language）语言设置日志过滤规则。本文介绍ASM AccessLog CEL过滤的使用方法和CEL支持的字段，...
向量检索
是 过滤条件 filter 过滤条件，需满足SQL where子句规范，请参见 条件过滤检索。否 Partition partition Partition名称。默认为default，请根据需要选择不同的Partition。是 TopK topk 最大可返回的向量条数。TopK默认10，最大可支持1024。...
Bloom
Scalable Bloom Filter 随着布隆过滤器中添加的元素越来越多，误判率也越来越高，若希望误判率稳定不变，需同步增加布隆过滤器的大小，但是布隆过滤器由于结构限制无法进行扩容。因此，Scalable Bloom Filter提出创建新的布隆过滤器，将多...
Quick BI指标看板只添加度量字段后，在过滤器里设置...
问题描述 Quick BI指标看板只添加度量字段后，在过滤器里设置过滤条件后，实际该过滤条件下是有数据的，但是看板显示查询数据为空。问题原因 用户在过滤器设置的字段，希望该字段的枚举值来与过滤条件作比较，但用户添加的字段在过滤器的...
语音&VUI
功能概述 语音&VUI功能由若干项子功能组成，有关子功能介绍如下表所示：子功能项 功能描述 语音算法服务 包含噪音过滤阈值、文字合成语音的语速、音量和语调设置等功能，支持使用系统内置或自定义语音算法服务。静音检测 也称VAD阈值，用以...
ASMCompressor CRD说明
false remove_accept_encoding_header bool 否 如果为true，在将请求标头分派到上游之前从请求标头中删除接受编码，以便响应在到达过滤器之前不会被压缩。false CommonConfig配置 字段 说明 默认值 min_content_length 启用压缩的内容最小...
基本概念
内容 工具和应用程序代码可以通过内容里的信息来标识事件与系统层面的关系或者事件或其他事件的关系。数据 事件发生的特定领域信息，包括事件发生的相关信息、变更数据的详细说明或更多其他信息。事件格式 指定如何将CloudEvent序列化为...
停用词过滤
本文为您介绍 Designer 提供的停用词过滤算法组件。停用词过滤算法组件是文本分析中的一个预处理方法，用于过滤分词结果中的噪声（例如的、是或啊）。停用词过滤算法组件的两个输入桩为输入表和停用词表。输入表为需要过滤停用词的表。停用...
筛选器配置
详细内容请参见 数据表资源。功能特点 支持通过筛选器对数据进行过滤，展示特定数据。支持设置字符型、数值型、时间型的筛选条件。支持将筛选项在前端显示为查询项，方便在运行态随时对数据进行搜索或过滤。配置属性 在维度或度量栏下，...
新功能发布记录
2022.02.18 中国内地区域用户 功能暂时下线，如有问题请联系技术支持 Feed流过滤定制 支持Feed过滤定制功能：支持客户根据复杂的APP业务逻辑，结合推荐场景页面，按照终端用户诉求个性化筛选内容。如只展示某个品牌、店铺的商品，过滤...
自动增量排序
自动增量排序的性能收益测试 以下内容以过滤计算为例，展示自动增量排序对于查询性能带来的收益。确认AutoVacuum和AutoMerge功能已开启，命令如下：SHOW autovacuum;SHOW automerge;返回值为on则表示已开启。关闭Laser引擎功能，命令如下：...
DescribeCens-查看账户下所有云企业网实例的详细信息
变更历史 变更时间 变更内容概要 操作 2023-03-08 OpenAPI 错误码发生变更、OpenAPI 入参发生变更 看变更集 变更项 变更内容 错误码 OpenAPI 错误码发生变更。删除错误码：400 入参 OpenAPI 入参发生变更。新增入参：ResourceGroupId
CreateSpider-新增网站导入任务
urlRegex List否 url过滤：用于网页url过滤，基于正则表达式，支持多个过滤条件。默认的URL过滤规则为以url的开头的网站地址。比如网站url为http://www.abc.com/，则默认正则表达式为：http://www\.abc\.com/.*xpathSelectors List否 xpath...
DescribeCenBandwidthPackages-查询账户下所有带宽包...
变更历史 变更时间 变更内容概要 操作 2023-03-08 OpenAPI 错误码发生变更、OpenAPI 入参发生变更、OpenAPI 返回结构发生变更 看变更集 变更项 变更内容 错误码 OpenAPI 错误码发生变更。删除错误码：400 入参 OpenAPI 入参发生变更。新增...
Fn:Jq
使用过滤器.parameters[]过滤出的内容，再次通过新的过滤器进行过滤，它们之间通过竖线（|）进行连接。给定一个JSON字符串作为输入时，它将按照顺序在满足过滤器条件.parameters[]和 {"param_name":.name,"param_type":.type} 的键处产生值...
DescribePhysicalConnections-查询指定地域内的物理...
一个过滤条件支持最多输入 5 个过滤值，多个过滤值之间为 或关系，只要与其中一个过滤值匹配则视为符合该过滤条件。nametest Tags object[]否 标签列表。Key string 否 资源的标签键。最多支持输入 20 个标签键。一旦传入该值，则不允许为...
DescribePhysicalConnections-查询指定地域内的物理...
一个过滤条件支持最多输入 5 个过滤值，多个过滤值之间为 或关系，只要与其中一个过滤值匹配则视为符合该过滤条件。nametest Tags object[]否 标签列表。Key string 否 资源的标签键。最多支持输入 20 个标签键。一旦传入该值，则不允许为...
实例规格
3天 SQL属性过滤 以SQL表达式的方式对消息属性内容进行精确过滤，使消息的订阅处理更加高效。SQL属性过滤，请参见 消息过滤。不支持 数据传输加密 支持SSL/TLS数据传输加密，但需要配合SDK版本为Java ons-client-2.x.x的客户端使用。SDK...
级联选择器
参数 说明 下拉搜索 打开开关，输入框可自定义输入搜索内容，过滤选出对应下拉列表内的数据内容；关闭开关，无法使用自定义输入搜索内容功能。选中清除 打开开关，在输入框有值的情况下，当鼠标移入时，出现清除按钮 图标，单击该图标可以...
使用函数计算实现消息数据清洗
算子 算子能力说明 消息过滤 按照正则表达式匹配消息内容，将匹配成功的消息发送至目标。更多信息，请参见 事件模式。消息转换 根据字符串匹配，进行消息内容替换，例如字符大小写转换。将转换后的消息发送至目标。更多信息，请参见 事件...
基于文本分析算法实现新闻分类
很多媒体或内容生产商对于新闻文本的分类通常采用手工标注的方式，消耗了大量的人力资源。PAI提供的智能文本挖掘算法可以实现新闻文本分类自动化（包括分词、词型转换、停用词过滤、主题挖掘及聚类等流程）。本工作流首先通过PLDA算法挖掘...
设置过滤条件
在配置同步或迁移任务对象时，您可以通过设置过滤条件，将源数据库中满足您需求的数据同步或迁移到目标数据库。该功能常应用于分库分表、同步或迁移部分数据等场景。前提条件 当前任务处于 配置任务对象及高级配置 阶段。进入此阶段的方法...
- 产品推荐
- 这些文档可能帮助您