DDL多路归并排序
PolarDB 新增DDL多路归并排序功能。数据库大表中建立索引的DDL操作通常非常耗时，您可以通过DDL多路归并排序功能，缩短建立索引的DDL操作中索引排序的时间。前提条件 PolarDB 集群版本需满足如下条件之一：PolarDB MySQL版 8.0.2版本且修订...
什么是向量检索服务
标签+向量检索：在索引算法层实现了“带条件的向量检索”，解决了传统多路归并召回结果不理想的情况，满足组合检索的要求。索引水平扩展：采用非对等分片方法实现分布式检索，支持有限精度下索引的快速合并，与Map-Reduce计算模型可有效...
在召回服务中配置属性过滤
本文介绍如何在召回服务中配置过滤规则 创建一个召回服务 用户可以创建一个X2I、向量、多路归并召回，详情参见 快速拉起服务 配置属性过滤 在注册阶段或后续通过编辑服务的方式进入到服务配置页面。在召回配置页面配置过滤规则 进入X...
时序异常检测的常见问题
本文介绍时序异常检测的一些通用问题。时序异常检测对数据有什么要求？若待检测数据包含了过多时间线，在进行异常检测时需较长的等待时间，建议您设置 WHERE 条件，先过滤出少量时间线进行测试，获取符合预期的算法与参数后再逐步增加时间...
自建HBase迁移至云原生数据仓库 AnalyticDB MySQL 版 ...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据迁移任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者迁移任务失败。源库对象 在 源库对象 框中单击待迁移的对象，然后单击 将其移动...
PolarDB-X 1.0同步至云原生数据仓库 AnalyticDB MySQL...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您需要创建两个数据同步任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者同步任务失败。选择为 否：默认选项。目标库对象名称大小写策略 您可以配置目标...
Db2 for LUW同步至AnalyticDB MySQL版 3.0
如果需要让部分表执行多表归并，另一部分不执行多表归并，您需要创建两个数据同步任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者同步任务失败。选择为 否：默认选项。目标库对象名称大小写策略 您可以配置目标...
PolarDB-X 2.0同步至云原生数据仓库 AnalyticDB MySQL...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您需要创建两个数据同步任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者同步任务失败。选择为 否：默认选项。源库对象 在 源库对象 框中单击待同步对象...
PolarDB-X 1.0迁移至AnalyticDB MySQL 3.0
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据迁移任务。选择为 否：默认选项。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者迁移任务失败。目标库对象名称大小写策略 您可以配置目标...
PolarDB MySQL版同步至AnalyticDB MySQL 3.0
如果需要让部分表执行多表归并，另一部分不执行多表归并，您需要创建两个数据同步任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者同步任务失败。选择为 否：默认选项。源库对象 在 源库对象 框中单击待同步对象...
PolarDB-X 2.0迁移至云原生数据仓库 AnalyticDB MySQL...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据迁移任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者迁移任务失败。源库对象 在 源库对象 框中选择待迁移对象，然后单击 将其移动至...
概述
来进行DDL执行效率的对比：DDL预读、异步IO、多路归并排序功能开启情况 耗时（秒）开启DDL预读、异步IO、多路归并排序功能：loose_innodb_polar_ddl_build_index_readahead=ON loose_innodb_polar_ddl_build_index_readahead_page_num=256 ...
RDS MySQL同步至AnalyticDB MySQL 3.0
如果需要让部分表执行多表归并，另一部分不执行多表归并，您需要创建两个数据同步任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者同步任务失败。选择为 否：默认选项。目标库对象名称大小写策略 您可以配置目标...
自建Oracle迁移至AnalyticDB MySQL 3.0
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据迁移任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者迁移任务失败。目标已存在表的处理模式 预检查并报错拦截：检查目标数据库中...
RDS MySQL迁移至AnalyticDB MySQL 3.0
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据迁移任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者迁移任务失败。目标库对象名称大小写策略 您可以配置目标实例中迁移对象的库名...
新功能发布记录
标准版：在运营版功能基础上，支持根据多路召回算法，进行调参与AB实验。2022.08.10 所有用户 选型介绍 新闻及内容行业增加时效性相关默认配置 鉴于新闻行业及内容行业的特殊性，特别新增了时效性相关默认配置，该功能将在后续版本中透...
服务介绍
执行计划，是物联网边缘计算为LE-V-B004型号边缘一体机提供的视觉算法和调度策略。在同等算力下，开通执行计划的LE-V-B004型号边缘一体机，可扩展更多IPC设备进行算法推理。背景信息 执行计划应用于社区、园区等物业管理场景，通过本地AI...
列存索引中TopK算子的实现
在海量数据上求TopK是一个很经典的问题，特别是衍生出的深翻页查询，给分析型数据库带来了很大的挑战。本文将介绍 PolarDB MySQL版 的列存索引（In Memory Column Index，IMCI）特性如何应对这样的挑战。背景 业务系统中普遍存在这样一种...
产品简介
优势2：行业领先的搜索增强算法 全自研多语言Query分析能力，多模型结构的预训练向量表示能力，混合召回和多因子排序能力，多路召回加精排，相比纯向量检索，MRR@10提升28%，Recall提升21.6%。应用场景 针对企业泛搜索场景，对大模型进行...
常见问题
多个任务同时执行会有问题吗？目前Proxima CE不支持相同输入doc的多个任务同时执行，因为多个任务同时执行会导致索引的坏写，比如A任务写了某份索引，B任务会覆盖，这样会导致各种问题，常见问题如下：底层OSS Volume Filesystem相关的错误...
云市场常见问题
什么情况下会扣资源包次数，识别报错会扣费吗？资源包扣费规则按照：成功识别才算入计费次数，若识别报错则不计算次数。单张图片算作一次调用；若您的图片上存在多张图片，可能会导致对应接口识别报错，建议可进行如下操作：1.将所需图片...
DAS Auto Scaling弹性能力
基于DeepLearning的数据库RT预测模型，该算法可基于数据库实例的CPU使用情况、逻辑读、物理读和iops等多项数据指标预测出实例运行时的rt值，用于指导数据库对BufferPool内存的缩减，为阿里巴巴数据库节省超27T内存，占比总内存约17%。...
负载均衡调度算法介绍
负载均衡会根据配置的调度算法，将来自客户端的请求按照对应的算法规则转发至相应的后端服务器。负载均衡支持轮询、加权轮询、加权最小连接数、一致性哈希等多种调度算法，用于支持不同的业务场景。本文列出所有负载均衡系列产品支持的调度...
多表归并任务中执行Online DDL操作导致目标库数据丢失
问题示例 以RDS MySQL（源库）向RDS MySQL（目标库）进行多表归并任务为例，说明源库进行Online DDL操作导致目标库数据缺失的情况。多表归并场景：用户配置了从源库1 RDS MySQL和源库2 RDS MySQL到目标库RDS MySQL的多表归并任务，数据迁移...
V5.4.x系列实例版本说明
修复问题 修复事务内可能会多次获取相同分表上的连接，导致报错的问题。修复因删除某数据库后又创建了同名的新数据库，所产生的脏数据导致SQL执行时的空指针异常（NullPointerException，简称NPE）问题。修复部分情况下异步日志消费线程...
产品概述
什么是地址标准化 地址标准化 是依托阿里云海量的地址语料库，以及超强的NLP算法实力所沉淀出的高性能及高准确率的标准地址算法服务。该地址算法服务能解决一地多名，地址解析，地址真伪辨别等多种问题，为企业，政府机关以及开发者提供...
概述
为什么需要冷启动 通常推荐系统通过协同过滤、矩阵分解或是深度学习模型来生成推荐候选集，这些召回算法一般都依赖于用户-物品行为矩阵。在真实的推荐系统中，会有源源不断的新用户、新物品加入，这些新加入系统的用户和物品由于缺乏足够...
自主排查SSL-VPN连接问题
使用SSL-VPN连接的过程中，如果SSL-VPN连接异常，您可以根据客户端的日志信息、VPN网关管理控制台SSL-VPN连接的日志信息自主排查问题。背景信息 本文汇总了SSL-VPN连接常见错误及排查方法，您可以通过客户端的日志信息和VPN网关管理控制台...
纠删码
它能通过一定的算法将k个原始数据块计算出m个冗余数据块，只要在这 k+m 个数据块中选择任意k个数据块就能计算得到所有的原始数据。当 k=4，m=2 时，在存储效率上等价于1.5副本，并可以允许最多2个数据块损坏。因此纠删码相比于多副本，可以...
SSL-VPN连接常见问题
NCP模式是一种动态协商加密算法的方式，开启NCP模式后，客户端和SSL服务端之间建立SSL-VPN连接时将协商出 ncp_ciphers 列表项下双方均支持的最高安全级别的加密算法，而不使用您为SSL服务端指定的加密算法。OpenVPN（2.4.0及以上的版本）...
部署及微调Llama-3系列模型
训练算法支持使用JSON格式输入，每条数据由问题、答案组成，分别用"instruction"、"output"字段表示，例如：[{"instruction":"你是一个心血管科医生，请根据患者的问题给出建议：我患高血压五六年啦，天天喝药吃烦啦，哪种东西能根治高血压...
资产安全概述
脱敏算法 脱敏算法模块可以看到目前支持的所有脱敏算法，主要包括 遮盖脱敏（如张三，脱敏为*三）、哈希脱敏（如加盐MD5）两大类算法。动态脱敏 不改变底层数据的存储，只在数据进行消费时，进行数据的脱敏。典型应用场景：数据分析场景的...
资产安全概述
脱敏算法 脱敏算法模块可以看到目前支持的所有脱敏算法，主要包括 遮盖脱敏（如张三，脱敏为*三）、哈希脱敏（如加盐MD5）两大类算法。动态脱敏 不改变底层数据的存储，只在数据进行消费时，进行数据的脱敏。典型应用场景：数据分析场景的...
SQL性能问题
本文介绍有关SQL性能相关的常见问题。Flink全托管如何拆分SQL作业节点？Group Aggregate优化技巧有哪些？TopN优化技巧有哪些？有哪些高效去重方案？在使用内置函数时，需要注意什么？Flink全托管如何拆分SQL作业节点？在 作业运维 页面，...
热搜和底纹
什么是热搜和底纹 热搜和底纹是一个完整搜索引擎必备的基本功能，通常占据着搜索框入口的重要位置，提供不可或缺的业务价值。下图是看一个典型电商平台的热搜和底纹的位置。热搜和底纹处于搜索引擎整个工作流程的最上游，为搜索优化起铺垫...
使用向量检索插件（aliyun-knn）
算法说明 在算法上，目前向量检索引擎已经支持了hnsw算法以及linear算法，适用于单机数据量小（全内存）的业务场景。两种算法性能对比如下。表 1.hnsw算法和linear算法性能对比 表格中为阿里云Elasticsearch 6.7.0版本环境实测数据，测试...
选型介绍
12800起 功能 内置行业算法模板 支持 支持 运营策略灵活调整 支持 支持 支持多个推荐场景 支持 支持 多路召回算法调参 不支持 支持 在线实验平台ABTest 不支持 支持 自定义特征、样本及训练排序模型 不支持 支持，需搭配购买其他产品实现 ...
电商行业模板-多路搜索
介绍 OpenSearch的 多路搜索功能 结合了文本搜索和向量搜索，做到了搜索延迟和计算消耗低于OR逻辑情况下更高的准确性，并在搜题场景已经得到有效验证。多路召回架构还可以使用到：图片向量召回、公式召回、个性化召回等场景中。为什么要多...
淘宝App在短视频场景下的IETF QUIC最佳实践
QUIC（全称：Quick UDP Internet Connection），是基于UDP的多路复用且安全的新一代传输协议，具有更低的连接和传输延迟，拥有极佳的弱网性能，在丢包和网络延迟严重的情况下仍可提供可用的服务。本次发布会，阿里云产品技术专家从QUIC技术...
DCDN为淘宝App短视频场景加速的IETF QUIC最佳实践
QUIC（全称：Quick UDP Internet Connection），是基于UDP的多路复用且安全的新一代传输协议，具有更低的连接和传输延迟，拥有极佳的弱网性能，在丢包和网络延迟严重的情况下仍可提供可用的服务。本次发布会，阿里云产品技术专家从QUIC技术...
- 产品推荐
- 这些文档可能帮助您