MaxCompute表数据
包括数据检索、数据预览、查看元数据详情、查看数据血缘关系、分类分组管理数据表等操作。本文为您介绍如何在数据地图查看和管理MaxCompute表。前提条件 已绑定MaxCompute引擎至当前工作空间，绑定后DataWorks会面向引擎自动采集元数据，...
函数操作
功能 是否支持 函数操作 是 MAX_PT 是 支持使用Dataphin项目名称进行检索数据。例如，Dataphin的项目英文名称为biz_cdm，该项目下有分区表biz_order、分区键为ds。则您可以执行以下语句查询数据。select*from biz_cdm.biz_order where ds=...
函数操作
功能 是否支持 函数操作 是 MAX_PT 是 支持使用Dataphin项目名称进行检索数据。例如，Dataphin的项目英文名称为biz_cdm，该项目下有分区表biz_order、分区键为ds。则您可以执行以下语句查询数据。select*from biz_cdm.biz_order where ds=...
使用向量检索插件（aliyun-knn）
向量检索插件是阿里云Elasticsearch团队自主开发的向量检索引擎插件，基于阿里巴巴达摩院proxima向量检索库实现，能够帮助您快速实现图像搜索、视频指纹采样、人脸识别、语音识别和商品推荐等向量检索场景的需求。本文介绍如何使用向量检索...
添加数据
添加向量数据 在向量管理>添加数据页中选择表进行添加数据：添加相应字段值（包括主键、稠密向量），点击 添加：当执行结果出现"message":"success"说明数据上传成功：数据上传成功后，可以在查询测试页面进行查询：添加混合检索数据 ...
产品简介
数据源 提供数据的源点，会根据这些数据来构建私域知识库，用于后续的检索、知识问答 大模型 大规模预训练语言模型是指使用海量文本数据进行预训练的语言模型。它通过学习大量的语言知识和语境信息，能够生成高质量的文本或提供语义理解。...
2000W FLOAT512 量化
CE hash 向量检索 数据类型:4,向量维度:512,检索方式:hnsw,计算方法:SquaredEuclidean,构建模式:train:build:seek doc表信息 表名:doc_table_pailitao2,分区:20210707,doc数量:19990000,向量分隔符:query表信息 表名:doc_table_pailitao2,...
快速创建Milvus实例
通过创建阿里云向量检索Milvus实例，能够迅速搭建起具备高性能、弹性伸缩特性的AI向量检索数据库，并借助内置可视化管理工具Attu实现高效运维与监控。本文为您介绍如何快速创建Milvus实例。前提条件 已拥有阿里云账号。如果您还没有阿里云...
API概览
AI Service API 标题 API概述 InitVectorDatabase 初始化向量数据库 初始化向量检索数据库。命名空间管理 命名空间管理 CreateNamespace 创建命名空间 创建向量数据的命名空间。DescribeNamespace 查询命名空间信息 查询命名空间信息。...
分词和模糊查询使用指南
本文介绍了在检索数据时使用分词查询和模糊查询的语法和使用示例。创建检索表 创建检索表的示例如下：/*polar4ai*/CREATE TABLE table_name(id int,name varchar,name_1 wildcard,content text,content_1 text_ik_smart,content_2 text_ik_...
DECLARE
INSENSITIVE 指示从游标中检索数据的过程不受游标创建之后在其底层表上发生的更新的影响。在PolarDB中，这是默认的行为。因此这个关键词没有实际效果，仅仅被用于兼容 SQL 标准。SCROLL NO SCROLL SCROLL 指定游标可以用非顺序（例如，反向...
新建Amazon S3数据源
它允许个人、组织和企业在云中存储和检索数据。如果您使用的是Amazon S3，在对接Dataphin进行数据开发或将Dataphin的数据写入至Amazon S3时，您需要先完成Amazon S3数据源的创建。更多Amazon S3信息，请参见 什么是Amazon S3。权限说明 仅...
新建Amazon S3数据源
它允许个人、组织和企业在云中存储和检索数据。如果您使用的是Amazon S3，在对接Dataphin进行数据开发或将Dataphin的数据写入至Amazon S3时，您需要先完成Amazon S3数据源的创建。更多Amazon S3信息，请参见 什么是Amazon S3。权限说明 仅...
聚类分片
向量检索 数据类型:4,向量维度:128,检索方式:HNSW,计算方法:SquaredEuclidean,构建模式:train:build:seek:recall doc表信息 表名:cluster_10kw_128f_doc,分区:20221111,doc数量:100000000,向量分隔符:,query表信息 表名:cluster_10kw_128f_...
新功能发布记录
支持图搜多主体识别 2024-01-08 产品新功能迭代 新增 支持混合检索 支持为单个doc配置多向量 新增文本转向量模型，新模型支持128、512、1024token长度的中英文文本进行向量化自动处理 2023-12-26 实例规格调整 新增 支持单数据节点购买 ...
深度解析Lindorm搜索索引（SearchIndex）特性
背景 在海量数据存储的背景下，伴随着云原生、5G/IoT时代的到来，新的业务模型在不断涌现，除了简单的主键查询和范围查询外，简单分析、多维检索成为业务的基本需求。常见的一些查询需求如下：多维查询。即席查询(adhoc)，一般是不固定的列...
基础向量检索
Proxima CE支持使用基础向量检索和百万TopK检索的方式检索任务，本文为您介绍Proxima CE中使用基础向量检索离线任务的方法及示例。前提条件 已安装Proxima CE包并准备输入表，详情请参见 安装Proxima CE包。导入输入表数据 如果您想先测试...
创建向量索引
在处理大型数据集或需要快速访问和检索数据的场景（数据库查询优化、机器学习和数据挖掘、图像和视频检索、空间数据查询等）中，创建向量索引是加速向量检索的有效方式，可以提高查询性能、加速数据分析和优化搜索任务，从而提高系统的效率...
异构数据源访问
若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源（HDFS、Hive和JDBC）时，可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...
文本向量场景快速入门
购买实例 进入 OpenSearch控制台，在左上角切换到 OpenSearch-向量检索版：进入向量检索版控制台后，在实例管理界面，点击 创建实例：商品版本选择 向量检索版，选择地区，配置“查询节点个数”、“查询节点规格”、“数据节点数量”、...
端到端图搜解决方案
用户将图片通过base64编码后的图片及其表数据存储在MaxCompute中 API+OpenSearch向量检索版：用户通过OpenSearch向量检索版给出的数据推送接口，将base64编码后的图片及其表数据推送到OpenSearch向量检索版实例中 本文演示的是OSS+...
东软案例
在运维过程中，用户通过实时监控仪表盘、统计分析报表或风险定位、检测工具对接Lindorm多模引擎海量数据检索、分析能力，来满足不同应用场景的运维大数据信息提取需要。图 3.东软新型IT智能运维系统部署方案 适用场景 实时状态大屏展现。...
功能简介
入库任务 支持将Shapefile、GeoJSON和CSV文件类矢量数据添加到系统默认的空间数据库或者指定的PostGIS、Ganos数据库，方便对空间数据库进行空间检索、数据质检、血缘记录，打通数据计算引擎链路，使得空间数据被用于数仓建设、标签管理等...
空间数据（邀测中）
入库任务 支持将Shapefile、GeoJSON和CSV文件类矢量数据添加到系统默认的空间数据库或者指定的PostGIS、Ganos数据库，方便对空间数据库进行空间检索、数据质检、血缘记录，打通数据计算引擎链路，使得空间数据被用于数仓建设、标签管理等...
规格计算器
Linear：线性检索，即暴力检索，召回结果完全正确，占用资源多性能较差，通常适用于小数据集上（1W条数据量以内）的精确检索。查询情况：平均QPS：用户接入引擎的流量QPS 期望搜索平均响应时间：用户期望召回结果的平均耗时，单位下拉可选...
产品优势
高效 分布式搜索引擎，可以高效的支持海量数据的检索，同时也支持数据的实时更新（秒级生效），非常适用于对查询耗时敏感、时效性要求高的搜索场景。低成本 支持多种索引压缩策略，同时支持多值索引加载测试，能够以较低的成本满足用户的...
应用场景
阿里云Elasticsearch具有广泛的应用场景，包括日志分析与运维全观测、信息检索、数据智能等。日志分析与全观测 在复杂业务场景下，海量服务器、物理机、Docker容器、移动设备和IoT传感器等设备中，往往存在着结构分散、种类多样、规模庞大...
自媒体：易撰
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。本文介绍易撰如何通过 PolarDB-X 应对业务挑战。所属行业...
通过Kibana使用Serverless应用
阿里云Elasticsearch Serverless（简称ES Serverless）服务的应用提供了直接...Index Management Index Patterns Saved Objects 相关文档 使用Kibana通过可视化交互分析探索航班飞行数据 在Kibana中对Serverless应用中的数据进行检索、查询
非结构化数据向量检索
Lindorm向量索引旨在帮助您实现非结构化数据的检索分析。您可以通过AI算法提取非结构化数据的特征，并利用特征向量唯一标识非结构化数据。这些向量数据可以被Lindorm高性能地存储和检索。同时，Lindorm也支持向量数据与标量数据的混合检索...
产品优势
数据安全中心DSC（Data Security Center）可扫描和识别海量数据，帮您实时获取数据的安全状态。本文介绍 数据安全中心 的产品优势。合规性 使用数据安全中心产品...提供动态可视化的数据资产展示与检索，并支持一键检索海量数据中的敏感数据。
量化使用
实际测试里（例如：2000万规模的doc/query 512 float 向量数据的检索），使用量化后的召回率与正常情况相比，大约会由99.0%下降至98.2%。但是量化通常会带来一定的性能提升，对于上述测试数据总体加速比大约为10%左右（数据仅供参考）。...
名词解释
INDEX 〇 ✖️ Index（索引）是一种数据结构，用于加快数据库中数据的检索速度，提高查询性能。索引可以看作是表中一个或多个列的快速访问入口，可以根据某个特定的列值快速定位到想要访问的数据。宽表引擎支持多种索引，例如二级索引、...
什么是云原生多模数据库Lindorm
其核心能力包括：核心能力 说明 多模超融合 支持宽表、时序、对象、文本、队列、空间等 多种数据模型，模型之间数据互融互通，具备数据接入、存储、检索、计算、分析等 一体化融合处理与服务的能力，帮助应用开发更加敏捷、灵活、高效。...
DashVector+DashScope升级多模态检索
本教程在前述教程（DashVector+ModelScope玩转多模态检索）的基础之上，基于DashScope上新推出的ONE-PEACE 通用多模态表征模型 结合向量检索服务DashVector来对多模态检索进行升级，接下来我们将展示更丰富的多模态检索能力。DashVector+...
日志监控
日志监控 页面中仅 Query 可用，且仅支持对日志数据的检索，其他检索项修改后无法生效。例如将检索范围的默认 logs 修改为 sum 或其他值，则不会生效。单击 Run Query。单击其中一条日志，即可在 Detected fields 下查看日志内容及Query可...
名词解释
实例相关 名称 解释 副本数 单张表的全量索引数据冗余的份数（可用于查询）网络信息 包括专有网络（VPC）、公网访问等信息 API入口 SDK操作实例时使用 查询测试 通过控制台对实例表数据进行检索 变更历史 记录用户各种运维操作的历史记录和...
阶段二：数据安全防护措施及策略增强建设
场景二：按需申请数据权限&多级审批 在日常工作中，开发人员、数据分析师常需要读取他人产出的结果表，他们可在DataWorks数据地图检索表的元数据，并对表或表的某列进行权限申请。默认情况下，空间管理员或表Owner审批后便会自动授权，详情...
添加入库任务
入库后，方便对空间数据库进行空间检索、数据质检、血缘记录，打通数据计算引擎链路，使得空间数据被用于数仓建设、标签管理等数据中台任务。本文主要介绍如何添加入库任务。前提条件 已添加文件类矢量数据，具体操作，请参见 添加文件类...
全文检索
全文检索（Full Text Search）指数据库将自然语言文本转换为可被查询数据的能力。云原生数据仓库AnalyticDB PostgreSQL版 使用PostgreSQL内核，提供完善的全文检索功能。本文介绍 AnalyticDB PostgreSQL版 如何实现“一站式全文检索”业务...
- 产品推荐
- 这些文档可能帮助您