DeleteDataset-删除数据集
即使设置 DeleteBinding 的请求参数 Cleanup 为 true 时仍不会删除手动添加的索引文件，此时仍需使用 DeleteFileMeta、BatchDeleteFileMeta 手动删除索引文件，自动建立与手动建立索引文件的区别可参见 建立元数据索引。调试 您可以在Open...
新旧版本使用指引
新增功能 更强大的数据处理能力 数据处理现已支持音视频处理、文档处理、图片智能、音视频智能、文件处理、内容安全等。更灵活的数据管理、数据查询能力 媒体集（Set）升级为数据集（Dataset），支持全类型文件的元数据抽取以及元数据查询...
IndexFileMeta-文件元信息建立索引
对输入的文件进行数据处理如标签识别、人脸检测、地点检测等，将提取的文件元信息建立索引，支持用户在一个数据集内多样化的数据检索。接口说明 请确保在使用该接口前，已充分了解智能媒体管理产品的收费方式和 价格。文件元信息建立索引...
概述
Druid segments（Druid索引文件）管理层涉及以下组件：Zookeeper：负责存储集群的状态以及作为服务发现组件。例如集群的拓扑信息、overlord leader的选举、indexing task的管理等。Coordinator：负责segments的管理。例如segments下载、...
按使用功能计费模式计费项
索引是针对字段构建的，索引流量的大小与索引字段及字段值的长度有关。例如原始日志量为1 GB，写入到日志服务并开启全文索引，则索引流量为1 GB。例如原始日志量为1 GB，写入到日志服务并开启其中两个字段的索引，这两个字段的数据量为0.5 ...
智能媒体管理的审计事件
BatchIndexFileMeta 批量索引文件元信息。BatchUpdateFileMeta 批量更新文件元信息。CompareImageFaces 比较两个人脸的相似度。ConvertOfficeFormat 文档格式转换。CreateBinding 创建绑定。CreateCADConversionTask 创建CAD文件转换任务。...
PolarDB MySQL版8.0.2版本发布日志
2023-06-28 问题修复 修复使用列存索引进行查询时，使用的临时文件写满磁盘后不能及时中断查询并清理文件的问题。修复重复执行存储过程时，参数不生效的问题。修复普通用户可以删除 sys 的问题。修复并发记录慢查询日志的过程中，Thread ...
召回引擎版介绍
多索引版本的支持可以保证数据变更的稳定性，当索引结构变化或者数据结构发生变化时，通过全量产出新的索引是和老版本的索引完全隔离的，如果变更有问题可以及时回滚。全量索引的产出需要经过数据处理，索引构建，索引合并等流程，在各个...
索引介绍
使用宽表模型的表引擎查询数据时存在依赖主键以及根据属性查询效率低的问题，表格存储提供了二级索引和多元索引用于解决宽表模型的数据查询问题。您也可以为数据表创建映射关系后，像使用传统数据库一样使用SQL查询表中数据。表引擎 宽表...
2023年
修复向量数据库mmap索引文件回收不完备，出现漏删的问题。修复向量数据库mmap引擎的向量算法库在召回Top很低时，通过调参也无法实现100%召回的问题。修复在AO物化视图执行 UPDATE.RETURNING.语句时，RETURNING子句中带有Ctid情况下出现...
基于向量检索版+LLM构建对话式搜索
并再采用zstd等高效算法进行数据压缩，实现存储成本优化 精细索引结构设计：针对不容类型索引，可采用不同优化策略，降低索引大小 非全内存加载：可以使用mmap非lock的形式加载索引，有效降低内存开销 引擎优势：OpenSearch向量检索版引擎...
功能特性
单击在线体验 音 视 频增强 音频增强 视频云音频实验室有机结合传统信号处理与深度学习技术，提供全场景音频增强与修复方案。单击在线体验。重要 以下功能需要在 提交转码作业 时 配置相应参数 使用，音频部分按照输出的音频规格和时长，...
常见问题
售前常见问题 产品计费常见问题 数据采集常见问题 数据存储常见问题 查询与分析常见问题 数据加工常见问题 消费与投递常见问题 售前常见问题 什么是日志服务？日志服务可以做什么？日志服务能为用户带来哪些价值？日志服务支持采集哪些数据...
基于向量检索版+LLM构建对话式搜索
并再采用zstd等高效算法进行数据压缩，实现存储成本优化 精细索引结构设计：针对不同类型索引，可采用不同优化策略，降低索引大小 非全内存加载：可以使用mmap非lock的形式加载索引，有效降低内存开销 引擎优势：OpenSearch向量检索版引擎...
PolarDB MySQL版8.0.1版本发布日志
修复列存索引在处理超长字符串类型时出现的内存越界问题。修复在使用列存索引功能时，同时打开预读功能导致节点概率性崩溃的问题。修复XEngine的compaction后台任务因并发控制过于严格，对前台操作产生影响进而影响慢查询性能的问题。修复...
AliSQL内核小版本发布记录
不建议升级到此版本，如遇到备份失败问题，请参见 RDS MySQL 8.0.31(20230630)版本备份失败问题处理。新特性 合并官方 8.0.31 变更。支持取消正在运行的Buffer Pool Online Resize。Statement Concurrency Control功能新增模板级别并发控制...
通过索引生命周期管理实现冷热数据分离
其中hot阶段主要负责对索引进行滚动更新操作，warm、cold、delete阶段主要负责进一步处理索引数据，详细说明如下。阶段 描述 hot 热数据阶段。主要处理时序数据的实时写入，可根据索引的文档数、大小、时长决定是否调用 rollover API 来...
OSS性能与扩展性最佳实践
如果您在上传大量文件（Object）时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间（Bucket）中的某个特定分区的情况。此时如果您的请求次数过多，会导致请求速率下降。出现此类问题时，建议您...
参数说明
当您通过数据库统计信息、慢SQL等信息了解数据库当前的状态以及存在的问题后，可以针对发现的问题，进行调整和优化。PolarDB PostgreSQL版（兼容Oracle）默认的参数模板适用于大多数通用的数据库场景，对于一些特殊的数据库场景，默认模板...
向量计算使用指南
Hologres中的向量计算功能可以应用于相似度搜索、...对于不带过滤条件的向量检索，最极致的状态就是一个Shard上只有一个向量索引文件，这样查询就能直接落在一个Shard上。因此对于不带过滤条件的查询场景通常建表如下。BEGIN;CREATE TABLE ...
开源Elasticsearch FAQ
本文列举了一些开源Elasticsearch（ES）相关的常见问题，例如，如何配置索引线程池大小，如何重新分配索引分片，如何批量删除索引等。常见问题概览 如何配置索引线程池大小？出现内存溢出OOM（OutOfMemory）的错误，如何处理？如何手动对...
截图常见问题
提交M3U8文件同步截图失败 M3U8文件同步截图必须保证M3U8索引中的TS路径与M3U8在相同的路径下，异步无要求。提交单张截图失败，指定时间超过视频时长 错误码：InvalidParameter.ResourceContentBad 错误描述：The resource operated ...
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
ES-Hadoop是Elasticsearch推出的专门用于对接Hadoop生态的工具，可以让数据在Elasticsearch和Hadoop之间双向移动，无缝衔接Elasticsearch与Hadoop服务，充分使用Elasticsearch的快速搜索及Hadoop批处理能力，实现交互式数据处理。...
2024年
修复扩容时重建索引造成不可读写的问题。2024年03月（V7.0.5.2）类别 功能 功能描述 相关文档 修复 修复beam分区表加列后分区主表reloptions不正确的问题。修复beam分区表包含多个子命令的alter后辅助表不一致的问题。2024年03月（V7.0.5.1...
通过控制台使用SQL查询
物联网存储IoTstore是表格存储基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求推出的一站式物联网解决方案，可为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、...
版本发布说明
本文介绍 PolarDB-X 实例版本的发布说明。发布日期：2024-03-20 大版本：V5.4.18 小版本：17108394 类别 说明 ...发布日期：2023-07-13 大版本：V5.4.17 小版本：16890724 类别 说明 优化 优化索引的缺省命名逻辑，与MySQL保持一致。缺陷修复 ...
功能特性
OSS-HDFS服务 数据处理 图片处理 针对OSS内存储的图片文件，您可以在GetObject请求中携带图片处理参数对图片文件进行处理。例如添加图片水印、转换格式等。图片处理 ZIP包解压 当您需要批量上传文件、按特定目录结构上传文件、上传完整的...
2021年
ST_ImportFrom、ganos.raster.memory_oss_file_max_size 2021年10月 Gist/TrajGist索引 GisT索引和TrajGisT索引新增算子族trajgist_ops_multi，用于多外包框索引键值。GisT索引、TrajGisT索引、ganos.trajectory.index_split_config 2021年...
2021年
ST_ImportFrom、ganos.raster.memory_oss_file_max_size Gist/TrajGist索引 GisT索引和TrajGisT索引新增算子族trajgist_ops_multi，用于多外包框索引键值。GisT索引、TrajGisT索引、ganos.trajectory.index_split_config 缺陷修复 新增矢量...
阿里云Elasticsearch实例FAQ
本文列举了阿里云Elasticsearch（ES）相关的常见问题，包括购买、退订、配置、访问、查询、写入、插件、分词、日志、重启、负载或状态异常、备份与恢复、监控报警等相关问题。常见问题概览 购买或退订实例问题 购买ES实例时选错配置，如何...
深度解析Lindorm搜索索引（SearchIndex）特性
索引预处理 基于索引列的元信息将新插入或者更新的原始数据转换为索引数据，并且针对不同的场景可以选择与之匹配的Mutability属性，比较典型的例如日常监控，数据写入后不更新，可以选择Immutable模式，直接生成索引原始数据；而那些有状态...
时空引擎版本发布记录
Trajectory SQL 修复 ST_lcsSimilarity 函数无法处理单点轨迹的问题。6.2 新特性 Geometry SQL 新增参数化对象椭圆弧和贝塞尔曲线。Raster SQL 新增 ST_AsTile 函数，支持通过指定Geometry获取规则大小（256或512）的瓦片。GeomGrid SQL ...
开发运维建议
性能与稳定性 在RDS PostgreSQL中，单个数据库（DB）对应底层文件系统中的一个文件夹，数据库中的表、分区、索引对应文件夹中的文件，如果数据库对应文件夹中的文件数量超过2000万，将可能出现磁盘空间满的报错。建议适当拆分数据库或合并...
常用错误码ErrorCode
鉴权license错误码（求解器错误码为-10时，二级错误码）此部分问题主要与 fl_client.ini 鉴权文件的内容配置、网络连接相关，fl_client.ini 文件内容设置请参考 3.使用阿里云鉴权LicenseKey。错误码 错误说明 处理方式-1 请求超时 检查是否...
使用向量检索插件（aliyun-knn）
同时，由于在向量索引的查询过程中，会把索引文件全部加载到系统内存，因此建议在业务查询期间，不要同时进行大批量的写入，避免因节点内存紧张导致分片重启的情况。说明 以上均为预估，以业务实际的应用情况为准，建议提前进行压测，并...
常见问题
本文为您整合了使用Proxima CE过程中的常见问题。Proxima CE用的是哪里的资源？用户所在MaxCompute Project下的资源。输入表中的vector可以直接使用MaxCompute的Binary类型吗？目前不支持，Proxima CE当前版本构建索引的处理方法是将doc表...
通过Logstash迁移自建Elasticsearch数据
Logstash是Elasticsearch提供的一个开源数据处理工具，可以收集和处理日志数据，并将处理后的数据导入至目标数据库。如果您想要通过Logstash将自建Elasticsearch集群中的数据迁移至Lindorm搜索引擎，可以参考本文的操作步骤配置脚本和迁移...
搜索增强
对OSS文件数据源,离线数据处理流程会自动对离线数据进行文本chunk分析，必须针对标题或者内容字段勾选文本快切分功能才能触发离线文本分析流程 对数据库数据源，数据库中保存用户已处理数据，这里文本块切分chunk功能可以不勾选 分析器 在...
VACUUM
对具有 GIN 索引的表，VACUUM（任何形式）也会通过将待处理索引项移动到主要 GIN 索引结构中的合适位置来完成任何待处理的索引插入。我们建议经常清理活动的生产数据库（至少每晚一次），以保证移除失效的行。在增加或删除了大量行之后，对...
0040-00000229
问题描述 图片处理索引切割算子参数i使用了非法值。问题原因 图片处理索引切割算子参数i为非数字。问题示例 GET/example_image?x-oss-process=image/indexcrop,x_100,i_abc ...
- 产品推荐
- 这些文档可能帮助您