数据加工访问VPC数据库实战
本视频介绍如何在日志服务控制台上配置数据加工语法和预览配置，实现数据加工通过内网访问RDS数据库。icmsDocProps={'productMethod':'created','language':'zh-CN',};
性能监控
云数据库 Memcache 版支持性能监控，您可以根据业务需要自定义监控项目。登录 云数据库 Memcache 版控制台。单击实例 ID 或者管理进入实例信息页面。在左侧导航栏中，选择性能监控。单击自定义监控项，选择需要的监控组。说明：您可以选择...
高维向量相似度搜索（pgvector）
假设需要将苹果、香蕉、猫三个对象存储到数据库中，并使用pgvector计算相似度，实现步骤如下：先使用嵌入，将苹果、香蕉、猫三个对象转化为向量，假设以二维嵌入为例，结果如下：苹果：embedding[1,1]香蕉：embedding[1.2,0.8]猫：...
物联网设备数据上云存储
设备数据通过规则引擎的无缝路由传到 TSDB 时序数据库。业务基于 TSDB 进行数据分析、监控和大数据分析。物联网平台规则引擎 物联网设备基于消息 Topic 进行通信，使用规则引擎对 Topic 中的数据进行处理然后转发到 TSDB。只需要在规则引擎...
推荐场景
图数据库GDB目前支持的查询语言是 Gremlin，下面使用Gremlin语句来实现：找到小明。g.V().hasLabel('Reader').has('name','小明')找到小明评价过的书。g.V().hasLabel('Reader').has('name','小明').as('myself').out('Score')找到跟小明...
PolarDB MySQL版间迁移
如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等），DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单；如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到...
强一致分布式事务
MySQL binlog是MySQL数据库中记录变更数据的 二进制日志，它可以看做是一个消息队列，队列中按顺序保存了MySQL中详细的增量变更信息，通过消费队列中的变更条目，下游系统或工具实现了与MySQL的实时数据同步，这样的机制也称为CDC（Change ...
应用场景：低成本历史库
云原生多模数据库 Lindorm 和关系型数据库同时使用时可以满足低存储成本，方便运维，弹性伸缩等需求，本文介绍其方案架构和优势。重要 2023年3月10日后购买的LTS 不再支持低成本历史库场景，2023年3月10日前购买的LTS仍支持该场景。背景...
基于行级安全策略实现SAAS租户数据隔离解决方案
背景信息 本文介绍PostgreSQL数据库中的行级安全策略，可用于实现数据权限隔离，允许管理员对表格的行创建访问规则，以控制用户可以查看或修改的行。在SAAS场景中，通过采用字段分租户和行级安全策略，可以有效缓解小租户库表隔离下库表多...
下载和导入同步对象配置
重要 数据库至数据库的数据同步项目中，仅选择 指定对象 方式时，支持导入对象。导入对象配置 数据传输支持通过导入 CSV 文件的方式进行设置行过滤条件、设置过滤列和设置分片列等操作。您可以下载已有项目的对象配置信息或 CSV 文件模板，...
如何实现不锁表转冷存
操作步骤 PolarDB PostgreSQL版 数据库提供的 pg_repack 插件可以实现在不持有大锁的情况下在线将数据转为冷存，这样可以大幅度降低数据迁移对在线业务的影响。pg_repack 以安装在 PolarDB PostgreSQL版 侧的插件作为服务端，并提供专用的...
从 MySQL 到 TSDB 的数据迁移
TSDB Writer TSDB Writer 是 DataX 的一个插件，实现了将数据点写入到阿里巴巴自研 TSDB 数据库中。Quick Start 步骤一：环境准备 Linux JDK（1.8 以上，推荐 1.8）Python（推荐 Python 2.6.x）MySQL（目前只支持兼容 5.x，其他版本暂不...
MySQL高可用实践
本文为您说明如何基于阿里云数据库存储服务DBFS来实现MySQL的高可用构建。优势说明 如何保证数据库服务的高可用性，一直是业界讨论的重要课题之一。下面就主要的两种解决方案进行对比说明：对比项 基于DBFS共享存储构建 基于主备同步方式...
基于TairGIS实现同城购业务
本文介绍通过 云原生内存数据库Tair 的GIS结构，实现同城购业务。背景说明 随着同城购业务的兴起，品牌商家在其众多门店中判断出距离消费者最近门店的场景越来越流行。商家通常会对每一个门店设置可销售的范围，可能是以行政区划分，也可能...
从 Prometheus 到 TSDB 的数据迁移
TSDB Writer TSDB Writer 是 DataX 的一个插件，实现了将数据点写入到阿里巴巴自研 TSDB 数据库中。Quick Start 步骤一：环境准备 Linux JDK（1.8 以上，推荐 1.8）Python（推荐 Python 2.6.x）Prometheus（目前只支持兼容 2.9.x，其他版本...
如何实现不锁表转冷存
操作步骤 PolarDB PostgreSQL版（兼容Oracle）数据库提供的 pg_repack 插件可以实现在不持有大锁的情况下在线将数据转为冷存，这样可以大幅度降低数据迁移对在线业务的影响。pg_repack 以安装在 PolarDB PostgreSQL版（兼容Oracle）侧的...
使用Redis实现多地容灾的会话管理
会话（session）管理是互联网应用的重要功能，当业务在多地部署时，会话管理就有了就近访问和多地容灾的需求，云数据库Redis版可以帮助业务实现高效的会话管理。背景信息 随着业务规模不断扩大，应用的使用者可能需要在不同的地域使用服务...
X-Engine如何支撑钉钉跃居AppStore第一
保留对事务以及二级索引等数据库特性的支持。业务代码不需要修改就可以迁移到X-Engine引擎实例上。X-Engine的冷热分离能力能够对最新消息有着最快的处理速度，而对历史消息有着最高压缩比。在Link-Bench和阿里巴巴内部交易业务两个数据集上...
基于TairString实现高效限流器
在限量抢购或者限时秒杀类场景中，除了要有效应对秒杀前后的流量高峰，还需要防止发生接受的下单量超过商品限购数量的问题，云原生内存数据库Tair 的TairString数据结构支持简洁高效的限流器，可以很好地解决订单超量问题。本文介绍的方案...
身份管理
推荐的做法是使用RAM身份（即RAM用户和RAM角色）来访问 云数据库 Redis 版。RAM用户 RAM用户需要由阿里云账号（即主账号）或拥有管理员权限的RAM用户、RAM角色来创建，且必须在获得授权后才能登录控制台或使用API访问阿里云账号下的资源。...
列存索引中TopK算子的实现
在没有索引的情况下，此类查询在数据库中是通过基于堆的经典TopK算法来实现的，逻辑如下：在内存中维护一个大小为K的堆，堆顶元素是最小的元素，将遍历到的数据与堆顶元素比较，如果比堆顶元素大，替换堆顶元素，并重建堆。遍历完数据后，...
基于TairHash实现用户多设备登录管理
数据库存储：增加大量重复的用户名前缀，浪费存储空间。本示例介绍使用 Tair 自研的拓展数据结构TairHash，实现用户多设备登录管理。TairHash不仅支持Key级别的过期设置，同时还支持Field级别的过期操作。可以将用户ID设置为Key、将设备...
基于Tair Vector实现图文多模态检索
以文搜图 通过CLIP模型将待查询的文本内容进行预处理，然后通过Vector的 TVS.KNNSEARCH 命令，查询 Tair 数据库与该文本描述最为相似的图片。具体实现可参见示例代码中的 query_images_by_text 函数。以图搜文 通过CLIP模型将待查询的图片...
云原生多模数据库Lindorm助力蚂蚁链IoT数据降本
本文介绍 云原生多模数据库 Lindorm 如何助力蚂蚁链IoT实现数据降本。客户感言 综合对比了多种存储方案，Lindorm是最适合的选择。Lindorm的自动冷热分离、数据压缩功能完美契合了我们需求，同时，工具链比较成熟，能够平滑完成数据迁移。在...
基于TairString实现高性能分布式锁
本文先介绍并分析常见的分布式锁实现方式，之后结合阿里巴巴集团在使用 云原生内存数据库Tair 和分布式锁方面的业务经验，介绍使用 Tair 实现高性能分布式锁的实践方案。分布式锁及其应用场景 应用开发时，如果需要在同进程内的不同线程...
基于TairString实现高性能乐观锁
比起原生Redis，云原生内存数据库Tair 的TairString模块能帮助您实现性能更高、成本更低的乐观锁。并发与Last-Writer-Win 下图展示了一个典型的并发导致资源竞争的场景：初始状态，string类型数据key_1的值为 hello。t1时刻，App1读取到key...
一键版本升级
Cassandra支持通过控制台一键升级，使您可快捷实现版本升级。操作步骤 注意 版本升级会串行升级各集群节点。有些版本升级需要重启后才能生效，会影响集群的使用：高可用配置集群：串行升级单个节点，不影响集群正常工作。即，高可用配置的...
与Spark集成分析
用户可以通过DLA Ganos实现Spark加载HBase中的时空数据并进行大规模时空分析操作。DLA Ganos是基于云原生数据湖分析（Data Lake Analytics，DLA）系统设计开发的，面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化（Serverless...
fdw和dblink插件实现跨库查询
dblink插件实现跨库查询 提示：当在ECS实例上自建Postgres数据库时，dblink插件不支持不同实例间的跨库查询。登录RDS PostgreSQL实例，执行如下SQL语句，创建dblink插件。create extension dblink;执行如下SQL语句，创建到远程库的连接。...
数据导入与迁移
数据的导入和迁移，都是基于LTS服务实现。RDS增量数据同步 通过BDS数据同步服务可以将RDS增量数据实时同步到HBase增强版中，使用说明：开通 LTS服务。在BDS中添加HBase增强版集群关联，具体操作方法参见 添加HBase增强版数据。请参见 RDS全...
并行创建空间索引
本功能采用空间排序（GiST Sort）的方法，可将索引构建过程并行化，并大幅减少磁盘的读写操作，实现索引构建加速。注意事项 空间排序方法仅适用于点数据（Point），其他空间类型的数据使用此方法将会降低索引的查询性能。使用方法 说明 ...
通过Serverless实现更极致的智能弹性
当前 PolarDB MySQL版 已支持Serverless形态，具有更极致的动态弹性升降资源的能力，自动弹升范围广，单集群支持0~1000核范围内的无感伸缩，可实现秒级弹升，能够从容应对业务负载突增，全程对业务无影响。弹得更快：可实现秒级弹升 弹得更...
GIST索引
Ganos sfmesh已经实现了sfmesh、meshgeom类型的原生3D空间索引。使用方法 sfmesh类型 创建带sfmesh字段的表。create table mesh_gist_test(id integer,the_mesh sfmesh);插入sfmesh记录。insert into mesh_gist_test values(1,'{"version":...
应用场景
数据库自治服务DAS支持统一管理、批量管理、智能诊断、安全审计等功能，帮助您实现多种典型应用场景。双11使用场景 每年一度的双11购物狂欢节，数据库自治服务DAS以持续的创新为之保驾护航，同时也在延续它一次次华美的蜕变。从最初面向DBA...
数据迁移和同步方案概览
云数据库MongoDB支持使用MongoDB官方提供的mongodump（备份工具）和mongorestore（恢复工具）实现MongoDB数据库的全量迁移数据库。云数据库MongoDB支持通过物理备份文件和逻辑备份文件两种途径，将云上数据迁移至本地数据库。不同迁移场景...
下载和导入迁移对象配置
数据传输支持下载数据迁移项目的迁移对象配置信息，并支持通过导入 CSV 文件的方式实现自动配置和确认迁移对象的配置信息，以实现保存项目配置信息和批量、快速配置项目。导入对象功能通常适用于百+对象进行批量重命名和设置操作。下载对象...
并行创建空间索引
本功能采用空间排序（GiST Sort）的方法，可将索引构建过程并行化，并大幅减少磁盘的读写操作，实现索引构建加速。注意事项 空间排序方法仅适用于点数据（Point），其他空间类型的数据使用此方法将会降低索引的查询性能。使用方法 说明 ...
全球数据库市场发展与机遇
阿里云数据库技术已先后走过了“商业-开源-自研”的演进路线，不断突破数据库技术和应用生态，实现了数据库领域的自主可控。2008年，率先发起“去IOE”战略，采用开源数据库技术替代Oracle数据库，成功解决商业数据库高成本压力和业务支持...
功能特性
本节主要介绍 OceanBase 数据库的核心特性。分布式事务引擎 OceanBase 数据库的分布式事务引擎严格支持事务的 ACID 属性，并且在整个集群内严格支持数据强一致性，是全球唯一一家通过了标准 TPC-C 测试的原生分布式关系型数据库产品。...
数据归档OSS
该功能允许用户在控制台数据库管理页面或通过API将不经常访问的在线数据库转为冷存数据库，而冷数据会存储在低成本的对象存储OSS中，以此实现数据的冷热分离，帮助用户节约存储成本。功能简介 RDS SQL Server基于SQL Server内核原生的数据...
- 产品推荐
- 这些文档可能帮助您