分库分表

数据拆分 数据库访问代理支持库级拆分表级拆分和分库分表拆分,通过数据库访问代理 DDL 语句指定,具体操作参见 DDL 语法。数据访问代理根据指定拆分键,采用特定的算法进行计算,然后根据计算结果数据存储到对应的分库/分表中。...

SQL 路由

SQL 路由 当用户发起执行 SQL 语句的请求时,数据访问代理会理解 SQL 语句的含义,然后按照拆分键和执行策略 SQL 语句路由到对应分区进行执行,如下图所示:数据合并 如果一个 SQL 语句被路由到多个分表执行,数据访问代理会各个...

PolarDB-X 1.0是否支持对拆分键字段的

针对 PolarDB-X 1.0 实例从V5.4.7-16000638版本开始支持UPDATE更新逻辑拆分键字段。因此,若在分表做UPDATE操作时出现报错的情况,建议先 查看实例版本 是否大于或等于V5.4.7-16000638,否则建议 升级版本 至V5.4.7-16000638及以上...

事件处理流

场景 告警字段:"message":"myhostid_myuserid_myruleid" message 字段中的字段值拆分为 hostid、userid、ruleid 并分别填充到新的字段中。动作配置 需要拆分的字段:message 分割字符:_拆分结果填充字段:hostId、userId、ruleId 说明 ...

数值函数(2.0版)

ABS:绝对函数 MOD:求余 ROUND:四舍五入 SQRT:平方根 CBRT:立方根 E:自然对数 LN:自然对数 LOG:对数 LOG2:以2底的对数 LOG10:以10底的对数 PI:返回pi POWER:指数函数 RANDOM:随机函数 RADIANS:角度转度 DEGREES:弧度转...

CREATE INDEX

[ASC|DESC]#length参数仅用于在索引表拆分键上创建局部索引 index_option:KEY_BLOCK_SIZE[=]value|index_type|WITH PARSER parser_name|COMMENT 'string' index_type:USING {BTREE|HASH} algorithm_option:ALGORITHM[=]{DEFAULT|INPLACE|...

CREATE INDEX(DRDS模式)

name:col_name[(length)][ASC|DESC]#length参数仅用于在索引表拆分键上创建局部索引 index_option:KEY_BLOCK_SIZE[=]value|index_type|WITH PARSER parser_name|COMMENT 'string' index_type:USING {BTREE|HASH} algorithm_option:...

任务类型

拆分阶段:数据进行分片,不限制拆分层数,将拆分结果上报给服务端,由服务端根据拆分的 Chunk 通知客户端来拉取数据进行处理。(Chunk:一批待处理数据分片集合)执行阶段:客户端接收到通知后拉取数据进行处理,处理完后继续拉取新的...

能否更换PolarDB-X 1.0分库分表的拆分键

若您的 PolarDB-X 1.0 实例版本V5.4.7-16000638或以上,您可以在如下情况中变更拆分键:支持UPDATE更新逻辑拆分键字段。支持在VALUES从句中不指定拆分键或唯一,或指定值为DEFAULT。支持通过INSERT ON DUPLICATE KEY ...

模型管理

查看模型详情 模型在产出的同时,上传的数据会按照8:2的比例拆分为训练集和测试集,20%的测试集用作验证集模型性能的优劣,在模型详情中会展示出整体的评估信息和单标签的评估信息。管理模型列表 您可以在 模型管理 页面查看已创建的模型...

RIGHT_SHIFT

描述 根据分库键值键值必须是整数)有符号地向右移二进制指定的位数(位数可通过DDL指定),然后得到的整数按分库()数目取余。使用限制 拆分键的类型必须整数类型。使用场景 当拆分键大部分值的低位部分区分度比较低而高位...

RIGHT_SHIFT

使用示例 假设需要ID作为拆分键,并ID的向右移二进制4位的作为哈希,则可以如下建:create table test_hash_tb(id int,name varchar(30)DEFAULT NULL,create_time datetime DEFAULT NULL,primary key(id))ENGINE=InnoDB ...

规则和拓扑查询语句

比如,TB_NAME_PATTERN的值为table_{00},TB_RULES_STR的值为[1,2,3,4,5,6,7,8],则会产生8张,分别table_01、table_02、table_03、table_04、table_05、table_06、table_07、table_08;TB_RULES_STR:分表规则;PARTITION_KEYS:分库...

规则和拓扑查询语句

比如,TB_NAME_PATTERN的值为table_{00},TB_RULES_STR的值为[1,2,3,4,5,6,7,8],则会产生8张,分别table_01、table_02、table_03、table_04、table_05、table_06、table_07、table_08;TB_RULES_STR:分表规则;PARTITION_KEYS:分库...

HASH

某个键值为15,那么根据该路由方式,则该键值15被分到1库的7上((15%(2*4)=7))。注意事项 HASH函数要求拆分列的值的自身分布均衡才能保证哈希均衡。使用限制 拆分键的数据类型必须是整数类型或字符串类型。字符串类型的拆分键路由时...

RANGE_HASH

描述 根据任一拆分键后N位计算哈希,然后再按分库数取余,完成路由计算。N函数第三个参数。例如,RANGE_HASH(COL1,COL2,N),计算时会优先选择COL1,截取其后N位进行计算。COL1不存在时再选择COL2。使用限制 拆分键的类型必须是字符类型...

HASH

某个键值为15,那么根据该路由方式,则该键值15被分到1库的7上((15%(2*4)=7))。使用场景 HASH函数主要应用与如下场景:适合于需要按用户ID或订单ID进行分库的场景。适合于拆分键是字符串类型的场景。示例 假设需要ID列按HASH函数...

事务拆分

背景信息 默认情况下,MyBase数据库代理会事务内的所有请求都发送到主实例以保障事务的正确性,但是某些框架会所有请求封装到非自动提交的事务中(通过 set autocommit=0;关闭自动提交),导致主实例负载过大,此时您可以使用事务拆分...

UNI_HASH

说明 按照键值或者哈希取余时,不会对键值会哈希进行截取。分库和分表都使用同一个拆分键进行UNI_HASH时,先根据分库键键值按分库数取余,再均匀散布到该分库的各个分表上。注意事项 UNI_HASH算法是简单取模,要求拆分列的值的自身分布...

UNI_HASH

本文介绍UNI_HASH的使用方式。注意事项 UNI_HASH算法是简单取模,要求拆分列的值的自身分布均衡才能保证哈希均衡。使用限制 拆分键的数据类型必须是整数类型或字符串类型。PolarDB-X 1.0 实例的版本需5.1.28-1508068或以上,关于实例...

Math

函数列表 函数原型 函数简介 static int abs(int v)返回一个int类型的绝对 static long abs(long v)返回一个long类型的绝对 static float abs(float v)返回一个float类型的绝对 static double abs(double v)返回一个double类型的绝对...

Math

函数列表 函数原型 函数简介 static int abs(int v)返回一个int类型的绝对 static long abs(long v)返回一个long类型的绝对 static float abs(float v)返回一个float类型的绝对 static double abs(double v)返回一个double类型的绝对...

数据管理

本文介绍了在 PolarDB-X 1.0 控制台上数据进行调整拆分键、关闭全扫描和查看结构的方法。前提条件 您需要先 连接到数据库 并 使用SQL语句创建 后,才能在控制台上管理数据。功能介绍 调整拆分键 拆分键即分库或分表的数据表字...

RDS无法查看新插入数据

例如在delete语句中增加where条件子句,限制每次删除的数据量,一次删除操作拆分为多次数据量较小的删除操作进行。这样只读实例可以迅速的完成事务的执行,不会造成数据的延迟。4)主实例的DDL语句执行时间长 对于DDL直接引起的只读实例...

TagResources-添加修改资源标签

DOMAIN Tag object[]是 标签键值对数组。Key string 否 标签。不能以 acs:或 aliyun,开头,长度不能超过 20 字节。abcd Value string 否 标签。长度不能超过 20 字节。abcd ResourceId array 是 资源 id。string 是 域名,当 Tag 数...

DQL操作常见问题

解决措施 SQL拆分为两层,层处理没有常量的DISTINCT逻辑,外层加入常量数据。在执行MaxCompute SQL过程中,报错Expression not in GROUP BY key,如何解决?问题现象 执行MaxCompute SQL时,返回报错如下。FAILED:ODPS-0130071:...

如何选择拆分键

数据表拆分的首要原则是尽可能找到数据所归属的业务逻辑实体,并确定大部分(或核心的)SQL操作或者具备一定并发的SQL都是围绕这个实体进行,然后可使用该实体对应的字段作为拆分。示例 业务逻辑实体通常与应用场景相关,下面的一些典型...

使用说明

如下图所示:新版定向服务:针对旧版定向服务APN内的定向卡无法拆分管理,新版定向服务增加分组管理功能,通过APN内的定向卡进行分组,以组为单位配置访问地址,可以给同一个APN内的定向卡分配不同的访问地址,实现灵活管控。具体操作,...

ListTagResources-标签查询资源

如果您同时指定多个标签键值对,返回结果同时包含被指定的多个键值对的资源。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下是API...

变更类型及拆分规则(DRDS模式)

PolarDB-X 新增支持变更表的类型(即在单拆分表和广播表三者间进行相互转换),和变更拆分表的拆分规则(包括拆分函数或拆分列)。本文介绍相关语法和示例,本语法仅适用于DRDS模式数据库。前提条件 仅内核小版本5.4.8或以上的 ...

基于RDS PostgreSQL构建由LLM驱动的专属ChatBot

这可以包括长文本拆分为段落或句子,提取关键词或实体等。这样可以知识库的内容更好地组织和管理。调用LLM接口生成embedding:利用LLM(如OpenAI)提供的接口,分块的文本信息输入到模型中,并生成相应的文本embedding。这些...

基于PolarDB PostgreSQL和LLM构建企业专属Chatbot

这可以包括长文本拆分为段落或句子,提取关键词或实体等。这样可以知识库的内容更好地组织和管理。调用LLM接口生成embedding:利用LLM(如OpenAI)提供的接口,分块的文本信息输入到模型中,并生成相应的文本embedding。这些...

PolarDB-X 1.0拆分的基本原则是什么?

关于 PolarDB-X 1.0 的数据拆分的基本原则,请参见 如何选择拆分键

使用Argo Workflow编排动态DAG Fan-out/Fan-in任务

在工作流编排过程中,为了加快大任务处理的速度,可以使用Fan-out Fan-in任务编排,大任务分解成小任务,然后并行运行小任务,最后聚合结果。分布式工作流Argo集群(简称 工作流集群)支持动态DAG方式编排Fan-out Fan-in任务,可按需调度...

事务拆分

本文将为您介绍 PolarDB PostgreSQL版 集群事务拆分的功能原理以及如何开启事务拆分。背景信息 当您使用 PolarDB PostgreSQL版 可读可写模式集群地址时,读写请求会由代理(Proxy)分发到主节点和只读节点。为了保证一个会话连接中事务读写...

全局索引

分区可以一个按照维度(分区拆分为若干个独立的子,通过对子的分别管理,达到提高可管理性、整体性能和负载均衡的效果。PolarDB PostgreSQL版 的许多用户大量的使用分区来管理自己的数据,其中较为典型的用法是以时间为...

全局索引

分区可以一个按照维度(分区拆分为若干个独立的子,通过对子的分别管理,达到提高可管理性、整体性能和负载均衡的效果。PolarDB PostgreSQL版(兼容Oracle)的许多用户大量的使用分区来管理自己的数据,其中较为典型的用法...

Redis集群中某个节点缓存无法写入

说明:例如含有数万成员的一个HASH Key拆分为多个HASH Key,并确保每个Key的成员数量在合理范围。在Redis集群架构中,拆分大Key能数据分片间的内存平衡起到显著作用。相关文档 排查Redis实例内存使用率高的问题 实时大Key和热Key统计 ...

概述

数据访问代理是蚂蚁金融科技自主研发的金融分布式数据库中间件,用于解决海量请求下数据访问的瓶颈及数据库的容灾问题,提供水平拆分、平滑扩缩容、读写分离的在线分布式数据库服务。十年来专注于为海量数据访问提供低消耗、高性能、高...

数组函数和运算符

sequence函数 sequence(x,y)通过指定的起始返回一个数,其元素起始范围连续且递增的。递增间隔默认1。sequence(x,y,step)通过指定的起始返回一个数,其元素起始范围连续且递增的。自定义递增间隔。...
共有50条 < 1 2 3 4 ... 50 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
弹性公网IP 短信服务 人工智能平台 PAI 金融分布式架构 对象存储 物联网平台
新人特惠 爆款特惠 最新活动 免费试用