分布式序列

使用如下:SELECT order_seq.nextval FROM dual 业务序列 如前面提到的,分布式序列功能基于数据库表实现,dbp_sequence 可以部署成单库单模式,同样也可以部署成分库分表模式,分库分表模式下有如下优点:提升 Sequence 的读写能力。...

基本概念

分区表能够利用分布式系统的查询优势,查询效率高。分区表可存储的数据量较大,通常可以存储千万条甚至千亿条数据。维度表 维度表,又称复制表,集群的每个节点都会存储一份维度表的全量数据。因此,复制表中的数据量不宜过大,最好不超过2...

分区表自动冷存

postgres 数据库中执行以下 SQL,为 db01 数据库创建一个名为 task1 的任务,该任务为每分钟检查子分区表数据,并自动将超过3个子分区的历史子分区转为冷存,并返回任务 ID:每分钟执行 postgres=>SELECT cron.schedule_in_database('task1...

分区表自动冷存

postgres 数据库中执行以下 SQL,为 db01 数据库创建一个名为 task1 的任务,该任务为每分钟检查子分区表数据,并自动将超过3个子分区的历史子分区转为冷存,并返回任务 ID:每分钟执行 postgres=>SELECT cron.schedule_in_database('task1...

移除分布式实例

分布式实例不支持直接释放,若您需要释放闲置的 云原生内存数据库Tair 分布式实例资源,您可以移除或释放分布式实例下各子实例,以节省资源。注意事项 在移除或释放实例的过程中,分布式实例中未被操作的实例可正常访问,不会发生闪断。...

移除分布式实例

分布式实例不支持直接释放,若您需要释放闲置的 云原生内存数据库Tair 分布式实例资源,您可以移除或释放分布式实例下各子实例,以节省资源。注意事项 在移除或释放实例的过程中,分布式实例中未被操作的实例可正常访问,不会发生闪断。...

基础术语

OceanBase OceanBase 是阿里巴巴与蚂蚁科技独立自主研发的一款分布式关系数据库产品,融合传统关系数据库分布式系统的优势,具备高可用、高性能、高可扩展性,在功能上兼容 MySQL 等特点,在通用硬件上提供金融级高可用的数据库服务。...

确认血缘

若上游节点产出的表分区值与下游节点依赖的表分区不匹配,您可根据业务需要综合考量,是否需要修改节点的调度参数配置,以此方式实现节点产出的表分区与节点依赖的表分区数据相匹配。若需依赖上游节点上一周期产出的表分区数据,您可考虑...

AUTO模式数据库与DRDS模式数据库

可以让您便捷地享受到分布式数据库的透明式分布、弹性伸缩和分区管理等诸多红利。PolarDB-X 5.4.13版本之前的数据库称为DRDS模式的数据库。这种模式的数据库不支持自动分区,创建时需使用DRDS专用的分库分表语法,指定分库分表键,否则...

数据规范

数据表分区 依赖数据源产出新分区 aime对接的离线数据往往是周期性更新的,这种情况下您可以将数据表的全量调度策略设置为“依赖数据源产出新分区”,这种策略下,aime会自动检测您的数据表是否有更新。为了使数据更新事件能够被aime...

分布式序列问题

分布式序列是否全局唯一 单分布式序列可以保证生成的序列 ID 全局唯一。分分表的分布式序列仅保证单个分片的序列 ID 唯一,如果需要确保分分表的分布式序列全局唯一,可以在序列 ID 中拼接分分表位,以此保证全局唯一。分布...

MaxCompute+API 数据

done表添加的分区必须是数据表中存在的分区,若数据表的分区有、ds="20220114"、ds="20220115"、ds="20220116",那么done表新加的分区也必须在数据表分区范围内;done表在插入数据时,attribute字段值为字符串类型的JSON串,如 {"swift_...

DDL语句

表操作 功能 当前是否支持 创建表 是 说明 对于创建的外部表,Dataphin支持使用msck repair补全外部表分区数据语法格式。具体操作,请参见 内置Extractor访问OSS。修改表的注释 是 修改表的修改时间 是 修改表的聚簇属性 支持增加聚簇属性 ...

DDL语句

表操作 功能 当前是否支持 创建表 是 说明 对于创建的外部表,Dataphin支持使用msck repair补全外部表分区数据语法格式。具体操作,请参见 创建OSS外部表。修改表的注释 是 修改表的修改时间 是 修改表的聚簇属性 支持增加聚簇属性 不支持...

分区表系统视图

PolarDB PostgreSQL版(兼容Oracle)提供了以下几个系统视图和系统函数,供您查看数据库分区表的相关信息。ALL_PART_TABLES 返回字段说明 列名 描述 owner 表的所有者。schema_name 表所在的schema。table_name 表名。partitioning_type ...

产品功能

分布式计算 提供简单、易用的分布式编程模型,支持进行大数据批处理。单机 随机挑选一台机器执行。更多信息,请参见 单机。广播 所有机器同时执行且等待全部结束。更多信息,请参见 广播。Map模型 类似于Hadoop MapReduce里的Map。只要实现...

分布式链路概述

分布式链路核心概念 下介绍分布式链路核心概念,方便查看和索引。名词 说明 应用拓扑 拓扑是对应用间调用关系和依赖关系的可视化展示。链路拓扑图中,每个图标元素代表一个节点,具体图标说明可参考 拓扑图元素说明。Trace ID 代表唯一一...

数据表

参数 分区参数,通过该参数来过滤分区表数据。同时筛选多个分区使用半角逗号(,)分隔。如果未配置该参数,则表示输入全表。例如:动态分区表,输入格式为 dt=${yyyyMMdd},其中${yyyyMMdd} 是系统参数,表示当前日期,${yyyyMMdd-1d} 表示...

基础术语

分支事务 action 一个分布式事务可能包含多个数据库本地事务,在分布式事务框架下,分支事务可能是一个分库上执行的 SQL 语句,或是一个自定义模式服务的调用。发起方 initiator 分布式事务的发起方负责启动分布式事务,通过调用参与者的...

概述

分布式事务可以与服务框架(SOFABoot、Spring Cloud、Dubbo 等)、数据源(数据访问代理、RDS、MySQL、OceanBase 等)、消息队列等蚂蚁集团中间件产品配合使用,轻松实现服务链路级事务、跨事务、消息事务及各种组合。分布式事务主要涉及...

常见问题

本文介绍 PolarDB-X 集中分布式一体化...A:PolarDB-X 支持 IMPORT DATABASE 的语法,会将集中式的数据对象自动转换成分布式形态的数据对象,基于 PolarDB-X 透明分布式的能力,升级到分布式形态的企业版后仍兼容原来集中式数据库的使用方式。

PyODPS读取分区表数据

本文为您介绍如何通过PyODPS读取分区表数据。前提条件 您需要完成以下操作:已 开通MaxCompute。已 开通DataWorks。在DataWorks上完成业务流程创建,本例使用DataWorks简单模式。详情请参见 创建业务流程。操作步骤 准备测试数据。创建表并...

产品功能

分布式计算 提供简单、易用的分布式编程模型,可以进行大数据跑批。单机:随机挑选一台机器执行。详情请参见 单机。广播:所有机器同时执行且等待全部结束。详情请参见 广播。Map模型:类似于Hadoop MapReduce里的Map。只要实现一个Map方法...

分布式事务问题

数据访问代理是否支持分布式事务 数据访问代理支持与分布式事务的集成使用。版本要求:数据访问代理 V2.9.5 或更高版本 分布式事务 V2.5.2 或更高版本 具体配置信息请参考 分布式事务>开发指南>依赖与配置项。在数据访问代理 V2.9.5 之前的...

如何使用表分区

对于数据库中的事实表以及一些比较大的表,建议您使用表分区。使用表分区功能,方便您定期进行数据删除(通过alter table drop partition命令可删除整个分区的数据)和导入(使用交换分区的方式,即alter table exchange partition命令可以...

不一致情况

事务状态不一致 事务中,遭遇单分区死锁,该分区将退出事务状态,其它分区可能仍然在事务状态,此时分区事务状态不一致,分布式数据库要求 client 仅能发送 rollback,而不会为 client 自动进行其它分区的 rollback 调用。事务开启时,...

配置集成管道质量监控

分区表达数据表为分区表,需配置分区表达,支持 分区表达类型 和 自定义分区表达。分区表达详情请参见 内置分区表达类型。分区预算 当前时间下,根据分析表达的推算分区。单击 确定,完成质量规则配置。说明 质量规则配置...

配置集成管道质量监控

分区表达数据表为分区表,需配置分区表达,支持 分区表达类型 和 自定义分区表达。分区表达详情请参见 内置分区表达类型。分区预算 当前时间下,根据分析表达的推算分区。单击 确定,完成质量规则配置。说明 质量规则配置...

天弘基金

业务挑战 在大规模分布式应用中,曾经的单体应用按横向和纵向的维度被拆分到集群的各个节点之中,为了解决服务及数据调用的问题,引入了分布式服务框架、分布式消息集群、分布式文件存储、分布式缓存等一系列服务。应用的拆分及分布式中间...

开通服务

本节介绍如何开通分布式事务服务。前提条件 已注册阿里云账号,并完成实名认证。操作步骤 开通 SOFAStack 产品服务。使用阿里云账号登录 阿里云官网。在上方菜单栏选择 产品与服务>中间件>金融分布式架构 SOFAStack。在 SOFAStack 产品主页...

开通SchedulerX

背景信息 阿里云分布式任务调度SchedulerX已于2021年09月01日正式商业化。操作步骤 登录 分布式任务调度平台。首次使用并登录分布式任务调度平台,在弹出的对话框中单击 开通。在 分布式任务管理 页面,单击 立即购买。在 确认订单 页面 ...

Tunnel SDK常见问题

问题现象 使用Tunnel SDK下载分区表数据,返回如下报错。ErrorCode=MissingPartitionSpec,ErrorMessage=You need to specify a partitionspec along with the specified table.产生原因 使用Tunnel SDK下载分区表数据时,需要指定分区列的...

功能特性

分区表实际就是对应分布式文件系统上的独立的文件夹,一个分区对应一个文件夹,文件夹下是对应分区所有的数据文件。分区表 外部表 OSS外部表 可以通过OSS外部表访问OSS目录下的数据文件中的非结构化数据,或将MaxCompute项目中的数据写入...

金融分布式架构

SOFAStack 包含构建金融级云原生架构所需的各个组件,提供微服务应用开发部署、监控运维、项目管理、容灾高可用等全栈式解决方案,助力各类应用轻松转型分布式云原生架构。

产品优势

兼容性保障 分布式事务是一个抽象的基于 Service 层的概念,与底层事务实现无关,也就是说在分布式事务的范围内,无论是关系型数据库 MySQL、Oracle,还是 KV 存储 MemCache,或是列存数据库 HBase,只要将对它们的操作包装成分布式事务的...

TRUNCATE TABLE

TRUNCATE TABLE 用于清空表数据或者表分区数据。语法 清空表数据。TRUNCATE TABLE db_name.table_name;清空表中的指定分区。TRUNCATE TABLE db_name.table_name PARTITION partition_name[,.];分区名的数据类型为bigint,您可以通过以下SQL...

什么是分布式任务调度SchedulerX

分布式任务调度SchedulerX是阿里巴巴基于Akka架构自研的新一代分布式任务调度平台,提供定时调度、调度任务编排和分布式批量处理等功能。您可以在控制台配置、管理您的定时调度任务、查询任务执行记录和运行日志,还可以通过工作流进行任务...

开通SchedulerX

背景信息 阿里云分布式任务调度SchedulerX已于2021年09月01日正式商业化。操作步骤 首次使用并登录分布式任务调度平台,在弹出的对话框中单击 开通。在 分布式任务管理 页面,单击 立即购买。在 确认订单 页面 服务协议 区域,选中 我已...

产品优势

微服务产品在蚂蚁集团内部已支撑数万个节点规模的分布式应用架构,具有高可用性、高可扩展性、高性能、高时效性、稳定可靠等核心优势,并提供丰富的功能来帮助用户简化分布式系统的管理,让业务开发人员可以专注于业务逻辑实现,提升研发...

分布式数字身份

蚂蚁区块链分布式身份服务 DIS(Decentralized Identity Service),是一种基于区块链的身份管理方案,提供实体身份的创建、验证和管理等一整套功能,实现更规范化地管理和保护实体数据,同时保证信息流转的真实性和效率,解决了跨机构的...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 云数据库 RDS 云数据库 Redis 版 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用