所有产出表都需要有物理主键或逻辑主键,并纳入周期性数据质量监控。单元测试 代码开发完成后,开发人员需要对代码进行单元测试,单元测试阶段包括以下内容:规范性检查。代码质量检查:建议单条SQL执行时间不超过30分钟。数仓特殊需求检查...
逻辑备份:逻辑备份是指数据库对象级备份,支持表、库两种维度的备份。库级备份时,针对不同模式的数据库,具体支持的数据库对象如下:MySQL 模式:表、视图、触发器、序列、同义词、类型、包、函数、存储过程。Oracle 模式:表、视图、...
无公网IP:Port的自建数据库(通过数据库网关DG接入):可通过数据库网关备份自建数据库,您需要提前为数据库实例配置数据库网关,并在此配置步骤选择目标 网关DG实例ID,配置方法请参见 通过数据库网关DG备份本地或第三方云的私网数据库到云...
返回信息如下时,表示当前使用的数据库为db02:current_database-db02(1 row)订阅Share,并设置Share的本地别名。IMPORT DATASHARE s01 AS s01a FROM DATABASE";为步骤3中查询到的目标库db01的UUID。在目标库db02中查询源库db01共享的数据...
MySQL自带的mysqldump工具可以实现将RDS MySQL逻辑备份文件恢复到自建数据库。本文介绍详细的逻辑备份恢复数据库操作步骤。说明 关于如何选择数据恢复方案,请参见 数据恢复方案概览。通过物理备份文件恢复到自建数据库请参见 RDS MySQL...
无公网IP:Port的自建数据库(通过数据库网关DG接入):可通过数据库网关备份自建数据库,您需要提前为数据库实例配置数据库网关,并在此配置步骤选择目标 网关DG实例ID。配置方法,请参见 通过数据库网关DG备份本地或第三方云的私网数据库到...
本文简单介绍逻辑订阅的使用流程,示例的流程如下:源实例的数据库src创建发布,发布表public.t1,然后在目的实例的数据库dst创建订阅sub1_from_pub1,订阅源库表public.t1。更多详情请参见 逻辑订阅原理与最佳实践。注意事项 您可以在单个...
18001 Not support CREATE DATABASE in db:schema 无法在该数据连接上进行CREATE DATABASE操作,请检查所用数据库连接是否正确。18002 非ADS user导致的失败信息。操作必须由ADS user进行,请确认当前使用的UMM账号是ADS用户账号。18003 NA...
当您需要将大批量数据导入至数据库时,可以使用数据管理DMS提供的数据导入功能,导入SQL、CSV、Excel类型的文件。前提条件 数据库类型如下:关系型数据库 MySQL:RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB ...
逻辑解码 逻辑解码是一种将对数据库表的所有持久更改抽取到一种清晰、易于理解的格式的处理,这种技术允许在不了解数据库内部状态的详细知识的前提下解释该格式。在本数据库中,逻辑解码通过解码预写式日志的内容来实现,预写式日志描述了...
REVOKE ALL ON DATABASE db1 FROM user1;或者 REVOKE ALL ON SCHEMA db1 FROM user1;删除指定权限 删除用户 user2 对数据库 db2 中的表 table2 所拥有的管理员权限。REVOKE ADMIN ON TABLE db2.table2 FROM user2;删除用户 user3 对表 ...
database="database_name"/数据库连接的超时时间。connectTimeout="10s")func main(){/打开数据库连接。url:=fmt.Sprintf("%s:%s@tcp(%s:%d)/s?timeout=s",user,password,host,port,database,connectTimeout)db,err:=sql.Open("mysql",url)...
问题描述 Dataphin汇总逻辑表补数据后表中有重复数据。问题原因 用户将维度逻辑表中字段类型从bigint修改为string类型,对应的汇总逻辑表主键字段类型未修改...解决方案 数据库重新建表后在Dataphin中重新补数据即可。适用于 Dataphin 公共云
检查和修改 Oracle 实例的系统配置 您需要进行下述操作:在源端 Oracle 数据库开启归档模式 在源端 Oracle 数据库开启补偿日志(可选)设置 Oracle 数据库的系统参数 在源端 Oracle 数据库开启归档模式 SELECT log_mode FROM v$database;...
列存提供丰富的索引能力和数据分布特征,可以有效加速计算过程中的数据定位与排布,通过SQL即可完成海量主键数据的增删改查。高吞吐 列存引擎吞吐能力支持水平扩展,提供每分钟TB级数据的读写能力。适用于车联网数据快速导入、模型训练数据...
在集群管理系统的概览页面,单击目标数据库下的目标表名。在 当前详情表格 区域,单击 查看表属性,查看 COMPRESSION 和 TTL 参数的值。如何进入集群管理系统,请参见 登录集群管理系统。指定Major Compaction周期 创建宽表时指定Major ...
数据库备份DBS可满足 PolarDB分布式版 实例异地备份、长期归档、分布式备份等需求。前提条件 数据库为PolarDB-X 1.0,存储类型为RDS MySQL,MySQL版本为MySQL 5.x。功能概述 功能 说明 备份SQL文件 采用逻辑备份技术,备份成JSON文件。备份...
备份内容 OceanBase 数据库的备份恢复功能支持对数据库的数据进行恢复操作,支持的数据包括用户权限、表定义、系统变量、用户信息、视图信息等逻辑数据以及其他数据。页面概览 进入集群实例工作台页面后,单击左侧导航栏的 备份恢复,进入...
数据库备份DBS 可满足 PolarDB MySQL版 数据库的单表恢复、异地备份、长期归档等需求。本文介绍如何使用DBS实现 PolarDB MySQL版 数据库的自动备份。注意事项 如需进行增量备份,请确保 PolarDB MySQL版 已开启Binlog(默认未开启)。更多...
问题描述 为维度逻辑表、事实逻辑表、汇总逻辑表分别运行任务补数据后,发现维度逻辑表与事实逻辑表都可查出补数据内容,但汇总逻辑表中无内容,日志提示“Result row size=0”。问题原因 由于汇总逻辑表需要使用维度逻辑表和事实逻辑表中...
操作步骤 您可以先创建一个新的RDS PostgreSQL数据库作为备库,然后在备库中同步主库的PostgreSQL数据,最后使用逻辑订阅功能,在备库中实时同步主库的数据,从而实现备库的功能。具体操作步骤请参考以下内容:登录 RDS控制台,参见 恢复...
为提供更好的跨库查询服务,跨数据库查询DSQL将于2023年06月30日进行升级,升级后,原DSQL控制台界面将下线并统一使用DMS的逻辑数仓功能进行跨库查询,应用程序访问DSQL的功能也将迁移至DMS逻辑数仓的一键JDBC功能中。背景信息 DSQL主要...
所有数据库 所有权限 Server级别角色:sysadmin Database级别角色:db_owner Server级别权限 CONNECT SQL SHUTDOWN CREATE ENDPOINT CREATE ANY DATABASE CREATE AVAILABILITY GROUP ALTER ANY LOGIN ALTER ANY CREDENTIAL ALTER ANY ...
说明 实例必须存在数据库才能进行逻辑备份。MariaDB 实例进行快照备份时请填写 Physical。实例支持的备份类型,请参见 备份数据。SQL Server 云盘实例进行快照备份时请填写 Snapshot。Physical BackupType string 否 备份方式,取值:Auto...
说明 实例必须存在数据库才能进行逻辑备份。MariaDB 实例进行快照备份时请填写 Physical。实例支持的备份类型,请参见 备份数据。SQL Server 云盘实例进行快照备份时请填写 Snapshot。Physical BackupType string 否 备份方式,取值:Auto...
说明 实例必须存在数据库才能进行逻辑备份。MariaDB 实例进行快照备份时请填写 Physical。实例支持的备份类型,请参见 备份数据。SQL Server 云盘实例进行快照备份时请填写 Snapshot。Physical BackupType string 否 备份方式,取值:Auto...
说明 实例必须存在数据库才能进行逻辑备份。MariaDB 实例进行快照备份时请填写 Physical。实例支持的备份类型,请参见 备份数据。SQL Server 云盘实例进行快照备份时请填写 Snapshot。Physical BackupType string 否 备份方式,取值:Auto...
主键检查 物理主键或逻辑主键是否成立。数据完整性检查 代码中引用的数据能否支撑实际需求。字段间逻辑检查 字段间的业务逻辑关系是否在数据上成立,例如余额=总的发放-总的回收。代码质量/BUG检查 历史拉链表检查断链/交叉链 使用标准SQL...
说明 实例必须存在数据库才能进行逻辑备份。MariaDB 实例进行快照备份时请填写 Physical。实例支持的备份类型,请参见 备份数据。SQL Server 云盘实例进行快照备份时请填写 Snapshot。Physical BackupType string 否 备份方式,取值:Auto...
test_logic_db LogicDbId long 是 逻辑库 ID,可通过调用接口 ListLogicDatabases 获取该参数的值。1*DatabaseIds array 是 逻辑库对应的所有物理库。long 是 如需修改逻辑库对应的物理分库,可通过调用接口 ListDatabases 或 ...
返回结果如下:+-+-+|DATABASE|CREATE DATABASE|+-+-+|db1|CREATE DATABASE `db1`/*LOCALITY="dn=polardbx-storage-0-master"*/|+-+-+1 row in set 您还可以通过如下命令查看创建在该数据库下的逻辑分库和物理分库信息:SHOW DS;...
database_name 逻辑库名称,该参数为可选项,若不指定,则默认为当前实例下的所有逻辑库。示例 将当前实例下所有库中的所有New Sequence转换为Group Sequence:CONVERT ALL SEQUENCES FROM NEW TO GROUP;将当前实例下product库中的所有New ...
1860*Logic boolean 否 是否为逻辑库,取值如下:true:逻辑库 false:物理库 说明 如果您的数据库 ID 为逻辑库 ID,此参数取值为 true。如果您的数据库 ID 为物理库 ID,此参数取值为 false。false TableId string 否 表 ID,回收表权限时...
数据库(Database)是表、索引、视图、存储过程、操作符的集合。您可以在一个 AnalyticDB PostgreSQL 实例中创建多个数据库,但是客户端程序一次只能连接上并且访问一个数据库,无法跨数据库进行查询。创建数据库 使用 CREATE DATABASE ...
GetRange一次扫描的数据 5000行或者4 MB 一次返回的行数超过5000行或者扫描的数据量超过4 MB,满足以上任一条件,数据将会按行级别被截掉并返回下一行数据主键信息。一次HTTP请求Request Body的数据大小 5 MB 无。一次读请求时的过滤器个数...
ALTER DATABASE 更改一个数据库的属性。简介 ALTER DATABASE 更改一个数据库的属性。第一种形式更改某些针对每个数据库的设置。只有数据库拥有者或者超级用户可以更改这些设置。第二种形式更改数据库的名称。只有数据库拥有者或者超级用户...
步骤三:配置事实逻辑表计算逻辑 在 计算逻辑 页面,配置事实逻辑表的来源数据与主键间的映射关系。单击 来源配置,进入 来源配置 对话框并在 来源配置 对话框中,配置来源参数。说明 建议不要在过滤条件或自定义SQL中额外设置对事件时间的...
步骤三:配置事实逻辑表计算逻辑 在 计算逻辑 页面,配置事实逻辑表的来源数据与主键间的映射关系。单击 来源配置,进入 来源配置 对话框并在 来源配置 对话框中,配置来源参数。说明 建议不要在过滤条件或自定义SQL中额外设置对事件时间的...
现象 使用SDK查询数据时出现如下异常:Caused by:[ErrorCode]:OTSInvalidPK,[Message]:Validate PK name fail 原因 设置的主键名称和数据表的主键名称不一致,或者设置的主键顺序和数据表的主键顺序不一致。解决方案 设置的主键名称与主键...
目录 pg_database 存储有关可用数据库的信息。数据库通过CREATE DATABASE命令创建。和大部分系统目录不同,pg_database 是在集簇的所有数据库之间共享的:在一个集簇中只有一份 pg_database 拷贝,而不是每个数据库一份。列名称 列类型 ...