产品和业务限制

当 磁盘水位≥90%,系统将拒绝用户的写数据请求,即写入数据会报错,读数据不受影响。当 80%≤磁盘水位,AnalyticDB MySQL版 系统为防止磁盘被占满而同时影响用户读写请求,系统规定此时用户可以写入数据,但是无法查询这部分数据,待 ...

授权与回收权限

数据板块 当表类型选择为 逻辑视图、建模逻辑表、标签逻辑 ,需要选择逻辑表所在的数据板块。当授权用户选择 生产账号 时,支持选择超过20数据板块。表所在项目 当表类型选择为 物理表、元表、镜像表、物理视图 时,需要选择物理表...

操作流程

通过云计算资源 将已存在数据库中的数据表,通过云计算资源扫描方式,导入 企业数据智能平台 系统,实现逆向创建逻辑。具体操作,请参见 通过云计算资源导入逻辑。通过Excel导入 将Excel表里的逻辑表表名、字段信息、所属层级、关联...

REPLACE SELECT FROM

写入数据,根据主键判断待写入的数据是否已经存在于中,如果已经存在,则先删除该行数据,然后插入新的数据;如果存在,则直接插入新数据。语法 REPLACE INTO table_name[(column_name,.)]query;参数 query:可以是 SELECT FROM ...

无锁结构变更

OceanBase MySQL 模式下的表名称超过 54 字符,OceanBase Oracle 模式下的表名称超过 118 字符。ODC 连接 OceanBase 社区版数据库数据源配置信息中需包含集群名和 SYS 租户账号。OceanBase Oracle 模式版本小于 4.0.0 或 ...

热点行优化

在前面提到的对更新操作进行分组的机制中,只有每组的Leader遍历索引定位数据行,之后把更新后的数据行缓存(Row Cache)在内存中,同组的Follower加锁成功后,直接从内存中读取目标数据行,而需要再次遍历索引。这样一来,从整体上减少...

同步源库为MySQL的注意事项及限制

在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据写入目标库,使用DMS执行在线DDL变更,可能引起目标库数据丢失。若目标库的DDL写入失败,DTS任务会继续运行,您需要在任务...

存储空间分析

在 空间总览 区域,可以查看 总数据量、热数据量、冷数据量、数据增长量 四个指标。指标类别 指标 说明 总数据量 总数据量 AnalyticDB for MySQL 集群所有的总数据量。热数据量 AnalyticDB for MySQL 集群所有的热数据量。说明 热数据...

Hudi数据

默认情况下,SelectDB的读请求只会读取Hudi最新版本的快照,您可以使用 FOR TIME AS OF 语句,根据快照的时间(时间格式 和Hudi官网保持一致)读取历史版本的数据。示例如下:SELECT*FROM hudi_tbl FOR TIME AS OF"2022-10-07 17:20:37;...

配置PolarDB输入组件

个表的数据写入同一个数据表时,使用union算法。更多union说明,请参见 交集(INTERSECT)、并集(UNION)和补集(EXCEPT)。表 选择数据同步的来源表:如果 来源表量 选择了 单表,在下拉列表中选择读取数据的表。如果 来源表 选择了 多...

层次调用规范

在完成数据仓库的分层后,您需要对各层次的数据之间的调用关系作出约定。层次调用规范 ADS应用层优先调用数据仓库公共层数据。如果已经存在CDM层数据允许ADS应用层跨过CDM中间层从ODS层重复加工数据。CDM中间层应该积极了解应用层数据...

配置数据校验

您可以在同步或迁移实例的 高级配置 阶段选择相应 数据校验方式,或者单独配置数据校验任务,以便及时发现数据不一致的问题。注意事项 经典网络的数据库实例暂不支持增量数据校验功能。开启多归并的实例暂不支持数据校验功能。运行状态...

配置逻辑表数据延迟

在调度配置页面,配置逻辑表的数据延迟。开启数据延迟,系统将自动重跑本逻辑在 最大延迟天数 周期内的全部数据。可选择 1~15天。如下所示:说明 当前逻辑无设置事件时间字段、无主键、逻辑已开启自定义物化支持开启延迟数据...

授权与回收权限

数据板块 当表类型选择为 逻辑视图、建模逻辑表、标签逻辑 ,需要选择逻辑表所在的数据板块。当授权用户选择 生产账号 时,支持选择超过20数据板块。表所在项目 当表类型选择为 物理表、元表、镜像表、物理视图、物化视图 时,需要...

配置逻辑表数据延迟

在调度配置页面,配置逻辑表的数据延迟。开启数据延迟,系统将自动重跑本逻辑在 最大延迟天数 周期内的全部数据。可选择 1~15天。如下所示:说明 当前逻辑无设置事件时间字段、无主键、逻辑已开启自定义物化支持开启延迟数据...

索引优化

避免在频繁更新的表上建Bitmap索引:Bitmap索引最适合用户只查询数据而更新数据的数据仓库应用,适合有大量并发事务修改数据的OLTP应用。合理使用表达式索引:索引列不必只是表的一列,而是可以是从表的一列或多列计算的函数或标量表达...

迁移源库为Redis的注意事项及限制

源库的操作限制:如仅执行全量数据迁移,请勿向源实例中写入新的数据,否则会导致源和目标数据不一致。为实时保持数据一致性,建议选择全量数据迁移和增量数据迁移。源库单机版Redis迁移到目标库集群版Redis的操作限制:由于集群cluster只...

配置AnalyticDB for MySQL 3.0输入组件

个表的数据写入同一个数据表时,使用union算法。表 选择数据同步的来源表:如果 来源表量 选择了 单表,在下拉列表中选择读取数据的表。如果 来源表 选择了 多表,则按照下图操作指引,添加读取数据的多个表。在①处配置筛选多表的表达式...

基础

然而,在 SQL 脚本中在创建每个表之前无条件地尝试移除它的做法是很常见的,即使发生错误也会忽略之,因此这样的脚本可以在表存在和存在都工作得很好(如果你喜欢,可以使用 DROP TABLE IF EXISTS 变体来防止出现错误消息,但这并非...

逻辑

同一个逻辑对应的所有物理的结构(包含字段名、字段类型)必须保持一致,若不一致则无法聚合扩展价值可为用户提供不一致数据预警。说明 逻辑库配置完成后,不支持用户自主调整。新增逻辑 非平台新增的逻辑,可以通过搜索 逻辑库 ...

外部概述

MaxCompute支持使用外部功能查询和分析存储于OSS等外部存储系统的数据。该机制使得用户可以无需将数据导入到MaxCompute内部存储,直接对外部数据进行操作,从而提供了数据处理的灵活性和方便性。背景信息 MaxCompute SQL作为分布式数据...

使用ETL分析实时订单

如果数据一直延迟未到,ETL能无限制地等待延迟的数据,因此需要建立延迟时间来处理乱序数据。比如10:00的数据已到达,但是9:59的数据还未到达,则ETL只会等待至“10:00+延迟时间”。如果9:59的数据在“10:00+延迟时间”后到达,则ETL会...

层次调用规范

在完成数据仓库的分层后,您需要对各层次的数据之间的调用关系作出约定。层次调用规范 ADS应用层优先调用数据仓库公共层数据。如果已经存在CDM层数据允许ADS应用层跨过CDM中间层从ODS层重复加工数据。CDM中间层应该积极了解应用层数据...

DescribeColumns-查询数据资产中列的数据

调用DescribeColumns接口查询数据安全中心连接授权的MaxCompute、RDS等数据资产中列的数据。接口说明 本接口一般用于敏感数据资产信息中列数据的查看,便于用户准确的对敏感数据进行分析。注意事项 DescribeColumns 接口已修订为 ...

变更管理

在任意时刻,所有的数据是同步一致的。Mutability 索引相关,表示对主的写入模式进行分类。支持的属性值如下:IMMUTABLE IMMUTABLE_ROWS MUTABLE_LATEST MUTABLE_ALL 详细说明,请参见 二级索引。开启动态列 为开启动态列功能。...

自建Oracle同步至云原生数据仓库AnalyticDB ...

警告 DTS在执行结构初始化时数据类型无法完全对应,请谨慎评估数据类型的映射关系对业务的影响,否则可能导致任务失败或数据不一致。关于数据类型映射关系的更多信息,请参见 结构初始化涉及的数据类型映射关系 暂不支持同步触发器。建议您...

数据表-数据概况

数据越来越多,期望对访问频次高的数据进行冷归档,以节省存储成本,此时结合访问次数可以快速区分访问频次较低的表。对于长时间未更新数据的表,期望尽快找到并对其进行清理或优化,此时可以结合数据最后更新时间快速定位到相关表。指标...

RDS MySQL与PolarDB MySQL版间的双向同步

在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据写入目标库,使用DMS执行在线DDL变更,可能引起目标库数据丢失。DTS默认同步到目标数据库中会取消外键约束,因此源数据库的...

ANALYZE

在规划需要遍历整个继承树的查询需要第二统计信息集。不过,在决定是否触发表上的自动分析,自动清理后台进程将只考虑父本身上的插入和更新。如果该很少被插入或者更新,只有手工运行 ANALYZE 才会把继承统计信息更新到最新。...

模式

当对象在任何其他没有模式限定的环境中被引用(修改、数据修改或查询命令),搜索路径将被遍历直到一个匹配对象被找到。因此,在默认配置中,任何非限定访问将只能指向公共模式。要把新模式放在搜索路径中,我们可以使用:```sql SET ...

概述

在只能提供最终一致性读的情况下,无论是A服务还是B服务,在进行数据读取,都无法保证读取到步骤1中最新写入的数据,从而给上层业务带来数据一致性问题。此前面对这种使用场景,只能将只读请求转发到RW节点上,以保证写后读的数据一致性...

PolarDB-X 2.0间的单向同步

在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据写入目标库,使用DMS执行在线DDL变更,可能引起目标库数据丢失。其他注意事项 DTS会在源库定时更新 `dts_health_check`.`ha_...

同步 OceanBase 数据库 MySQL 租户的数据至 Analytic...

当源端/目标端中存在 TIMESTAMP 时间类型,且该时间处于夏令时的规定时间范围时,因为源端/目标端对时间格式的处理方式不一致,可能导致源端数据写入目标端产生不一致的问题,存在一个小时的时差。例如,源端/目标端设置 TIMEZONE 为"+8:00...

PolarDB-X 2.0同步至RDS MySQL

在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据写入目标库,使用DMS执行在线DDL变更,可能引起目标库数据丢失。若目标库的DDL写入失败,DTS任务会继续运行,您需要在任务...

PolarDB-X 2.0同步至PolarDB MySQL版

在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据写入目标库,使用DMS执行在线DDL变更,可能引起目标库数据丢失。若目标库的DDL写入失败,DTS任务会继续运行,您需要在任务...

同步源库为PolarDB-X 1.0的注意事项及限制

在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据写入目标库,使用DMS执行在线DDL变更,可能引起目标库数据丢失。PolarDB-X 1.0 同步至MySQL或PolarDB MySQL版 类型 说明 源库...

PolarDB-X 2.0同步至云原生数据仓库 AnalyticDB MySQL...

源库中待同步的表无主键,则自动生成一个自增主键列,可能会导致源库和目标库数据不一致。已选择对象 如需更改单个同步对象在目标实例中的名称,请右击 已选择对象 中的同步对象,设置方式,请参见 库表列名单映射。如需批量更改同步对象...

RDS PostgreSQL同步至RDS MySQL

在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据写入目标库,使用DMS执行在线DDL变更,可能引起目标库数据丢失。若目标库的DDL写入失败,DTS任务会继续运行,您需要在任务...

同步源库为MongoDB的注意事项及限制

若您无需使用DTS提供的库结构同步功能(例如目标端已配置好数据分片),在 配置任务对象及高级配置 阶段中,同步类型 请勿勾选 库结构同步,否则可能会因为分片冲突而导致数据不一致或任务失败。MongoDB(分片集群架构)间单向同步 ...

DescribeColumnsV2-查询数据资产中列的数据V2

调用DescribeColumns接口查询数据安全中心连接授权的MaxCompute、RDS等数据资产中列的数据。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 云数据库 Redis 版 云数据库 RDS 数据库备份 DBS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用