当 磁盘水位≥90%时,系统将拒绝用户的写数据请求,即写入数据会报错,读数据不受影响。当 80%≤磁盘水位时,AnalyticDB MySQL版 系统为防止磁盘被占满而同时影响用户读写请求,系统规定此时用户可以写入数据,但是无法查询这部分数据,待 ...
数据板块 当表类型选择为 逻辑视图、建模逻辑表、标签逻辑表 时,需要选择逻辑表所在的数据板块。当授权用户选择 生产账号 时,支持选择不超过20个数据板块。表所在项目 当表类型选择为 物理表、元表、镜像表、物理视图 时,需要选择物理表...
通过云计算资源 将已存在数据库中的数据表,通过云计算资源扫描方式,导入 企业数据智能平台 系统,实现逆向创建逻辑表。具体操作,请参见 通过云计算资源导入逻辑表。通过Excel导入 将Excel表里的逻辑表表名、字段信息、所属层级、关联...
写入数据时,根据主键判断待写入的数据是否已经存在于表中,如果已经存在,则先删除该行数据,然后插入新的数据;如果不存在,则直接插入新数据。语法 REPLACE INTO table_name[(column_name,.)]query;参数 query:可以是 SELECT FROM ...
OceanBase MySQL 模式下的表名称不超过 54 个字符,OceanBase Oracle 模式下的表名称不超过 118 个字符。ODC 连接 OceanBase 社区版数据库时,数据源配置信息中需包含集群名和 SYS 租户账号。OceanBase Oracle 模式版本小于 4.0.0 或 ...
在前面提到的对更新操作进行分组的机制中,只有每组的Leader遍历索引定位数据行,之后把更新后的数据行缓存(Row Cache)在内存中,同组的Follower加锁成功后,直接从内存中读取目标数据行,而不需要再次遍历索引。这样一来,从整体上减少...
在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据写入目标库时,使用DMS执行在线DDL变更,可能引起目标库数据丢失。若目标库的DDL写入失败,DTS任务会继续运行,您需要在任务...
在 空间总览 区域,可以查看 总数据量、热数据量、冷数据量、数据增长量 四个指标。指标类别 指标 说明 总数据量 总数据量 AnalyticDB for MySQL 集群所有表的总数据量。热数据量 AnalyticDB for MySQL 集群所有表的热数据量。说明 热数据...
默认情况下,SelectDB的读请求只会读取Hudi最新版本的快照,您可以使用 FOR TIME AS OF 语句,根据快照的时间(时间格式 和Hudi官网保持一致)读取历史版本的数据。示例如下:SELECT*FROM hudi_tbl FOR TIME AS OF"2022-10-07 17:20:37;...
多个表的数据写入同一个数据表时,使用union算法。更多union说明,请参见 交集(INTERSECT)、并集(UNION)和补集(EXCEPT)。表 选择数据同步的来源表:如果 来源表量 选择了 单表,在下拉列表中选择读取数据的表。如果 来源表 选择了 多...
在完成数据仓库的分层后,您需要对各层次的数据之间的调用关系作出约定。层次调用规范 ADS应用层优先调用数据仓库公共层数据。如果已经存在CDM层数据,不允许ADS应用层跨过CDM中间层从ODS层重复加工数据。CDM中间层应该积极了解应用层数据...
您可以在同步或迁移实例的 高级配置 阶段选择相应的 数据校验方式,或者单独配置数据校验任务,以便及时发现数据不一致的问题。注意事项 经典网络的数据库实例暂不支持增量数据校验功能。开启多表归并的实例暂不支持数据校验功能。运行状态...
在调度配置页面,配置逻辑表的数据延迟。开启数据延迟,系统将自动重跑本逻辑表在 最大延迟天数 周期内的全部数据。可选择 1~15天。如下所示:说明 当前逻辑表无设置事件时间字段、无主键、逻辑表已开启自定义物化时,不支持开启延迟数据...
数据板块 当表类型选择为 逻辑视图、建模逻辑表、标签逻辑表 时,需要选择逻辑表所在的数据板块。当授权用户选择 生产账号 时,支持选择不超过20个数据板块。表所在项目 当表类型选择为 物理表、元表、镜像表、物理视图、物化视图 时,需要...
在调度配置页面,配置逻辑表的数据延迟。开启数据延迟,系统将自动重跑本逻辑表在 最大延迟天数 周期内的全部数据。可选择 1~15天。如下所示:说明 当前逻辑表无设置事件时间字段、无主键、逻辑表已开启自定义物化时,不支持开启延迟数据...
避免在频繁更新的表上建Bitmap索引:Bitmap索引最适合用户只查询数据而不更新数据的数据仓库应用,不适合有大量并发事务修改数据的OLTP应用。合理使用表达式索引:索引列不必只是表的一列,而是可以是从表的一列或多列计算的函数或标量表达...
源库的操作限制:如仅执行全量数据迁移,请勿向源实例中写入新的数据,否则会导致源和目标数据不一致。为实时保持数据一致性,建议选择全量数据迁移和增量数据迁移。源库单机版Redis迁移到目标库集群版Redis的操作限制:由于集群cluster只...
多个表的数据写入同一个数据表时,使用union算法。表 选择数据同步的来源表:如果 来源表量 选择了 单表,在下拉列表中选择读取数据的表。如果 来源表 选择了 多表,则按照下图操作指引,添加读取数据的多个表。在①处配置筛选多表的表达式...
然而,在 SQL 脚本中在创建每个表之前无条件地尝试移除它的做法是很常见的,即使发生错误也会忽略之,因此这样的脚本可以在表存在和不存在时都工作得很好(如果你喜欢,可以使用 DROP TABLE IF EXISTS 变体来防止出现错误消息,但这并非...
同一个逻辑表对应的所有物理表的结构(包含字段名、字段类型)必须保持一致,若不一致则无法聚合扩展价值可为用户提供不一致数据预警。说明 逻辑库配置完成后,不支持用户自主调整。新增逻辑表 非平台新增的逻辑表,可以通过搜索 逻辑库 ...
MaxCompute支持使用外部表功能查询和分析存储于OSS等外部存储系统的数据。该机制使得用户可以无需将数据导入到MaxCompute内部存储,直接对外部数据进行操作,从而提供了数据处理的灵活性和方便性。背景信息 MaxCompute SQL作为分布式数据...
如果数据一直延迟未到,ETL不能无限制地等待延迟的数据,因此需要建立延迟时间来处理乱序数据。比如10:00的数据已到达,但是9:59的数据还未到达,则ETL只会等待至“10:00+延迟时间”。如果9:59的数据在“10:00+延迟时间”后到达,则ETL会...
在完成数据仓库的分层后,您需要对各层次的数据之间的调用关系作出约定。层次调用规范 ADS应用层优先调用数据仓库公共层数据。如果已经存在CDM层数据,不允许ADS应用层跨过CDM中间层从ODS层重复加工数据。CDM中间层应该积极了解应用层数据...
调用DescribeColumns接口查询数据安全中心连接授权的MaxCompute、RDS等数据资产表中列的数据。接口说明 本接口一般用于敏感数据资产信息表中列数据的查看,便于用户准确的对敏感数据进行分析。注意事项 DescribeColumns 接口已修订为 ...
在任意时刻,所有表中的数据是同步一致的。Mutability 索引相关,表示对主表的写入模式进行分类。支持的属性值如下:IMMUTABLE IMMUTABLE_ROWS MUTABLE_LATEST MUTABLE_ALL 详细说明,请参见 二级索引。开启动态列 为表开启动态列功能。...
警告 DTS在执行结构初始化时数据类型无法完全对应,请谨慎评估数据类型的映射关系对业务的影响,否则可能导致任务失败或数据不一致。关于数据类型映射关系的更多信息,请参见 结构初始化涉及的数据类型映射关系 暂不支持同步触发器。建议您...
数据越来越多,期望对访问频次不高的数据进行冷归档,以节省存储成本,此时结合访问次数可以快速区分访问频次较低的表。对于长时间未更新数据的表,期望尽快找到并对其进行清理或优化,此时可以结合数据最后更新时间快速定位到相关表。指标...
在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据写入目标库时,使用DMS执行在线DDL变更,可能引起目标库数据丢失。DTS默认同步到目标数据库中时会取消外键约束,因此源数据库的...
在规划需要遍历整个继承树的查询时需要第二个统计信息集。不过,在决定是否触发表上的自动分析时,自动清理后台进程将只考虑父表本身上的插入和更新。如果该表很少被插入或者更新,只有手工运行 ANALYZE 时才会把继承统计信息更新到最新。...
当对象在任何其他没有模式限定的环境中被引用(表修改、数据修改或查询命令)时,搜索路径将被遍历直到一个匹配对象被找到。因此,在默认配置中,任何非限定访问将只能指向公共模式。要把新模式放在搜索路径中,我们可以使用:```sql SET ...
在只能提供最终一致性读的情况下,无论是A服务还是B服务,在进行数据读取时,都无法保证读取到步骤1中最新写入的数据,从而给上层业务带来数据一致性问题。此前面对这种使用场景,只能将只读请求转发到RW节点上,以保证写后读的数据一致性...
在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据写入目标库时,使用DMS执行在线DDL变更,可能引起目标库数据丢失。其他注意事项 DTS会在源库定时更新 `dts_health_check`.`ha_...
当源端/目标端中存在 TIMESTAMP 时间类型,且该时间处于夏令时的规定时间范围时,因为源端/目标端对时间格式的处理方式不一致,可能导致源端数据写入目标端产生不一致的问题,存在一个小时的时差。例如,源端/目标端设置 TIMEZONE 为"+8:00...
在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据写入目标库时,使用DMS执行在线DDL变更,可能引起目标库数据丢失。若目标库的DDL写入失败,DTS任务会继续运行,您需要在任务...
在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据写入目标库时,使用DMS执行在线DDL变更,可能引起目标库数据丢失。若目标库的DDL写入失败,DTS任务会继续运行,您需要在任务...
在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据写入目标库时,使用DMS执行在线DDL变更,可能引起目标库数据丢失。PolarDB-X 1.0 同步至MySQL或PolarDB MySQL版 类型 说明 源库...
源库中待同步的表无主键,则自动生成一个自增主键列,可能会导致源库和目标库数据不一致。已选择对象 如需更改单个同步对象在目标实例中的名称,请右击 已选择对象 中的同步对象,设置方式,请参见 库表列名单个映射。如需批量更改同步对象...
在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据写入目标库时,使用DMS执行在线DDL变更,可能引起目标库数据丢失。若目标库的DDL写入失败,DTS任务会继续运行,您需要在任务...
若您无需使用DTS提供的库表结构同步功能(例如目标端已配置好数据分片),在 配置任务对象及高级配置 阶段中,同步类型 请勿勾选 库表结构同步,否则可能会因为分片冲突而导致数据不一致或任务失败。MongoDB(分片集群架构)间单向同步 ...
调用DescribeColumns接口查询数据安全中心连接授权的MaxCompute、RDS等数据资产表中列的数据。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权...