REPLACE SELECT FROM
如果不存在，则直接插入新数据。语法 REPLACE INTO table_name[(column_name,.)]query;参数 query：可以是 SELECT FROM TABLE 或者 SELECT FROM VIEW。column_name：列名，如果需要将源表中的部分列数据插入到目标表中，SELECT 子句中的列...
INSERT INTO
注意事项 如果插入数据时不指定列名，则要插入的数据必须和 CREATE TABLE 语句中声明的列的顺序一致。示例 创建CUSTOMER和COURSES表。CREATE TABLE customer(customer_id bigint NOT NULL COMMENT '顾客ID',customer_name varchar NOT NULL...
REPLACE INTO
如果待写入数据不存在，则直接插入新数据。说明 本文所指的主键既包括单个列的主键，也包括由多列组成的复合主键（Composite Primary Key）。语法如下：REPLACE INTO table_name[(column_name,.)]VALUES({常量|NULL|DEFAULT},.),(.),.示例 ...
生成测试数据
ODC 支持如下处理方式：忽略：默认为忽略，若数据有冲突则冲突数据不被插入。覆盖：若数据有冲突则删除原数据插入新数据。终止：若数据有冲突则停止生成数据终止整个模拟数据任务。规则设置 设置数据生成规则。在 规则 和 细则 列中对选择...
PutRow
调用PutRow接口插入数据到指定的行。说明 如果指定行不存在，则新增一行；如果指定行存在，则覆盖原有行。返回结果中如果没有出现报错，则表示本次操作成功。请求消息结构 message PutRowRequest { required string table_name=1;required ...
RDS MySQL unique_checks参数导致复制中断
当在主实例上，设置unique_checks为0时，如果DML语句操作的数据不在buffer pool中，那么RDS MySQL不会通过读取磁盘上的主键和唯一键来对InnoDB表中的二级索引进行唯一性检查，此时主实例将成功插入重复的唯一键。而在备实例上，设置unique_...
RDS MySQL unique_checks参数导致复制中断
当在主实例上，设置unique_checks为0时，如果DML语句操作的数据不在buffer pool中，那么RDS MySQL不会通过读取磁盘上的主键和唯一键来对InnoDB表中的二级索引进行唯一性检查，此时主实例将成功插入重复的唯一键。而在备实例上，设置unique_...
分页
pageSize 每页条数，如果不填数据，则默认为每页10条。disabled 禁用的页数，参考数据示例。{ disabled:[3,6,9]} 数据项配置 说明 数据源 组件的数据源中通过 代码编辑 或 可视化编辑 展示了组件所包含的数据字段。也可以修改 数据类型，...
使用INSERT ON CONFLICT覆盖写入数据
如果不希望出现上述报错信息，可以使用本文介绍的覆盖写入特性来进行处理：使用ON CONFLICT DO NOTHING子句：主键冲突的情况下，不执行任何操作（适用于有冲突丢弃冲突数据的场景）。插入数据语句如下：INSERT INTO t1 VALUES(0,1,1,1)ON ...
DROP DATABASE
语法 DROP DATABASE[IF EXISTS]name[[WITH](option[,.])]其中选项 可以是:FORCE 参数 IF EXISTS 如果该数据库不存在则不要抛出一个错误，而是发出一个提示。name 要移除的数据库的名称。FORCE 尝试终止与目标数据库的所有现有连接。如果...
最佳实践
如果不需要更改表架构，则可以从Delta表中删除数据并插入新数据，或者更新表以修复不正确的值。如果要更改表架构，则可以atomic替换整个表。例如：dataframe.write \.format("delta")\.mode("overwrite")\.option("overwriteSchema","true...
INSERT ON CONFLICT(UPSERT)
在标准的PostgreSQL语义中，对数据源执行 INSERT ON CONFLICT 语句时，数据源不能包含重复数据，如果包含重复数据则会产生上述报错。说明 数据源重复是指待插入的数据中包含重复数据，不是指待插入的数据与表里的数据重复。使用 INSERT ON ...
MySQL实例间的双向同步
这种情况在同步过程中，如果源实例表A上进行了INSERT操作，则会导致表B在源实例跟目标实例数据不一致。此类情况须要将目标实例中的对应触发器删除掉，表B的数据由源实例同步过去，详情请参见 源库存在触发器时如何配置同步作业。RENAME ...
从Amazon RDS MySQL迁移至阿里云
警告 选择为 忽略报错并继续执行，可能导致数据不一致，给业务带来风险，例如：表结构一致的情况下，在目标库遇到与源库主键的值相同的记录，则会保留目标库中的该条记录，即源库中的该条记录不会迁移至目标库中。表结构不一致的情况下，...
从Amazon RDS MySQL迁移至阿里云
警告 选择为 忽略报错并继续执行，可能导致数据不一致，给业务带来风险，例如：表结构一致的情况下，在目标库遇到与源库主键的值相同的记录，则会保留目标库中的该条记录，即源库中的该条记录不会迁移至目标库中。表结构不一致的情况下，...
从Amazon Aurora MySQL迁移至阿里云
警告 选择为 忽略报错并继续执行，可能导致数据不一致，给业务带来风险，例如：表结构一致的情况下，在目标库遇到与源库主键的值相同的记录，则会保留目标库中的该条记录，即源库中的该条记录不会迁移至目标库中。表结构不一致的情况下，...
NULL值相关的函数
如果不能隐式转换，则数据库将返回一个错误。隐式转换的实现方式如下：如果 expr1 是字符数据，则数据库在比较它们之前将 expr2 转换为 expr1 的数据类型，并在 expr1 的字符集中返回 VARCHAR2 类型数据。如果 expr1 是数字类型，则确定...
如何支持超大事务
例如，在INSERT场景下，binlog需要记录插入的值，则事务对每个分片插入的数据量不应超过该值。如果想支持更大的事务，比如在一个事务中插入更多的数据，请把数据表划分到更多的分片上。场景二 在该场景下，执行SQL语句数量较少，每条语句...
使用批量更新
如果不存在，将它们插入数据库中。这种数据合并一般在离线完成。例如，设置每天一次批量把数据更新到 AnalyticDB PostgreSQL版 中。也有用户需要实时更新，要求做到分钟级甚至秒级延迟。简单更新过程 无论怎么做数据合并，都是对数据的修改...
离线同步常见问题
数据同步原则：来源端数据源的数据要能写入目的端数据源（来源端和目的端类型需要匹配，字段定义的大小需要匹配），即源端数据类型需要与写端数据类型匹配，源端是VARCHAR类型的数据不可写到INT类型的目标列中；目标端的数据类型定义的大小...
将Excel的数据导入数据库
可以选择 是否立即执行，如果不想立即执行，可以关闭 是否立即执行 开关，并选择一个期望开始执行时间，系统会在该时间自动执行。单击 确定执行。立即执行：系统默认。单击 确定执行 后，立即执行工单。定时执行：选择任务开始执行时间。...
数据存储冷热分层
示例 在 public 的Schema中创建一个普通表 tiered_storage_heap_oss 并插入数据。CREATE TABLE tiered_storage_heap_oss(a int,b int)DISTRIBUTED BY(a);INSERT INTO tiered_storage_heap_oss SELECT random()*1000,1 FROM generate_series...
表设计规范
说明 MaxCompute导入数据的通道只能是Tunnel SDK或执行INSERT INTO语句，请避免流式插入数据。以上各通道本身均由自身逻辑进行流式数据写入、批量数据写入和周期调度写入。当使用数据通道写入表或分区时，需将1次写入的数据量控制在合理...
自动同步PolarDB-X元数据
向 person 表中插入数据，示例如下：INSERT INTO person VALUES(1,23,'Bob','Hangzhou'),(2,33,'Make','Wuhan');为 person 表的 id 列创建列存索引，索引名为 person_col_index。CREATE clustered columnar INDEX `person_col_index` ON ...
谷歌BigQuery数据迁移至AnalyticDB PostgreSQL版
例如以下场景，您需要在表中插入新的库存商品以及库存数量，如果商品已存在，则更新现有商品的库存数量，示例如下。BEGIN;other operations SAVEPOINT sp1;INSERT INTO wines VALUES('hateau Lafite 2023','24');Assume the above fails ...
DML操作
不支持插入数据排序：insert {into|overwrite} table[partition()][([,<col_name>.)]<select_statement>from[zorder by[,<zcol_name>.]];插入或覆写动态分区数据（DYNAMIC PARTITION）是 多路输出（MULTI INSERT）是 VALUES 支持 insert…...
DML操作
不支持插入数据排序：insert {into|overwrite} table[partition()][([,<col_name>.)]<select_statement>from[zorder by[,<zcol_name>.]];插入或覆写动态分区数据（DYNAMIC PARTITION）是 多路输出（MULTI INSERT）是 VALUES 支持 insert…...
DLA Lakehouse实时入湖
说明 如果不设置该参数，则系统依次尝试选择表中的主键或唯一键来作为目标端主键字段；如果表中不存在主键或唯一键，则视为忽略同步。高级配置 目标端分区字段：为指定库表设置分区字段。例如：库表选择输入 db1.user_*，分区字段输入 gmt_...
并发控制
插入 更新，删除，合并 平台 插入 不能冲突 更新，删除，合并 在可序列化时可能会冲突，WriteSerializable 中不能发生冲突 在可序列化和 WriteSerializable 中可能发生冲突 平台 不能冲突 在可序列化和 WriteSerializable 中可能发生冲突 ...
表引擎
TinyLog 不支持并发读取数据文件，格式简单，查询性能较差，适用于暂存中间数据。StripeLog 支持并发读取数据文件，将所有列存储在同一个大文件中，减少了文件数，查询性能比TinyLog好。Log 支持并发读取数据文件，每个列会单独存储在一个...
从RDS同步到云原生数据仓库 AnalyticDB MySQL 版
警告 选择为 忽略报错并继续执行，可能导致数据不一致，给业务带来风险，例如：表结构一致的情况下，在目标库遇到与源库主键的值相同的记录，则会保留目标集群中的该条记录，即源库中的该条记录不会同步至目标数据库中。表结构不一致的情况...
CREATE POLICY
如果插入失败则用户可以推导出该值已经存在（这个例子假设用户被策略允许插入他们看不到的记录）。另一个例子是一个用户被允许向一个引用了其他表的表中插入，然而另一个表是隐藏表。通过用户向引用表中插入值可以判断存在性，成功表示该值...
从RDS同步到云原生数据仓库AnalyticDB MySQL
警告 选择为 忽略报错并继续执行，可能导致数据不一致，给业务带来风险，例如：表结构一致的情况下，在目标库遇到与源库主键的值相同的记录，则会保留目标集群中的该条记录，即源库中的该条记录不会同步至目标数据库中。表结构不一致的情况...
通过导入实现列更新
如果两批数据导入都更新了一个相同Key的不同列，则其中系统版本较高的导入任务会在版本较低的导入任务成功后，再使用版本较低的导入任务写入的数据行重新进行补齐。由于Merge-on-Write实现需要在数据写入的时候，进行整行数据的补齐以保证...
PolarDB MySQL版同步至AnalyticDB MySQL 3.0
源库中待同步的表无主键，则自动生成一个自增主键列，可能会导致源库和目标库数据不一致。已选择对象 如需更改单个同步对象在目标实例中的名称，请右击 已选择对象 中的同步对象，设置方式，请参见 库表列名单个映射。如需批量更改同步对象...
实时物化视图
删除实时物化视图 DROP MATERIALIZED VIEW[IF EXISTS]table_name[,.][CASCADE|RESTRICT]参数说明：参数 说明 IF EXISTS 如果该实时物化视图不存在则不抛出一个错误，而是发出一个提示。table_name 需要移除的实时物化视图的名称（可以是...
实时物化视图
删除实时物化视图 DROP MATERIALIZED VIEW[IF EXISTS]table_name[,.][CASCADE|RESTRICT]参数说明：参数 说明 IF EXISTS 如果该实时物化视图不存在则不抛出一个错误，而是发出一个提示。table_name 需要移除的实时物化视图的名称（可以是...
RDS MySQL同步至AnalyticDB MySQL 3.0
源库中待同步的表无主键，则自动生成一个自增主键列，可能会导致源库和目标库数据不一致。已选择对象 如需更改单个同步对象在目标实例中的名称，请右击 已选择对象 中的同步对象，设置方式，请参见 库表列名单个映射。如需批量更改同步对象...
RDS MySQL迁移至云原生数据仓库 AnalyticDB ...
警告 选择为 忽略报错并继续执行，可能导致数据不一致，给业务带来风险，例如：表结构一致的情况下，在目标库遇到与源库主键的值相同的记录，则会保留目标库中的该条记录，即源库中的该条记录不会迁移至目标库中。表结构不一致的情况下，...
列存索引如何实现高效数据过滤
对于存量数据来说，可以找个空闲时间进行变更操作，而如果查询条件很多不包含分区键，则建议采用其他优化手段。统计信息剪枝：由于写入时不排序，统计信息对于数据分布离散均匀的场景效果比较差，有以下优化方案：减小pack大小。对于minmax...
- 产品推荐
- 这些文档可能帮助您