DML操作
目录 插入单条数据 插入多条数据 单值分区表插入数据 修改数据-单条数据 修改数据-用查询结果批量修改 说明 若您需对Dataphin中逻辑表进行DML操作，请参见 逻辑表DML操作。插入单条数据 INSERT INTO<table_name>VALUES(value1,value2,value...
使用DML插入、更新、删除数据
本文介绍在 AnalyticDB PostgreSQL 数据库中，如何使用DML语法插入、更新、删除数据。插入行（INSERT）说明 如果要插入大量数据，推荐使用外部表或者COPY命令，相比INSERT性能更好。使用 INSERT 命令在一个表中插入行。语法如下：INSERT ...
错误码
SQL过程异常 2F000 SQL过程异常（SQL ROUTINE EXCEPTION）2F005 执行的函数没有返回语句（FUNCTION EXECUTED NO RETURN STATEMENT）2F002 不允许修改SQL数据（MODIFYING SQL DATA NOT PERMITTED）2F003 企图使用禁止的SQL语句（PROHIBITED ...
SpringJDBC 连接 OceanBase 数据库
本文将介绍如何使用 Spring JDBC 框架、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入和查询数据等。点击下载 spring-jdbc-mysql-client 示例工程 前提条件 您已安装 OceanBase 数据库...
数据脱敏
概念介绍 数据脱敏：在数据处理和数据存储过程中，通过一定的算法和技术，将敏感数据进行加工处理、模糊化或替换，使得数据无法识别或难以还原，从而达到保护数据安全、防止数据泄露的目的。动态脱敏：对敏感数据进行实时的脱敏处理，只有...
数据查询
修改已有数据 支持修改 SQL表 和 HBase表 中已有的数据。单击目标行 操作 列中的 编辑。在 编辑表数据 对话框中，修改时间戳和数据值。单击 确定，保存修改后的数据。SQL执行器 在集群管理系统的左侧导航栏中，选择 数据查询>SQL执行器。在...
时空数据库版本发布记录
Scene SQL 数据类型支持gateway方式，支持存储在OSS上的OSGB对象。ST_ComputeViewShed 性能优化。Importer SQL 导入工具支持以gateway的模式导入基于OSS的OSGB数据。缺陷修复 Raster SQL 修复 ST_InterpolateRaster 函数崩溃问题。修复...
时空数据库版本发布记录
Scene SQL 数据类型支持gateway方式，支持存储在OSS上的OSGB对象。ST_ComputeViewShed 性能优化。Importer SQL 导入工具支持以gateway的模式导入基于OSS的OSGB数据。缺陷修复 Raster SQL 修复 ST_InterpolateRaster 函数崩溃问题。修复...
自动SQL限流
当数据库存在突发流量导致SQL并发量急剧上升、部分SQL占用大量数据库资源、或者大量未创建索引的SQL被调用等问题影响正常业务时，需要限制问题SQL的并发度，保障大部分的业务正常运转。数据库自治服务DAS支持自动SQL限流，会自动提取SQL...
自动SQL限流
当数据库存在突发流量导致SQL并发量急剧上升、部分SQL占用大量数据库资源、或者大量未创建索引的SQL被调用等问题影响正常业务时，需要限制问题SQL的并发度，保障大部分的业务正常运转。数据库自治服务DAS支持自动SQL限流，会自动提取SQL...
API概览
ModifyDataCorrectExecSQL 修改数据变更工单SQL脚本 修改数据变更工单提交的SQL脚本。PauseDataCorrectSQLJob 暂停执行数据变更工单SQL任务 暂停执行数据变更工单SQL任务。GetDataCorrectTaskDetail 获取工单任务详情 获取普通数据变更、...
如何支持超大事务
然后开启事务，执行以下语句，即每个事务会修改x条记录，修改x字节数据：UPDATE `tb` SET c=“b”where id每个事务执行一次该SQL，数据修改量为x字节，数据修改条数为x。考虑x=8 KB和8 MB的情况。测试结果 测试结论 当数据修改量在8 KB时，...
RDS MySQL I/O高问题
高吞吐导致实例I/O高 现象 如果表上有很多索引或大字段，频繁地更新、删除、插入，读取数据和刷新脏页时会有大量的I/O。您可以在控制台的 自治服务>性能趋势 页面，单击 性能趋势 页签，查看读写负载情况。解决方案 建议降低读写频率或升级...
SQL性能分析
如果优化一些修改数据的SQL 需要真实的执行但是不能影响现有的数据，可以放在一个事务中，分析完成后可以直接回滚。VERBOSE 会显示查询计划的附加信息，默认为FALSE。附加信息包括查询计划中每个节点输出的列（Output），表的SCHEMA信息，...
SQL性能分析
如果优化一些修改数据的SQL 需要真实的执行但是不能影响现有的数据，可以放在一个事务中，分析完成后可以直接回滚。VERBOSE 会显示查询计划的附加信息，默认为FALSE。附加信息包括查询计划中每个节点输出的列（Output），表的SCHEMA信息，...
离线同步数据质量排查
在写出端您可以尝试从下列常见情况对照排查：原因 问题描述 解决方案 写出模式选择导致 Writer插件会使用选择的写出模式将源头数据在目标端执行重放，如果源头数据和目标表结构出现数据约束，会对应导致数据插入失败（脏数据）、数据插入...
SQL洞察
SQL Review：对选定区间与基准区间内的数据库实例进行workload分析，并且对数据库实例中运行的SQL进行深度分析，展示数据库实例的索引优化建议、SQL改写建议、TOP SQL、新增SQL、失败SQL、SQL特征分析、执行变化SQL、性能恶化SQL和TOP流量...
审计日志
INSERT_INTO_TABLE 通过SQL插入表数据。DropPartition 删除分区。AddPartition 增加分区。运维中心日志事件 事件名称 事件说明 周期任务 CreateSupplementalWorkflow 创建补数据工作流。UpdateTask 暂停任务。UpdateTask 恢复任务。...
查询报错问题
用户使用的是普通表，且写入大量数据后未执行optimize操作，此时执行SQL会随着插入数据多而变得越来越慢。这是因为分析型数据库MySQL版的实时数据增量部分默认未建索引，因此执行查询时会频繁访问磁盘。为保证查询速度，建议当用户执行过...
表设计最佳实践
在增量表进行数据插入的过程中，会因为每次数据插入条数较少而造成增量表中的小文件问题。例如，每隔5分钟执行1次同步，每次同步的数据量为10条，一天内的增量为10000条，则会产生1000个小文件。此种场景下，需要在数据同步完成后合并全量...
SQL变更
SQL变更作为变更SQL执行的入口，需要极高的安全性。在工单提交、审批时，通过一系列的安全规则进行校验，只有满足规则校验的SQL，才能正常执行。前提条件 用户角色为 管理员、DBA 或 安全管理员。背景信息 数据管理DMS的安全规则具备非常...
RDS外部表
命令示例如下：查询数据插入结果。SELECT*FROM mc_vpc_rds_external;创建MaxCompute外部表的列名和RDS表指定的列名进行映射。在MaxCompute客户端创建外部表，表列名与RDS表中指定的列名进行映射。命令示例如下：set odps.sql.hive....
生成测试数据
覆盖：若数据有冲突则删除原数据插入新数据。终止：若数据有冲突则停止生成数据终止整个模拟数据任务。规则设置 设置数据生成规则。在 规则 和 细则 列中对选择的表中的 字段名称 和 字段类型 设置模拟数据生成的规则。其中 规则 列中会...
SQL Console新交互模式下变更表数据和结构（公测中）
新交互模式的SQL Console基于原SQL Console进行了升级，升级后的SQL Console支持在执行SQL前备份数据、定时执行SQL、预估SQL执行耗时和异步执行SQL等功能。背景信息 DMS新交互模式的SQL Console，支持如下执行SQL的方式：直接执行：建议...
ClickHouse概述
近实时数据更新，Clickhouse支持近实时的数据插入、指标聚合以及索引创建。支持索引 按照主键对数据进行排序，ClickHouse可以在几十毫秒以内完成对数据特定值或范围的查找。典型应用场景 场景 描述 用户行为分析 行为分析系统的表可以制作...
使用说明
但 commit in middle 并不能遵循严格意义上的事务原子性（Atomicity），因此您在使用过程中需要注意如下几点：假设需要开启一个事务插入大量数据，但在数据插入过程中，由于 commit in middle 功能，已经先提交了一部分数据，其它请求就...
SQL查询
如果需要快速地对数据进行查询与分析，您可以使用SQL语句查询MaxCompute、EMR Hive、Hologres等数据源。本文为您介绍如何通过SQL语句查询数据源。支持查询的数据源 SQL查询支持的数据源包含MaxCompute、Hologres、EMR Hive、EMR Spark SQL...
与标准SQL的主要区别及解决方法
数据插入表的字段映射不是根据SELECT的别名执行，而是根据SELECT字段的顺序和表中字段的顺序执行映射。无。UPDATE和DELETE 仅支持对Transactional表执行UPDATE和DELETE语句。解决方案请参见 如何删除MaxCompute表或分区中的数据？和 如何...
导入数据
本文介绍如何在SQL Console页面通过提交工单导入数据至数据库。使用场景 表数据迁移 表数据备份 表数据分析 前提条件 数据库类型如下：数据库类型 关系型数据库 MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、...
开发运维建议
对于线性顺序存储的数据（如流式数据、时间字段或自增字段），通常查询时使用范围查询，建议使用 BRIN 索引，减少索引的大小，加快数据插入速度。CREATE INDEX idx ON tbl using BRIN(id);建议避免全表扫描（大数据量扫描的数据分析除外）...
RDS MySQL如何使用Percona Toolkit
bulk-insert-no-version-check-statistics 注：bulk-insert：批量插入数据，会自动启用-bulk-delete和-commit-each，每次插入行数通过-limit选项指定。statistics：显示pt-archiver本次操作的统计信息。适用于 云数据库 RDS MySQL 版
时序引擎版本说明
行协议和API接口支持通过修改SQL可配置Schemaless模式，默认为schemaless。功能优化 修复删除表操作后重新写入数据会丢失数据的问题。修复api/v2/write接口格式错误时出现的NPE问题。修复/api/mquery接口查询多值降采样错误。修复历史文件...
插入数据
本文介绍了插入数据的相关内容。简介 当一个表被创建后，它不包含数据。在数据库可以有点用之前要做的第一件事就是向里面插入数据。数据在概念上是以每次一行地方式被插入的。你当然可以每次插入多行，但是却没有办法一次插入少于一行的...
将Excel的数据导入数据库
您可以将Excel的数据通过数据管理服务DMS（Data Management Service）导入到RDS MySQL数据库中。操作步骤 将Excel文件另存为.csv格式，并将中文或不符合数据库要求的列名修改为英文。说明 如果您的数据没有唯一的ID列，建议在最前方添加一...
基于MaxCompute实现拉链表
2.拉链存储的实现逻辑：业务日期当日ods_order_di新增或更新的所有数据插入dwd_order状态为有效数据、dwd_order中-有更新过的有效数据修改成失效数据。INSERT OVERWRITE TABLE dwd_order SELECT id,gmt_create,gmt_modified,`status`,start...
使用DataWorks同步数据
本文以MaxCompute为例介绍如何将数据通过DataWorks同步至 云数据库ClickHouse。背景信息 您可以通过DataWorks，将支持的各种数据源数据离线同步至 云数据库ClickHouse。离线同步支持的数据源类型，具体请参见 支持的数据源与读写插件。前提...
配置ClickHouse输出组件
同步其他数据源的数据至ClickHouse数据源的场景中，完成源数据的信息配置后，需要配置ClickHouse输出组件写入数据的目标数据源。本文为您介绍如何配置ClickHouse输出组件。前提条件 在开始执行操作前，请确认您已完成ClickHouse数据源及...
数据导入
当您需要将大批量数据导入至数据库时，可以使用数据管理DMS提供的数据导入功能，导入SQL、CSV、Excel类型的文件。前提条件 数据库类型如下：关系型数据库 MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB ...
表设计规范
在表设计阶段，需要特别注意区分数据的场景（批量数据写入、流式数据写入、周期性条式数据插入）。合理使用非分区表和分区表。建议采用分区表来设计日志表、事实表和原始采集表等，并按照时间进行分区。注意表和分区的限制条件。表数据存储...
按照SQL ID查询SQL样本数据
调用GetFullRequestSampleByInstanceId接口，按照SQL ID查询数据库实例SQL洞察结果中的SQL样本数据，最大返回20条样本数据。接口说明 SQL 洞察功能可对 SQL 进行健康情况诊断、性能问题排查，详情请参见 SQL 洞察。支持的数据库引擎请参见 ...
- 产品推荐
- 这些文档可能帮助您