Sysbench使用指南
使用简介 常用测试模型 Sysbench通过脚本定义了若干常用的压测模型，以下简单介绍几个常用模型：压测模型 描述 bulk_insert.lua 批量插入数据 insert.lua 单值插入数据 delete.lua 删除数据 oltp.lua 混合读写测试，读写比例14:4 select....
三个实例相互进行双向同步后出现数据缺失
通过数据传输服务（DTS）进行三个实例间的相互双向同步后，出现数据缺失。本文介绍如何避免这种情况的发生。问题描述 通过DTS配置三个实例之间的...同理，DB3同步至DB2的数据，会出现DB1缺少数据的情况。解决方法 请勿配置成上述同步场景。
主键与唯一键（DRDS模式）
本节介绍了在DRDS模式数据库中，判断表的主键是Global主键还是Local主键，表的唯一键是Global唯一键还是Local唯一键的方法。主键 在 PolarDB-X 中，主键分为Global主键与Local主键。区别如下：能保证全局唯一，就称为Global主键；只保证...
导入数据
写入方式 选择文件的写入方式：INSERT：插入数据时数据库会检查主键（PrimaryKey），如果出现重复会报错。INSERT_IGNORE：如果表中已经存在相同的记录，则忽略当前新数据。REPLACE_INTO：如果表中已经有某行数据（根据主键或者唯一索引判断...
表格存储（Tablestore）数据导入
向表中写入数据，示例如下：方式一：执行 INSERT INTO 导入数据，当主键重复时会自动忽略当前写入数据，不做更新，作用等同于 INSERT IGNORE INTO，详情请参见 INSERT INTO。示例如下：INSERT INTO adb_demo.adb_import_test SELECT*FROM ...
JDBC 连接池配置示例
对于大数据量的查询语句，数据库 Server 会建立 Cursor 并根据 FetchSize 的大小向 Client 分发数据。这个属性设为 TRUE，会自动连带设置 useServerPrepStms=TRUE。useServerPrepStms：控制是否使用 PS 协议来把 SQL 发送给数据库 server。...
数据导入
写入方式 选择文件的写入方式：INSERT：插入数据时数据库会检查主键（PrimaryKey），如果出现重复会报错。INSERT_IGNORE：如果表中已经存在相同的记录，则忽略当前新数据。REPLACE_INTO：如果表中已经有某行数据（根据主键或者唯一索引判断...
表设计最佳实践
在写入数据前进行数据的采集和整合，整合好后，一次性提交数据（通常是每64 MB提交1次）。日志数据很少会对原来分区执行更新操作，可以用INSERT操作进行少量数据的插入，但通常需要限制插入次数。如果有大量的更新操作，需要采用INSERT ...
如何使用RPA操作MySQL数据库
db.GdpDemo.update_date]#批量插入数据 db.GdpDemo.insert_many(data,fields=fileds_mapping).execute()rpa.system.dialog.msgbox("数据成功入库","当前时间{}:{}行数据已经成功写入到表gdp_demo中".format(datetime.now(),len(data)))#...
如何优化数据导入导出
导入导出工具介绍 PolarDB-X 常见的数据导出方法有：mysql-e命令行导出数据 musqldump工具导出数据 select into outfile语句导出数据（默认关闭）Batch Tool工具导出数据（PolarDB-X 配套的导入导出工具）PolarDB-X 常见的数据导入方法有：...
表删除，更新和合并
'eventId','eventType')#合并表，eventId相等则更新数据，不相等就插入数据 deltaTable.alias("events").merge(updatesDF.alias("updates"),"events.eventId=updates.eventId")\.whenMatchedUpdate(set={"data":"updates.data"})\....
新建表
在创建虚拟列时需要定义虚拟列依赖的表达式，虚拟列包含 Virtual Column 和 Stored Column，仅在使用时会根据表达式计算出虚拟列的值，因此在向表中插入数据的时候，不能为虚拟列指定要插入的值。缺省值/表达式 该字段（列）的默认值/表达...
通过HTTP API写入数据
有很多方法可以向TSDB For InfluxDB®写入数据，包括通过命令行界面（command line interface）和客户端（client libraries）。在这一章中，我们将向您展示如何使用内嵌的HTTP API写入数据。说明 本章节中的示例使用了curl,一种通过URL来...
通过外表导入至湖仓版
向表中写入数据，示例如下：方式一：执行 INSERT INTO 导入数据，当主键重复时会自动忽略当前写入数据，不做更新，作用等同于 INSERT IGNORE INTO，详情请参见 INSERT INTO。示例如下：INSERT INTO adb_demo.adb_import_test SELECT*FROM ...
数据变更最佳实践
本文介绍了更新、删除和导入的方法。向表中写入数据时，可以通过批量打包方式INSERT和REPLACE INTO提高数据写入性能。建议如下：通过每条INSERT或者REPLACE语句写入的数据行数大于1000行，但写入的总数据量不宜太大，不超过16MB。通过批量...
管理数据集合
},写入数据 您可以通过以下两种方式写入数据：通过 insertOne()方法逐条向集合写入数据。例如，使用 insertOne()方法为用户添加一个文档：mpserverless.db.collection('images').insertOne({ text:inputText,url:imageUrl,});通过 ...
表引擎
同时，插入一行相同主键数据的新状态行。INSERT INTO test_tbl_collapsing VALUES(4324182021466249494,5,146,-1),(4324182021466249494,6,185,1);查询数据。SELECT*FROM test_tbl_collapsing;查询结果如下。UserID─┬─PageViews─┬─...
Db2 for LUW迁移至阿里云消息队列Kafka版
数据传输服务DTS（Data Transmission Service）支持将 Db2 for LUW 数据库迁移至 阿里云消息队列Kafka版。前提条件 已创建存储空间大于源 Db2 for LUW 数据库占用存储空间的目标 阿里云消息队列Kafka版 实例。更多信息，请参见 概述。说明 ...
查询报错问题
用户使用的是普通表，且写入大量数据后未执行optimize操作，此时执行SQL会随着插入数据多而变得越来越慢。这是因为分析型数据库MySQL版的实时数据增量部分默认未建索引，因此执行查询时会频繁访问磁盘。为保证查询速度，建议当用户执行过...
Db2 for LUW迁移至PolarDB MySQL版
数据传输服务DTS（Data Transmission Service）支持将 Db2 for LUW 迁移至 PolarDB MySQL版 集群。前提条件 已创建存储空间大于源 Db2 for LUW 数据库占用存储空间的目标 PolarDB MySQL版 集群。创建方法，请参见 购买按量付费集群 和 购买...
Db2 for LUW迁移至云原生数据仓库 AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将 Db2 for LUW 迁移至 云原生数据仓库AnalyticDB PostgreSQL版。前提条件 已创建存储空间大于源 Db2 for LUW 数据库占用存储空间的目标 云原生数据仓库AnalyticDB PostgreSQL版 实例。...
Db2 for LUW迁移至RDS MySQL
数据传输服务DTS（Data Transmission Service）支持将 Db2 for LUW 迁移至 RDS MySQL。前提条件 已创建存储空间大于源 Db2 for LUW 数据库占用存储空间的目标 RDS MySQL 实例。创建方法，请参见 快速创建RDS MySQL实例。说明 支持的版本，...
云数据库MongoDB版（副本集架构）同步至函数计算FC
由于DTS的延迟时间是根据同步到目标库最后一条数据的时间戳和当前时间戳对比得出，源库长时间未执行更新操作可能导致延迟信息不准确。如果任务显示的延迟时间过大，您可以在源库执行一个更新操作来更新延迟信息。说明 如果同步对象选择为整...
MongoDB实例空间使用率高问题
通常情况下，在磁盘均衡度⽅⾯，hash分⽚的策略会⽐ranged好很多，因为根据不同的key值，云数据库MongoDB通过内部的哈希函数可以使得数据均匀地分布在不同地分⽚上，⽽range分⽚⼀般是根据key的⼤⼩范围进⾏数据分布，所以往往会造成这样的...
时序引擎版本说明
为提升用户体验，云原生多模数据库 Lindorm会不定期地发布版本，用于丰富云产品功能或修复已知缺陷。您可以参阅本文了解Lindorm时序引擎的版本更新说明，选择在业务低峰期升级实例的时序引擎版本。...修复执行插入数据语句时间列时间范围...
Db2 for LUW迁移至PolarDB-X 2.0
数据传输服务DTS（Data Transmission Service）支持将 Db2 for LUW 数据库迁移至 PolarDB分布式版。前提条件 已创建源 Db2 for LUW 数据库和目标 PolarDB分布式版 实例，支持的版本，请参见 迁移方案概览。说明 PolarDB分布式版 需兼容...
离线同步读取MongoDB数据
在进行数据同步前，您需要参考下文的数据准备，将待同步的MongoDB数据准备好，并创建一个用于同步数据的MaxCompute表。前提条件 本实践进行操作时，需满足以下条件。已开通DataWorks并绑定MaxCompute引擎。本实践使用独享数据集成资源组...
性能白皮书
本文以 RDS MySQL 间的单向同步实例为例，为您介绍数据传输服务DTS（Data Transmission Service）性能测试的测试环境、测试工具、测试方法与测试结果。测试环境 数据库信息 说明 测试中使用的 RDS MySQL 均已开启自动扩容功能。类别 地域 ...
异构数据源访问
若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源（HDFS、Hive和JDBC）时，可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...
何时选择间隔（Interval）分区
向RANGE分区表插入数据时，如果插入的数据超出当前已存在分区的范围，将无法插入并且会返回错误；而对于INTERVAL RANGE分区表，当新插入的数据超过现有分区的范围时，允许数据库自动创建新分区，根据INTERVAL子句指定的范围来新增分区。...
插入Doc
本文介绍如何通过Python SDK向Collection中插入Doc。说明 插入Doc时若指定id已存在，已存在的Doc不会被覆盖，本次插入Doc操作无效。插入Doc时若不指定id，则在插入过程中会自动生成id，并在 返回结果 中携带id信息。前提条件 已创建Cluster...
基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...
分区信息 设置数据入湖存储时的分区，后续入湖同步写入数据时，根据来源端数据的写入时间落入相应的分区里。分区设置注意事项如下：支持使用${yyyy}（年）、${MM}（月）、${dd}（日）、${HH}（时）这些变量，最小粒度到小时，不支持分钟、...
通过HTTP API查询数据
HTTP API是TSDB For InfluxDB®查询数据的主要方式（其它查询数据的方法可查阅文档 命令行界面 和 客户端）。注释：本章节中的示例使用了 curl,一种通过URL来传输数据的命令行工具。执行一个查询，需要发送一个 GET 请求到/query 路径，...
事务隔离
不可重复读 一个事务重新读取之前读取过的数据，发现该数据已经被另一个事务（在初始读之后提交）修改。幻读 一个事务重新执行一个返回符合一个搜索条件的行集合的查询，发现满足条件的行集合因为另一个最近提交的事务而发生了改变。序列化...
使用参考
注意 说明 事件监听根据监听的范围不同会产生一定的消耗，监听的范围越大，产生的消耗也越大监听事件触发时会返回 ref 下所有数据，请避免在会返回大量数据的 ref 上进行监听，如只关心变化事件，可使用 ref.orderByXXX().limitToFirst()等...
SpringJDBC 连接 OceanBase 数据库
执行插入数据的 SQL 语句，jdbcTemplate 对象通过调用 update 方法，执行了上述定义的插入数据的 SQL 语句。在控制台输出一条成功插入数据的消息。代码如下：String insertDataSql="INSERT INTO test_springjdbc(id,name)VALUES(1,'A1'),(2...
RDS MySQL同步至AnalyticDB for PostgreSQL ...
通过DTS提供的数据同步功能，可以轻松实现数据的流转，将企业数据集中分析。前提条件 已创建源 RDS MySQL 实例，创建方式，请参见 快速创建RDS MySQL实例。已创建目标 AnalyticDB PostgreSQL版Serverless模式 实例，且实例内核版本为V1.0.3...
Stream Load
这样同一批次数据的重复请求只会被接受一次，保证了At-Most-Once。当label对应的导入作业状态为CANCELLED时，该label可以再次被使用。format 指定导入数据格式，支持CSV、JSON、PARQUET、ORC，默认值为CSV。支持csv_with_names（CSV文件行...
Flink_SQL任务开发方式
不同开发方式的使用方法、使用场景以及优缺点不同。本文将为您介绍各开发方式帮助您更好的完成Flink_SQL任务开发。Dataphin计算源物理表开发方式 Dataphin计算源物理表开发方式是指您在开发Flink_SQL任务时，您可以直接通过写 项目名.表...
分析数据
数据探查通过列分析的方法，探查每列数据的类型和值的分布。您可以选中需要分析的数据，单击菜单栏中的 数据探查，即可在电子表格顶部，以图形和富文本的形式，为您展示每列数据的类型、值分布的概览情况。数据探查简单模式的说明如下：...
- 产品推荐
- 这些文档可能帮助您