实时消费Kafka数据
DATABASE:<db_name>USER:<user_name>PASSWORD:<password>HOST:<host>PORT:<adbpg_port>VERSION:2 KAFKA:INPUT:SOURCE:BROKERS:[,.]TOPIC:[PARTITIONS:()][FALLBACK_OFFSET:{ earliest|latest }][VALUE:COLUMNS:NAME:{<column_name>} TYPE:...
专业术语
identifier（标识符）关于连续查询（continuous query）的名字、数据库（database）名、field key、measurement的名字、保留策略（retention policy）的名字、tag key和用户（user）名的标记。相关术语：database，field key，measurement...
数据库优化
主要关系型数据库包括 云数据库 RDS MySQL 版、云数据库 RDS PostgreSQL 版、云数据库 RDS SQL Server 版、云原生数据库 PolarDB MySQL 版、云原生数据库 PolarDB PostgreSQL 版、云原生数据库 PolarDB 分布式版 等，主要NoSQL数据库包括 ...
使用ClickHouse-Local迁移上云
当您需要优化数据管理、提高数据访问性能和降低数据库维护成本时，您可以将自建数据库迁移至云数据库ClickHouse企业版。云数据库ClickHouse企业版通过ClickHouse-Local工具为您的迁移任务提供了简便且可靠的解决方案。什么是ClickHouse-...
背景信息以及准备工作
Data Lake Analytics（简称DLA）作为云上数据处理的枢纽，支持通过标准JDBC连接 阿里云关系型数据库（Relational Database Service，简称RDS）（MySQL、SQLServer、PostgreSQL）数据库、云服务器（Elastic Compute Service，简称ECS）上的...
接口说明
在指定的数据库database下进行DDL等操作，比如在指定的database下创建表 Result execute(String database,String sql);其中，Result对象表示SQL的执行结果，比如提交数据库的列表语句（"SHOW DATABASES"）后，可以通过Result获取到已经存在...
同步时源库为Db2 for LUW的注意事项及限制
Db2 for LUW同步至PolarDB-X 2.0 说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到目标数据库。类型 说明 源库限制 带宽要求：源库所属的服务器需具备足够出口带宽，否则将影响数据同步速率。待...
ALTER DATABASE
ALTER DATABASE 更改一个数据库的属性。简介 ALTER DATABASE 更改一个数据库的属性。第一种形式更改某些针对每个数据库的设置。只有数据库拥有者或者超级用户可以更改这些设置。第二种形式更改数据库的名称。只有数据库拥有者或者超级用户...
DROP DATABASE
删除指定数据库。语法 DROP DATABASE[IF EXISTS][catalog_name.]db_name 参数说明 参数 是否必选 说明 catalog_name 否 数据库的Catalog。db_name 是 数据库名，用于唯一识别一个数据库。示例 删除名为mydatabase的数据库。DROP DATABASE ...
RDS for SQL Server如何回收表空间
语法如下所示：DBCC CLEANTABLE({ database_name|database_id|0 },{ table_name|table_id|view_name|view_id }[,batch_size])[WITH NO_INFOMSGS]说明如下：语句 描述 database_name|database_id|0 待清除的表所在的数据库。如果指定0，则...
通过Logstash写入数据到AnalyticDB MySQL 2.0
但经过测试发现，在日志量非常大的情况下，通过jdbc方式写入分析型数据库MySQL版的性能较低，并且非常消耗CPU的资源（因为jdbc是单条记录写入的方式）。为此，我们优化了一个基于jdbc的Logstash output plugin插件，请参见 logstash-ouput-...
RDS for SQL Server如何回收表空间
语法如下所示：DBCC CLEANTABLE({ database_name|database_id|0 },{ table_name|table_id|view_name|view_id }[,batch_size])[WITH NO_INFOMSGS]说明如下：语句 描述 database_name|database_id|0 待清除的表所在的数据库。如果指定0，则...
管理Databases
db.list_database()删除Database 在删除指定数据库之前，请务必确保该数据库内所有关联的Collection已被彻底清除。否则，由于存在未清理的Collection，数据库的删除请求将无法成功执行。db.drop_database("milvus_demo")相关文档 关于管理...
使用DTS迁移副本集架构的自建MongoDB数据库上云
使用数据传输服务DTS（Data Transmission Service），将副本集架构的自建MongoDB数据库迁移至云数据库MongoDB中。DTS支持全量数据迁移和增量数据迁移，同时使用这两种迁移类型可以实现在不停服的情况下，平滑地完成数据库的迁移上云。除本...
从MySQL导入数据
当您需要将云数据库RDS MySQL或云原生数据库PolarDB MySQL中的数据迁移至 云数据库ClickHouse 中进行实时分析时，本文档为您提供了以RDS MySQL为参考的示例，以帮助您轻松完成数据迁移任务。前提条件 已创建目标 云数据库ClickHouse 集群，...
将ECS上分片集群架构的自建MongoDB迁移上云
说明 如果源或目标数据库是阿里云数据库实例（例如RDS MySQL、云数据库MongoDB等）或ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中，您无需手动添加，请参见 DTS服务器的IP地址...
配置Hologres输出组件
使用限制 不支持写入Hologres数据库的视图。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。在离线单条管道脚本的开发页面，按照下图操作指引，进入 Hologres输出配置 对话框。在 Hologres输出配置 对话框，配置...
从MongoDB副本集实例迁移至分片集群实例
如果数据库业务量较大或服务器规格较低，可能会加重数据库压力，甚至导致数据库服务不可用。建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。MongoDB实例支持的版本与存储引擎请参见 版本及存储引擎，如需跨版本或跨引擎迁移，...
同步时源库为PolarDB MySQL版的注意事项及限制
源实例为PolarDB MySQL版的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到如下目标数据库：MySQL（RDS MySQL、自建MySQL）...
使用限制
本文介绍ECS容灾服务在操作系统、基础架构、数据库和应用等方面的限制。操作系统 ECS容灾服务目前仅支持以下服务器版本。重要 暂不支持更多操作系统。其他操作系统建议您使用 云盘异步复制型容灾，其不受操作系统限制。操作系统 版本 ...
配置跨库Spark SQL节点
例如，从qntext数据库的ex_customer表读取数据，并写入到qn_rds数据库的test_table表中。qntext数据库的别名设置为qn，qn_rds数据库的别名设置为rds。输入的SQL语句如下：INSERT INTO rds.test_table SELECT*FROM qn.ex_customer;说明 SQL...
清除数据
您可以在控制台清除 云数据库 Redis 版 实例中的所有过期数据或所有数据。操作步骤 说明 在 参数设置 中禁用 FLUSHALL 命令不会影响控制台中 清除数据 功能。访问 Redis实例列表，在上方选择地域，然后单击目标实例ID。在 实例信息 页面，...
配置SQLServer数据源
此连接串中的Database为本数据源的默认数据库，但在配置同步任务时，您可以使用相应RDS实例下所有的数据库。用户名 登录数据库的用户名。密码 登录数据库的密码。选择 资源组连通性 类型为 数据集成。在资源组列表，单击相应资源组后的 ...
PolarDB-X 2.0迁移至Tablestore
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
PolarDB MySQL版同步至RDS MySQL
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
概述
回收站实际上是一个数据字典表，用于放置用户删除的数据库对象信息，包括用户删除的数据库和表等信息。背景信息 在对数据库对象进行删除操作时：如果回收站为开启状态，则该对象会进入回收站。在回收站中可以查询到被删除的对象，并可进行...
MongoDB（无分片键）同步至MongoDB（分片集群架构）
说明 不支持增量同步在任务开始运行后新建的数据库，支持同步的增量更新如下：CREATE COLLECTION、INDEX DROP DATABASE、COLLECTION、INDEX RENAME COLLECTION 在集合中插入、更新、删除文档的操作。数据库账号的权限要求 数据库 所需权限 ...
Db2 for LUW迁移至RDS MySQL
前提条件 已创建存储空间大于源 Db2 for LUW 数据库占用存储空间的目标 RDS MySQL 实例。创建方法，请参见 快速创建RDS MySQL实例。说明 支持的版本，请参见 迁移方案概览。如需执行增量迁移，您需要开启 Db2 for LUW 数据库的归档日志。更...
并行INSERT
当查询并行度较低时，逐步提升写入并行度，SQL执行时间将会逐渐下降并趋于平缓，趋于平缓的原因是查询速度跟不上写入速度而成为瓶颈。当查询并行度较高时，逐步提升写入并行度，SQL执行时间将会逐渐下降并趋于平缓；趋于平缓的原因是并行...
迁移时源库为MongoDB的注意事项及限制
如果迁移的源数据库类型为MongoDB，如自建MongoDB、云数据库MongoDB，您需要在配置具体的迁移任务前，参考本文的注意事项及限制，以保障数据迁移任务的正常运行。源库为MongoDB的迁移方案概览 根据如下迁移方案，查看迁移任务的注意事项及...
PolarDB-X 2.0同步至Tablestore
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
管理数据库
RDS MariaDB支持通过控制台、SQL命令、API接口管理数据库，包括创建、删除数据库。背景信息 概念 实例：实例是虚拟化的数据库服务器。您可以在一个实例中创建和管理多个数据库。数据库：数据库是以一定方式储存在一起、能与多个用户共享、...
同步时源库为PostgreSQL的注意事项及限制
源库为PostgreSQL的同步方案概览 根据同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到如下目标数据库：RDS PostgreSQL 云原生数据仓库AnalyticDB ...
同步时源库为MongoDB的注意事项及限制
如果同步的源数据库类型为MongoDB，如自建MongoDB、云数据库MongoDB，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。源库为MongoDB的同步方案概览 根据如下同步方案，查看同步任务的注意事项及...
并行INSERT
当查询并行度较低时，逐步提升写入并行度，SQL执行时间将会逐渐下降并趋于平缓，趋于平缓的原因是查询速度跟不上写入速度而成为瓶颈。当查询并行度较高时，逐步提升写入并行度，SQL执行时间将会逐渐下降并趋于平缓；趋于平缓的原因是并行...
配置Hologres输出组件
使用限制 不支持写入Hologres数据库的视图。操作步骤 请参见 配置离线单条管道，进入离线单条管道脚本的开发页面。在离线单条管道脚本的开发页面，按照下图操作指引，进入 Hologres输出配置 对话框。在 Hologres输出配置 对话框，配置参数...
处理慢SQL问题
在定位数据库的性能问题时，查找慢SQL（消耗较高的SQL语句）是比较常用且有效的方法。而高CPU消耗、高执行时间、高IO消耗以及高扫描行数的SQL语句都有可能是慢SQL。您可以通过DAS对数据库进行监控，及时发现并优化慢SQL，解决数据库的性能...
通过Kafka导入数据
database.server.name=test123#需要同步的数据库和表，默认是同步所有数据库和表 database.include.list=test table.include.list=test.test_table database.history.kafka.bootstrap.servers=localhost:9092#用于存储数据库表结构变化的 ...
同步时源库为MySQL的注意事项及限制
源库为MySQL的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到如下目标数据库：MySQL（RDS MySQL、自建MySQL）PolarDB MySQL版...
通过DataX导入RDS数据
无 table username String 否 数据库用户名 无 tsdbuser password String 否 数据库密码 无 tsdbpsw ignoreWriteError Bool 是 忽略写入错误 false true database String 否 导入TSDB的数据库名 default default 配置迁移任务 配置一个从...
- 产品推荐
- 这些文档可能帮助您