通过Kafka导入数据
database.server.name=test123#需要同步的数据库和表，默认是同步所有数据库和表 database.include.list=test table.include.list=test.test_table database.history.kafka.bootstrap.servers=localhost:9092#用于存储数据库表结构变化的 ...
功能优势
通过Web App调用分析型数据库MySQL版的自定义函数生成向量特征，分析型数据库MySQL版后台通过调用特征提取服务从OSS读取非结构化数据，提取特征，并把特征向量保存在分析型数据库MySQL版中。所有这些操作只需要一条SQL便可轻松完成，SQL...
使用限制
在使用云数据库MongoDB前，您需要了解不同类型云数据库MongoDB实例本身存在的约束信息，使您初步了解不同类型云数据库MongoDB实例的使用限制，以帮助您选择更适合业务场景的实例。单节点实例 功能 约束 实例部署 目前不是所有地域和可用区...
使用SSMS迁移上云
本文以Azure SQL Database为例，介绍如何使用SQL Server Management Studio（SSMS）将您本地自建或其他云的SQL Server数据库迁移到 RDS SQL Server。前提条件 已创建存储空间大于源库的目标 RDS SQL Server 实例，且 RDS SQL Server 实例需...
将ECS上分片集群架构的自建MongoDB迁移上云
说明 如果源或目标数据库是阿里云数据库实例（例如RDS MySQL、云数据库MongoDB等）或ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中，您无需手动添加，请参见 DTS服务器的IP地址...
使用DTS迁移分片集群架构的自建MongoDB数据库上云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），依次将本地MongoDB分片集群数据库中的各个Shard节点，迁移至阿里云MongoDB分片集群实例来实现迁移上云。通过DTS的增量迁移功能，可以实现在本地应用不停服的情况下，平滑...
将ECS上单节点或副本集架构的自建MongoDB迁移上云
本文为旧版DTS控制台操作步骤，新版DTS迁移上云方法如下：单节点架构上云：云数据库MongoDB版（单节点架构）全量迁移至云数据库MongoDB版（所有架构）副本集架构上云：云数据库MongoDB版（副本集架构）迁移至云数据库MongoDB版（副本集架构...
从MongoDB副本集实例迁移至分片集群实例
如果数据库业务量较大或服务器规格较低，可能会加重数据库压力，甚至导致数据库服务不可用。建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。MongoDB实例支持的版本与存储引擎请参见 版本及存储引擎，如需跨版本或跨引擎迁移，...
配置Hologres输出组件
使用限制 不支持写入Hologres数据库的视图。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。在离线单条管道脚本的开发页面，按照下图操作指引，进入 Hologres输出配置 对话框。在 Hologres输出配置 对话框，配置...
数据写入
Lindorm时序引擎支持六种数据写入方法：Native SDK写入、行协议写入、标准SQL写入、时间序列数据库TSDB接口写入、remote write数据写入、Flink数据写入。本文介绍数据写入的六种方法。Native SDK写入 Native SDK适用于Java开发者，Native ...
专业术语
identifier（标识符）关于连续查询（continuous query）的名字、数据库（database）名、field key、measurement的名字、保留策略（retention policy）的名字、tag key和用户（user）名的标记。相关术语：database，field key，measurement...
从自建Db2迁移至RDS MySQL
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建的Db2数据库迁移至RDS MySQL。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成Db2数据库的...
同步数据
分析型数据库MySQL版支持多种数据加载方式，包括但不限于：通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版，其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...
通过Logstash导入数仓版
commit_size：一次最多攒批数据量大小，和 flush_size 参数搭配使用，达到限定值即提交写入任务。上述配置文件只是一个示例，您需要根据实际业务配置 logstash-analyticdb.conf 文件。与 AnalyticDB MySQL 相关的其他配置请参见 README。更...
通过Logstash写入数据到AnalyticDB MySQL 2.0
但经过测试发现，在日志量非常大的情况下，通过jdbc方式写入分析型数据库MySQL版的性能较低，并且非常消耗CPU的资源（因为jdbc是单条记录写入的方式）。为此，我们优化了一个基于jdbc的Logstash output plugin插件，请参见 logstash-ouput-...
背景信息以及准备工作
Data Lake Analytics（简称DLA）作为云上数据处理的枢纽，支持通过标准JDBC连接 阿里云关系型数据库（Relational Database Service，简称RDS）（MySQL、SQLServer、PostgreSQL）数据库、云服务器（Elastic Compute Service，简称ECS）上的...
自建SQL Server通过物理网关迁移上云
本文介绍如何通过DTS控制台的物理网关迁移上云功能将ECS、IDC或其他云服务器中的自建SQL Server数据库迁移到RDS SQL Server。该功能采用物理网关协议的接入方式，具有速度快、操作简单、稳定性好、场景覆盖全等特点，能够有效提高迁移效率...
配置Hologres输出组件
使用限制 不支持写入Hologres数据库的视图。操作步骤 请参见 配置离线单条管道，进入离线单条管道脚本的开发页面。在离线单条管道脚本的开发页面，按照下图操作指引，进入 Hologres输出配置 对话框。在 Hologres输出配置 对话框，配置参数...
创建数据库和集合并写入数据
本文以DMS（Data Management Service）为例，介绍如何在云数据库MongoDB中创建数据库和集合并写入数据。前提条件 已完成快速入门的如下步骤：创建单节点实例（可选）重置密码 设置白名单 通过DMS连接MongoDB单节点实例（可选）创建数据库...
数据集成概述
说明 以业务数据库数据同步到MaxCompute数据仓库为例，当有大量的数据存储在数据库系统里，需要将数据库中的全量及增量数据同步到MaxCompute进行数仓分析时，数据集成传统方式是通过全量同步或者依赖数据库表中的 modify_time 等字段进行...
创建数据库和集合并写入数据
本文以DMS（Data Management Service）为例，介绍如何在云数据库MongoDB中创建数据库和集合并写入数据。前提条件 已完成快速入门的如下步骤：创建分片集群实例（可选）重置密码 设置白名单 通过DMS连接MongoDB分片集群实例（可选）创建数据...
常见报错
报错概览 配置备份计划时常见报错 源库测试连接失败 备份恢复预检查时常见报错 源库连接性检查失败 数据库权限检查失败 OSS检查失败 源库binlog开启检查失败 源库binlog模式检查失败 源库binlog_row_image是否为FULL检查失败 源库server_id...
创建数据流
支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB MySQL 3.0、其他来源MySQL SQL Server：RDS SQL Server、MyBase SQL Server、其他来源SQL Server PostgreSQL：RDS PostgreSQL、PolarDB ...
从采集到分析-TSDB For InfluxDB®让你的数据产生价值
urls选择实例详情中的公网或者VPC访问地址，修改上图标记中的写入的数据库和存储策略，存储策略在不填的情况下将会写入该数据库默认存储策略中。TSDB For InfluxDB®采用认证的方式写入，在填写username和password之前需要确保该账号对数据...
使用DTS将腾讯云MongoDB增量迁移至阿里云
如果数据库业务量较大或服务器规格较低，可能会加重数据库压力，甚至导致数据库服务不可用。建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。对于迁移失败的任务，DTS会触发自动恢复。当您需要将业务切换至目标实例时，请务必...
创建数据库和集合并写入数据
本文以DMS（Data Management Service）为例，介绍如何在云数据库MongoDB中创建数据库和集合并写入数据。前提条件 已完成快速入门的如下步骤：创建副本集实例（可选）重置密码 设置白名单 通过DMS连接MongoDB副本集实例（可选）创建数据库...
LOCK
因此，一旦您获得锁定，将不存在未完成的未提交写入；另外，在您释放锁定之前，没有用户可以开始操作。当在隔离级别 serializable 运行事务时，要实现相似效果，您必须先执行 LOCK TABLE 语句，然后再执行任何数据修改语句。在可串行化的...
配置SQLServer数据源
此连接串中的Database为本数据源的默认数据库，但在配置同步任务时，您可以使用相应RDS实例下所有的数据库。用户名 登录数据库的用户名。密码 登录数据库的密码。选择 资源组连通性 类型为 数据集成。在资源组列表，单击相应资源组后的 ...
通过Spark导入数据
云数据库 SelectDB 版 支持通过Spark SelectDB Connector，利用Spark的分布式计算能力导入大批量数据。本文介绍使用Spark SelectDB Connector同步数据至 云数据库 SelectDB 版 的基本原理和使用方式。功能介绍 Spark SelectDB Connector是...
CREATE DATABASE
CREATE DATABASE 用于创建数据库。创建数据库 说明 每个集群最多可以创建2048个数据库。语法 CREATE DATABASE[IF NOT EXISTS]db_name 参数 db_name：数据库名。密码规则如下：长度不超过64个字符。以小写字符开头。可包含字母、数字以及...
创建数据库
在进行数据写入和查询前，您需要先创建数据库。本文介绍如何使用DMS（Data Management Service）创建数据库。使用限制 每个 云数据库ClickHouse 集群最多可以创建256个数据库。前提条件 已完成快速入门的如下步骤。新建集群 创建账号 设置...
Flink数据导入
已在目标 AnalyticDB MySQL版 集群中创建数据库和数据表，用于保存需要写入的数据。数据库和数据表的创建方法，请参见 CREATE DATABASE 和 CREATE TABLE。说明 本文示例中创建的数据库名称为 tpch，建库语句如下：CREATE DATABASE IF NOT ...
DataGrip
本文测试了DataGrip与 云原生数据仓库AnalyticDB MySQL版 在连通性、列举数据库、创建表等方面的兼容性，并给出测试结果图。测试环境 MySQL JDBC Driver DataGrip mysql-connector-java-8.0.15 下载地址为 DataGrip。测试范围 连通性 列举...
ALTER DATABASE
ALTER DATABASE 更改一个数据库的属性。简介 ALTER DATABASE 更改一个数据库的属性。第一种形式更改某些针对每个数据库的设置。只有数据库拥有者或者超级用户可以更改这些设置。第二种形式更改数据库的名称。只有数据库拥有者或者超级用户...
数据库管理
数据库（Database）是表、索引、视图、存储过程、操作符的集合。您可以在一个 AnalyticDB PostgreSQL 实例中创建多个数据库，但是客户端程序一次只能连接上并且访问一个数据库，无法跨数据库进行查询。创建数据库 使用 CREATE DATABASE ...
pg_database
目录 pg_database 存储有关可用数据库的信息。数据库通过CREATE DATABASE命令创建。和大部分系统目录不同，pg_database 是在集簇的所有数据库之间共享的：在一个集簇中只有一份 pg_database 拷贝，而不是每个数据库一份。列名称 列类型 ...
管理数据库
创建RDS MariaDB实例后，您需要在实例中创建与您业务相关的数据库。RDS MariaDB支持通过控制台、SQL命令、API接口管理数据库，包括创建、删除数据库。背景信息 概念 实例：实例是虚拟化的数据库服务器。您可以在一个实例中创建和管理多个...
创建数据库
您可以使用DMS（Data Management Service）、客户端（Navicat for MySQL、DBeaver、DBVisualizer、SQL WorkBench/J）、业务系统中的程序代码或者MySQL命令行工具连接 云原生数据仓库...，然后通过CREATE DATABASE语句创建数据库...
实例规格和产品计费
本文介绍云时序数据库InfluxDB®的主实例规格，帮助您了解云时序数据库InfluxDB®主实例的最新规格信息和历史规格信息。存储价格 云时序数据库InfluxDB®目前提供三种存储类型：SSD云盘、高效云盘和ESSD PL1云盘。存储类型的说明如下表所示...
入门概述
本文介绍云数据库MongoDB实例从创建到连接使用的整体流程，指引您快速掌握...不同类型实例的创建方法如下：创建数据库和集合并写入数据（单节点实例）创建数据库和集合并写入数据（副本集实例）创建数据库和集合并写入数据（分片集群实例）
- 产品推荐
- 这些文档可能帮助您