配置并管理实时同步任务
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。实时同步支持的数据源及其配置详情请参见 实时同步支持的数据源。说明 数据源...
PolarDB-X 2.0数据源
mbps":"12"/限流，控制同步的最高速率，防止对上游/下游数据库读取/写入压力过大。} },"order":{"hops":[{"from":"Reader","to":"Writer"}]} } PolarDB-X 2.0 Writer脚本参数 脚本参数名 描述 是否必选 默认值 datasource 数据源名称。该...
MySQL数据源
您可以在MySQL数据库通过如下语句查看当前MySQL数据库版本。SELECT version();准备工作2：配置账号权限 建议您提前规划并创建一个专用于DataWorks访问数据源的MySQL账号，操作如下。可选：创建账号。操作详情请参见 创建MySQL账号。配置...
插件配置概述
Imap input plugin logstash-input-jdbc 通过JDBC界面，将任一数据库数据读取到Logstash中。Jdbc input plugin logstash-input-kafka 从Kafka主题读取事件。Kafka input plugin logstash-input-pipe 从长时间运行的管道命令中流式读取事件...
MariaDB数据源
mbps":"12"/限流，控制同步的最高速率，防止对上游/下游数据库读取/写入压力过大，此处1mbps=1MB/s。} },"order":{"hops":[{"from":"Reader","to":"Writer"}]} } MariaDB Writer脚本参数 脚本参数名 描述 是否必选 默认值 datasource 数据...
Kafka数据源
实时同步写入数据到Kafka时，写入的格式为内置的JSON格式，写入数据为包含数据库变更消息的数据、业务时间和DDL信息的所有数据，数据格式详情请参见 附录：消息格式。同步任务类型 写入Kafka value 的格式 源端字段类型 写入时的处理方式 ...
创建数据库用户
创建 DRC 用户 如果您需要读取 OceanBase 数据库的增量日志数据和数据库对象结构信息，请在源端 sys 租户下创建 DRC 用户。此处创建的 DRC 用户，用于创建 OceanBase 数据源时填写 高级选项 中的 用户名。CREATE USER<drc_user>IDENTIFIED ...
PolarDB PostgreSQL版（兼容Oracle）逻辑备份
数据库备份DBS 可满足 PolarDB PostgreSQL版（兼容Oracle）数据库的单表恢复、异地备份、长期归档等需求。本文介绍如何使用DBS备份 PolarDB PostgreSQL版（兼容Oracle）数据库。创建备份计划 具体操作，请参见 创建备份计划。说明 购买时，...
新建 OceanBase 数据源
该用户主要用于读取 OceanBase 数据库增量日志和数据库对象结构信息，请在业务集群 sys 租户下创建。密码 DRC 用户的密码。oblogproxy IP（可选）OceanBase 数据库增量日志代理服务，以服务的形式，提供实时增量项目介入和管理能力，方便...
QlikView（2.0版）
本章节介绍如何通过QlikView连接 云原生数据仓库AnalyticDB MySQL版 2.0集群，并通过QlikView构建BI系统。...使用QlikView 在QlikView中读取到数据库数据后，用户可以利用QlikView进行更多数据操作。QlikView的使用请参见 QlikView。
背景信息以及准备工作
您还可以在DLA中创建 云数据库 Redis 版（简称Redis）的数据库连接（映射数据库），然后通过MySQL客户端或者MySQL命令行工具连接DLA，使用标准SQL语句操作Redis数据库数据。本文档将以DLA读取Redis中CSV和JSON两中类型的数据为例，介绍如何...
概述
OceanBase 云数据库集群实例可以通过添加备实例，组成一主多备的集群网络，主备实例之间保持数据同步，进一步提升数据库的高可用能力。原理介绍 主备实例架构为一主（Primary）多备（Physical_Standby），备实例不支持级联添加备实例。主备...
pg_dump
即使当前数据库正在被访问，也会对正在访问的数据进行一致的备份，并且在执行备份时不会阻止其他用户访问数据库（读取或写入）。更多详情请参见 pg_dump官网。备份文件格式 脚本文件：脚本文件为纯文本文件，其中包含将数据库重建到备份时...
RDS SQL Server I/O高问题
数据文件的读请求操作主要包括查询请求产生的数据页读取和数据库备份产生的数据页读取，事务日志文件在做备份时会有较多的读I/O负载，其他情况主要是写I/O负载。当发现实例的I/O吞吐较高时，您可以在 自定义指标 中增加以下性能指标，然后...
配置SAP Table输入组件
RFC_READ_TABLE是SAP系统自带的RFC函数，用于读取SAP数据库表的结构和数据。参数 描述 步骤名称 即SAP Table输入组件的名称。Dataphin自动生成步骤名称，您也可以根据业务场景修改。不超过64字符。数据源 可选取Dataphin中所有SAP Table...
配置SAP Table输入组件
RFC_READ_TABLE是SAP系统自带的RFC函数，用于读取SAP数据库表的结构和数据。参数 描述 步骤名称 即SAP Table输入组件的名称。Dataphin自动生成步骤名称，您也可以根据业务场景修改。不超过64字符。数据源 可选取Dataphin中所有SAP Table...
Postgres CDC（公测中）
Postgres CDC可用于依次读取PostgreSQL数据库全量快照数据和变更数据，保证不多读一条也不少读一条数据。即使发生故障，也能采用Exactly Once方式处理。本文为您介绍如何使用Postgres CDC连接器。背景信息 Postgres CDC连接器支持的信息...
配置同步任务中的数据来源和去向
成功将数据导入分析型数据库MySQL版后，您就可以使用分析型数据库MySQL版进行数据分析。进入 DataWorks控制台，单击对应项目操作栏中的 数据开发。单击左侧菜单栏中的 数据开发，右键单击 业务流程 新建一个流程。右键单击 步骤2 中新建的...
联合查询多个MySQL实例
创建两个MySQL实例 设置白名单 连接实例 写入测试数据 MySQL实例1中创建orders_db数据库和order_item表，写入测试数据：create table orders_db.order_item(id bigint not null primary key auto_increment,prod_id bigint comment '商品ID...
DTS订阅无法选择RDS只读实例
本文介绍DTS订阅时为什么无法选择RDS只读实例。原因 DTS订阅需要读取实例数据库Binlog日志，目前只读实例禁止Binlog读取，所以DTS订阅无法选择RDS只读实例。
CREATE DATABASE
语法 CREATE DATABASE[IF NOT EXISTS]db_name 参数 db_name：数据库名。密码规则如下：长度不超过64个字符。以小写字符开头。可包含字母、数字以及下划线（_）。不能包含连续两个及以上的下划线（_）。不能是analyticdb，analyticdb是内置...
管理数据库
设置以下参数：参数 说明 数据库（DB）名称 长度为2~64个字符。以字母开头，以字母或数字结尾。由小写字母、数字、下划线或中划线组成。数据库名称在实例内必须是唯一的。说明 数据库名称中如果包含-，创建出的数据库的文件夹的名字中的-会...
创建数据库
参数 说明 限制并发量 指对应数据库并发请求执行的上限量，默认不限制，您也可以使用高权限账号登录数据库后，使用 ALTER DATABASE<数据库名>CONNECTION LIMIT<并发量>;命令修改。表空间 指数据库所属的表空间，默认为 pg_default，表空间...
CREATE DATABASE
语法 CREATE DATABASE db_name[[WITH][OWNER[=]user_name];参数说明如下表所示。参数 描述 db_name 创建的数据库名称，只支持字母、数字、下划线（_）。user_name 被授权为数据库管理员的账号名称。执行该语句的账号默认成为新数据库的...
管理数据库
设置以下参数：参数 说明 数据库（DB）名称 长度为2~64个字符。以字母开头，以字母或数字结尾。由小写字母、数字、下划线或中划线组成。数据库名称在实例内必须是唯一的。说明 数据库名称中如果包含-，创建出的数据库的文件夹的名字中的-会...
创建数据库
语法：CREATE DATABASE[IF NOT EXISTS]$db_name 参数说明：db_name：数据库名。以小写字符开头，可包含字母、数字以及下划线（_），但不能包含连续两个及以上的下划线（_），长度不超过64个字符。说明 数据库名不能是analyticdb，...
CREATE DATABASE
本文介绍创建数据库的基本语法。CREATE DATABASE基本语法如下：CREATE DATABASE[IF NOT EXISTS]db_name[ON CLUSTER cluster];参数说明：db_name：数据库名。以小写字母开头，可包含字母、数字以及下划线（_），但不能包含连续两个及以上的...
ALTER DATABASE
如果想要修改时序数据库的指定属性，或为其添加新的数据库属性，您可以使用 ALTER DATABASE 语句。引擎与版本 ALTER DATABASE语法 仅适用于时序引擎。无版本限制。语法 alter_database_statement:=ALTER DATABASE database_identifier[WITH...
通过Mongo Shell管理数据库账号
roles":[{"role":"readAnyDatabase","db":"admin"}]} 查询目标数据库的所有数据库账号 说明 您可以通过 use database_name 命令切换数据库，其中 database_name 为目标数据库的名称。方式一：在目标数据库执行查询命令。show users 说明 ...
数据库管理
参数 说明 数据库（DB）名称 长度最多64个字符。以字母开头，以字母或数字结尾。由小写字母、数字、下划线或中划线组成。数据库名称在实例内必须是唯一的。支持字符集 选择utf8、gbk、latin1或utf8mb4。授权账号 选中需要访问本数据库的...
创建数据库
在进行数据写入和查询前，您需要先创建数据库。本文介绍如何使用DMS（Data Management Service）创建数据库。使用限制 每个 云数据库ClickHouse 集群最多可以创建256个数据库。前提条件 已完成快速入门的如下步骤。新建集群 创建账号 设置...
CREATE DATABASE
CREATE DATABASE语句用于创建数据库，并可以指定数据库的默认属性（如数据库默认字符集，校验规则等）。语法 create_database_stmt:CREATE {DATABASE|SCHEMA}[IF NOT EXISTS]database_name[database_option_list]database_option_list:...
CREATE EXTERNAL DATABASE
AnalyticDB MySQL 湖仓版（3.0）和 数仓版（3.0）支持通过 CREATE ...语法 CREATE EXTERNAL DATABASE[IF NOT EXISTS]<db_name>参数 db_name：外部数据库名。数据库名命名规则，请参见 命名约束。示例 CREATE EXTERNAL DATABASE adb_demo;
CREATE DATABASE
示例 创建数据库 CREATE DATABASE DB1;结果验证 您可以通过 SHOW DATABASES;语句，查看数据库是否创建成功。指定数据库属性 创建数据库DB1，其中数据存满30天后转入冷存储，存满60天后会被清除。CREATE DATABASE DB1 WITH(cold_boundary=30...
离线同步常见问题
读取MySQL数据库报错：The last packet successfully received from the server was 902,138 milliseconds ago 离线同步至MySQL报错：[DBUtilErrorCode-05]ErrorMessage:Code:[DBUtilErrorCode-05]Description:[往您配置的写入表中写入数据...
SQL命令管理数据库
删除数据库 执行如下命令，删除数据库：DROP DATABASE[TestDb]需注意，若您在删除数据库前没有对该数据库进行过任何备份，系统会返回如下提示信息：DROP DATABASE[TestDb]-Kindly reminder:your database[TestDb]does not exist any backup...
DROP DATABASE
语法 DROP DATABASE[IF EXISTS][catalog_name.]db_name 参数说明 参数 是否必选 说明 catalog_name 否 数据库的Catalog。db_name 是 数据库名，用于唯一识别一个数据库。示例 删除名为mydatabase的数据库。DROP DATABASE mydatabase;返回...
CDC问题
MySQL CDC源表需要连接数据库读取Binlog，当源表数量逐渐增加，数据库压力也会逐渐增加。为了解决数据库压力过大的问题，可以考虑通过将表同步到Kafka消息队列中，再通过消费Kafka中数据进行解耦。详情请参见 MySQL整库同步Kafka。如果是...
复制数据库SQL Server 2012及以上版本
您可以使用SQL命令复制数据库，您只需要使用存储过程sp_rds_copy_database指定源数据库和目的数据库即可。复制时间与数据库大小有关。说明 关于如何复制SQL Server 2008 R2版本实例的数据库，请参见 复制数据库SQL Server 2008 R2版。前提...
新建数据库
操作步骤 新建数据库 您可以使用以下两种方式来新建数据库：Hologres管控台新建数据库 Hologres管控台 支持以可视化的方式新建数据库，在Hologres管控台进入对应实例的详情页，选择 数据库管理，单击 新增数据库 进行创建。说明 当前版本的...
- 产品推荐
- 这些文档可能帮助您