配置并管理实时同步任务
单击 下一步 如果您前一步中目标数据源使用的 表建立方式 为 自动建表，则需要在弹出的 自动建表 对话框，单击 开始建表，批量创建目标MaxCompute表。DDL消息处理规则设置。来源数据源会包含许多DDL操作，数据集成体提供默认处理策略，您也...
配置并管理实时同步任务
NAME_DEST：目的端数据库名称 TABLE_NAME_DEST：目的端表名称 TABLE_NAME_SRC：源端表名称 单击 下一步 如果您前一步中目标数据源使用的 表建立方式 为 自动建表，则需要在弹出的 自动建表 对话框，单击 开始建表，批量创建目标Hologres表...
配置并管理实时同步任务
在 选择同步的源表 区域，为您展示所选数据源下所有的表，您可以在 源端库表 区域选中需要同步的整库全表或部分表，并单击 图标，将其移动至 已选库表。重要 如果选中的表没有主键，将无法进行实时同步。在 设置表名到Topic的映射规则 区域...
一键实时同步至MaxCompute
使用限制 仅支持与当前工作空间同地域的自建MaxCompute数据源，跨地域的MaxCompute项目在测试数据源服务连通性时可以正常连通，但同步任务执行时，在MaxCompute建表阶段会报引擎不存在的错误。说明 使用自建MaxCompute数据源时，DataWorks...
Kafka单表实时入湖OSS（HUDI）
保存 建表结构 或者选择 使用已有表 时，系统会自动按照 同名映射 原则生成上游列与OSS表列之间的映射，您可根据需要进行调整，支持一个上游列映射到多个OSS表列，不允许多个上游列映射到一个OSS表列，当上游列未配置到OSS表列的映射时，...
创建数据流
是否自动建表 打开或关闭 是否自动建表 开关。开关关闭：如果表不存在，在执行任务时不会自动创建表，任务流会执行失败。开关打开：如果表不存在，在执行任务时会自动创建表，任务流继续执行。OSS：配置项 描述 数据库类型 选择OSS。OSS ...
数据湖管理FAQ
例如一键建仓会跳过表名、字段名为中文的表。如果您发现表名和字段名都不是中文可以检查所填写的 JDBC账户是否具有该表的访问权限。如何处理一键建仓任务失败，报错：mppErrorCode=30101,because Direct buffer memory.？原因：Presto公共...
概述
本文介绍如何使用 Create Table Like Mapping 填写建表的字段信息。...目前支持的数据源如下：MySQL SQLServer PostgreSQL Oracle MongoDB OSS ADBPG 相关文档 基于MongoDB集合自动推断建表 基于OSS文件自动推断建表 基于RDS表自动推断建表
自建数据源Elasticsearch
本文为您介绍如何添加自建Elasticsearch数据源。说明 受数据源本身语法限制，Elasticsearch数据源的LIMIT不支持OFFSET，所以分页查询无法正常使用，建议使用Elasticsearch数据源创建图表时取消分页。前提条件 已创建自建Elasticsearch数据...
自建数据源Gbase
本文为您介绍如何创建自建数据源...将Gbase数据库中的数据表或自建的即席分析SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源Vertica
本文为您介绍如何创建自建数据源Vertica。仅专业版和高级版的群空间支持创建自建数据源Vertica。前提条件 请确保您的网络连通性：您通过公网连接Quick BI与Vertica数据库，请添加 Quick BI的IP地址 至数据库白名单，请参见 添加安全组规则...
自建数据源SAP IQ（Sybase IQ）
本文为您介绍如何创建自建数据源...将Sybase数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源SAP HANA
本文为您介绍如何创建自建数据源...将SAP HANA数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源Impala
本文为您介绍如何创建自建数据源Impala。仅专业版和高级版的群空间支持创建自建数据源Impala。前提条件 请确保您的网络连通性：您通过公网连接Quick BI与Impala数据库，请添加 Quick BI的IP地址 至数据库白名单，请参见 添加安全组规则。您...
自建数据源IBM DB2 LUW
本文为您介绍如何创建自建数据...将IBM DB2 LUW数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源PostgreSQL
本文为您介绍如何创建PostgreSQL...将PostgreSQL数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源SQL Server
本文为您介绍如何创建SQL Server...将SQL Server数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源MySQL
添加MySQL数据源用于连通MySQL数据库...将MySQL数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源Snowflake
创建Snowflake数据源用于连通...将Snowflake数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源Oracle
本文为您介绍如何创建Oracle类型的自...将Oracle数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源SelectDB
添加SelectDB数据源用于连通...将SelectDB数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源StarRocks
添加StarRocks数据源用于连通...将StarRocks数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源Kylin
新建Kylin数据源用于连通Kylin数据源...将Kylin数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源Apache Doris
添加Apache Doris数据源用于...将Apache Doris数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源ClickHouse
添加ClickHouse数据源用于连通...将ClickHouse数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源达梦
添加达梦数据源用于连通达梦数据库与...将达梦数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
自建数据源Kingbase
本文为您介绍如何创建自建数据源Kingbase。操作步骤 添加白名单。公网连接阿里云Kingbase数据库之前，需要将 Quick BI的IP地址 加入到Kingbase的白名单。登录 Quick BI控制台。按照下图指引添加数据源。从 创建数据源入口 进入创建数据源...
自建数据源Spark SQL
添加Spark SQL数据源用于连通...将Spark SQL数据库中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
AUTO模式数据库与DRDS模式数据库
上述DDL在DRDS模式数据库中创建出来的表是一张单表（如下图所示，默认不分区）：执行 SHOW 语句，查看完整建表语句：SHOW FULL CREATE TABLE tb \G*1.row*Table:tb Create Table:CREATE TABLE `tb`(`a` int(11)NOT NULL,`b` int(11)DEFAULT...
配置服务器防火墙
RDS PostgreSQL的一键上云功能支持将ECS或IDC自建PostgreSQL迁移到RDS PostgreSQL。本文介绍上云前，自建PostgreSQL配置服务器防火墙，设置数据库端口允许被访问。操作步骤 说明 本文以CentOS系统为例进行配置，其他系统请参见对应官方文档...
迁移方案概览
源库 目标库 迁移类型 配置文档 自建MySQL 5.1、5.5、5.6、5.7、8.0版本 RDS MySQL 所有版本 自建MySQL 5.1、5.5、5.6、5.7、8.0版本 RDS MySQL 所有版本 库表结构迁移 全量数据迁移 增量数据迁移 自建MySQL迁移至RDS MySQL RDS MySQL实例...
将自建ClickHouse数据迁移到云ClickHouse中
当您计划将自建数据库ClickHouse迁移到云数据库ClickHouse提升业务的可扩展性和可靠性时，本文档将为您提供实际操作指南以及如何处理可能遇到的问题。参考本文档迁移策略，您将能够高效、安全地完成数据迁移，并最大化云端环境的利益。说明...
支持的数据库
自建Kafka 0.10.1.0~2.7.0版本 库表结构同步 全量数据同步 增量数据同步 单向同步 RDS MySQL同步至阿里云消息队列Kafka版 从自建MySQL同步至阿里云消息队列Kafka版 从ECS上的自建MySQL同步至自建Kafka集群 从通过专线、VPN网关或智能接入...
同步方案概览
自建Kafka 0.10.1.0~2.7.0版本 库表结构同步 全量数据同步 增量数据同步 单向同步 RDS MySQL同步至阿里云消息队列Kafka版 从自建MySQL同步至阿里云消息队列Kafka版 从ECS上的自建MySQL同步至自建Kafka集群 从通过专线、VPN网关或智能接入...
自建MySQL数据导入
本文示例中，测试所用的ECS自建MySQL源库名为 test_adb，并在该库中创建了一张名为 goods 的源表，建表语句如下：CREATE TABLE goods(goods_id bigint(20)NOT NULL,price double NOT NULL,class bigint(20)NOT NULL,name varchar(32)NOT ...
监控大盘
监控指标 RDS MySQL和自建MySQL监控指标 云数据库Redis版和自建Redis监控指标 云数据库MongoDB版和自建MongoDB监控指标 RDS PostgreSQL监控指标 RDS SQL Server监控指标 PolarDB MySQL版监控指标 表 1.RDS MySQL和自建MySQL监控指标 参数...
监控大盘
监控指标 RDS MySQL和自建MySQL监控指标 云数据库Redis版和自建Redis监控指标 云数据库MongoDB版和自建MongoDB监控指标 RDS PostgreSQL监控指标 RDS SQL Server监控指标 PolarDB MySQL版监控指标 表 1.RDS MySQL和自建MySQL监控指标 参数...
HBase数据同步与迁移
如果您想要将自建HBase或阿里云HBase中的数据迁移或同步至Lindorm 宽表引擎，可以通过LTS服务完成存量数据迁移和实时数据同步。本文介绍HBase数据同步与迁移的使用场景、功能列表、迁移优势、使用限制以及迁移任务等操作。使用场景 自建...
创建数据库
若要使用云数据库RDS，您需要在实例中创建数据库。...如果您使用 一键上云 等迁移方式将本地自建数据库迁移上云时，表空间将与本地自建数据库表空间名称相同，支持将数据库和表的表空间修改为 pg_default。下一步 连接PostgreSQL实例。
自建数据库与RDS性能对比的注意事项
您可以通过测试来对比自建数据库与RDS的性能差异，但是对比时需要保证二者具有相同的条件，如相同的网络环境、性能规格、数据库版本等。本文介绍具体的注意事项。您可以自行搭建数据库，或者购买阿里云RDS实例。推荐您购买RDS实例，因为它...
- 产品推荐
- 这些文档可能帮助您