创建/刷新物化视图支持批量写入
背景信息 物化视图(Materialized View)是一个包含查询结果的数据库对象。与普通的视图不同，物化视图不仅保存视图的定义，还保存了 创建物化视图 时的数据副本。当物化视图的数据与视图定义中的数据不一致时，可以进行 物化视图刷新...
迁移时源库为PostgreSQL的注意事项及限制
增量数据迁移期间，如果迁移对象的选择粒度为Schema，在待迁移的Schema中创建了新的表或使用RENAME命令重建了待迁移的表，您需要在对该表写入数据前执行 ALTER TABLE schema.table REPLICA IDENTITY FULL;命令。说明 将上述命令中的 schema...
同步时源库为PolarDB MySQL版的注意事项及限制
若您将列名仅大小写不同的字段写入到目标MySQL数据库的同一个表中，可能会因为MySQL数据库列名大小写不敏感，导致同步结果不符合预期。在数据同步完成后，建议使用 analyze table<表名>命令检查数据是否已写入目标表。例如，在MySQL触发HA...
TableWriter API
写入记录 将数据写入已打开表的对应列，该写入数据必须在关闭表之后才能读取。接口定义如下。writer.write(values,indices)values：表示写入的单行或多行数据。如果写入单行数据，则传入一个由标量组成的Tuple、List或1D-Ndarray。其中List...
创建/刷新物化视图支持批量写入
背景信息 物化视图(Materialized View)是一个包含查询结果的数据库对象。与普通的视图不同，物化视图不仅保存视图的定义，还保存了 创建物化视图 时的数据副本。当物化视图的数据与视图定义中的数据不一致时，可以进行 物化视图刷新...
MySQL分库分表同步至Hologres（方案2.0）
同时，为了便于在Hologres表里区分某条记录属于源端哪个物理库、物理表，则需要在Hologres表中添加上三个附加字段（src_datasource、src_database、src_table），标识某条记录的来源数据源实例、数据库以及表，这三个附加字段和物理表中的...
Apache Nifi
创建数据库和表 登录Hologres实例，并且建立数据库，命名为 demo，详情请参见 创建数据库。创建数据表。使用如下SQL创建数据表，之后会将数据写入该表中。DROP TABLE IF EXISTS user_info;CREATE TABLE IF NOT EXISTS user_info(id int,...
配置TDH Inceptor输出组件
TDH Inceptor输出组件用于向TDH Inceptor数据源写入数据。同步其他数据源的数据至TDH Inceptor数据源的场景中，完成源数据源的信息配置后，需要配置TDH Inceptor输出组件写入数据的目标数据源。本文为您介绍如何配置TDH Inceptor输出组件。...
CREATE DATABASE
CREATE DATABASE语句用于创建数据库，并可以指定数据库的默认属性（如数据库默认字符集，校验规则等）。语法 create_database_stmt:CREATE {DATABASE|SCHEMA}[IF NOT EXISTS]database_name[database_option_list]database_option_list:...
INTO子句
示例 重命名数据库 SELECT*INTO"copy_NOAA_water_database"."autogen".:MEASUREMENT FROM"NOAA_water_database"."autogen"./.*/GROUP BY*name:result time written-0 76290 在TSDB For InfluxDB®中不能直接重命名数据库，所以 INTO 子句的...
MySQL分库分表同步至Hologres（方案1.0）
同时，为了便于在Hologres表里区分某条记录属于源端哪个物理库、物理表，则需要在Hologres表中添加上三个附加字段（src_datasource、src_database、src_table），标识某条记录的来源数据源实例、数据库以及表，这三个附加字段和物理表中的...
RDS外部表
本文为您介绍如何在外网或VPC网络环境下基于RDS数据源创建外部表并写入数据。前提条件 已开通MaxCompute和云数据库RDS间的网络连接，详情请参见 网络开通流程。使用限制 支持华北2（北京）、华东2（上海）、华北3（张家口）、华东1（杭州）...
一键实时同步至DataHub
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
一键实时同步至Elasticsearch
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
迁移时源库为HBase的注意事项及限制
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。DTS会尝试恢复七天之内迁移失败任务。因此业务切换至目标实例前，请务必结束或释放该任务，或者...
一键实时同步至Kafka
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
实时同步常见问题
show master status 对比日志中读到的binlog文件，在日志中搜 journalName=MySQL-bin.000001,position=50，确认是否有数据写入数据库。如果有数据在写入，但是binlog却没有往前推进，请联系DBA处理。实时同步数据时，如何处理TRUNCATE？...
通过DTS实现数据库的垂直拆分
当RDS实例负载过大时，可以将该实例的一个数据库或表垂直拆分至另外一个单独的实例中。本文介绍如何通过双写方案和简易拆分方案实现垂直拆分。背景信息 假设一个RDS实例上有数据库A和B，随着业务增长实例瓶颈也日趋可见，如想要减轻该实例...
库表恢复方式1：从备份集恢复
库表恢复是指仅恢复指定的部分库或部分表到原集群。例如游戏业务中有时仅需恢复某个或某些玩家的数据，此时可使用库表恢复方式。...RestoreTable-恢复PolarDB实例的某些数据库或表到原实例 调用RestoreTable恢复 PolarDB 库表。
通过Hive访问云数据库HBase
如果云数据库HBase表已存在，可在Hive中云数据库HBase外表进行关联，外部表在删除时不影响云数据库HBase已创建表。在云数据库HBase中创建HBase表，并执行put命令测试数据。create 'hbase_table','f' put 'hbase_table','1122','f:col1','...
同步时源库为PolarDB-X 2.0的注意事项及限制
若您将列名仅大小写不同的字段写入到目标MySQL数据库的同一个表中，可能会因为MySQL数据库列名大小写不敏感，导致同步结果不符合预期。在数据同步完成后，建议使用 analyze table<表名>命令检查数据是否已写入目标表。例如，在MySQL触发HA...
MySQL一键实时同步至MaxCompute
综合如上分析结果，最终的表对应关系如下所示：源端数据库 源端待同步表 写入的目标表 目标表新增字段 doc_demo1 doc_tb1 ods_tb1 execute_time doc_tb2_nopk ods_tb2_nopk 操作流程 创建同步任务 步骤一：选择同步方案 步骤二：配置网络...
MySQL一键实时同步至MaxCompute
综合如上分析结果，最终的表对应关系如下所示：源端数据库 源端待同步表 写入的目标表 目标表新增字段 doc_demo1 doc_tb1 ods_tb1 execute_time doc_tb2_nopk ods_tb2_nopk 操作流程 创建同步任务 步骤一：选择同步方案 步骤二：配置网络...
单元格填报
写入物理表设置 选择 数据源、物理表 数据源选择：仅可选择同时有使用权限且数据库账号有写入权限的数据源。选择物理表写入，可以选择 已有表，也可以选择 新建表。支持 添加、删除、复制：可以有多个写入配置从而实现同时写入多张表。配置...
创建物化视图的跨机并行加速和批量写入
背景信息 物化视图(Materialized View)是一个包含查询结果的数据库对象。与普通的视图不同，物化视图不仅保存视图的定义，还保存了 创建物化视图 时的数据副本。当物化视图的数据与视图定义中的数据不一致时，可以进行 物化视图刷新...
Db2 for LUW同步至云原生数据仓库 AnalyticDB ...
说明 如果同步对象选择为整库，您还可以创建心跳表，心跳表每秒定期更新或者写入数据。费用说明 同步类型 链路配置费用 库表结构同步和全量数据同步 不收费。增量数据同步 收费，详情请参见 计费概述。支持的同步架构 一对一单向同步 一对...
同步方案概览
源为自建SQL Server或RDS SQL Server的同步方案 源为自建MongoDB或云数据库MongoDB的同步方案 源为自建Redis或云数据库Tair/Redis的同步方案 源为MariaDB的同步方案 源为TiDB的同步方案 源为Db2 for LUW的同步方案 源为Db2 for i（AS/400）...
概述
回收站实际上是一个数据字典表，用于放置用户删除的数据库对象信息，包括用户删除的数据库和表等信息。背景信息 在对数据库对象进行删除操作时：如果回收站为开启状态，则该对象会进入回收站。在回收站中可以查询到被删除的对象，并可进行...
同步时源库为MySQL的注意事项及限制
源库为MySQL的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到如下目标数据库：MySQL（RDS MySQL、自建MySQL）PolarDB MySQL版...
库表恢复方式2：恢复到过去时间点
库表恢复过程中，不会影响原集群数据库的正常访问，但可能会占用原集群的计算资源，从而导致集群CPU和IOPS使用率升高。版本要求和使用限制 版本要求 说明 您可以通过 查询版本号 来确认集群版本。当前 PolarDB MySQL版 的 企业版 和 标准版...
通配符列
Lindorm支持动态列，可以动态写入数据并执行查询。但动态列支持的数据类型较少，目前仅支持VARBINARY类型的数据写入。为解决这一问题，Lindorm推出通配符列，帮助您实现多数据类型动态列的写入。通配符列名目前支持的通配符为星号（*）和...
表格填报
写入物理表设置 选择 数据源、物理表 数据源选择：仅可选择同时有使用权限且数据库账号有写入权限的数据源。选择物理表写入，可以选择 已有表，也可以选择 新建表。支持 添加、删除、复制：可以有多个写入配置从而实现同时写入多张表。配置...
同步时源库为PolarDB-X 1.0的注意事项及限制
若您将列名仅大小写不同的字段写入到目标MySQL数据库的同一个表中，可能会因为MySQL数据库列名大小写不敏感，导致同步结果不符合预期。在数据同步完成后，建议使用 analyze table<表名>命令检查数据是否已写入目标表。例如，在MySQL触发HA...
CREATE DATABASE
CREATE DATABASE 用于创建一个新的PolarDB数据库。简介 CREATE DATABASE 创建一个新的PolarDB数据库。要创建一个数据库，你必须是一个超级用户或者具有特殊的 CREATEDB 特权。默认情况下，新数据库将通过克隆标准系统数据库 template1 被...
创建物化视图的跨机并行加速和批量写入
背景信息 物化视图(Materialized View)是一个包含查询结果的数据库对象。与普通的视图不同，物化视图不仅保存视图的定义，还保存了 创建物化视图 时的数据副本。当物化视图的数据与视图定义中的数据不一致时，可以进行 物化视图刷新...
接口说明
在指定的数据库database下进行DDL等操作，比如在指定的database下创建表 Result execute(String database,String sql);其中，Result对象表示SQL的执行结果，比如提交数据库的列表语句（"SHOW DATABASES"）后，可以通过Result获取到已经存在...
Hologres结果表
Hologres与实时计算Blink独享模式（原产品线）深度融合，支持使用Connector的方式写入数据至Hologres结果表，您可以立即查询写入的数据。本文为您介绍实时计算Blink独享模式（原产品线）如何写入数据至Hologres结果表。使用限制 不同Blink...
企业版和标准版功能对比
支持 不支持 全球数据库 全球数据库网络（Global Database Network，简称GDN）是由分布在同一个国家内多个地域的多个 PolarDB 集群组成的网络。GDN网络中所有集群的数据保持同步，网络中每个集群均提供读服务（写服务会被转发到主集群处理...
DRDS（PolarDB-X）数据源
增量数据同步的方式 DRDS（PolarDB-X）Reader使用JDBC SELECT语句完成数据抽取工作，因此您可以使用 SELECT…WHERE…进行增量数据抽取，方式如下：数据库在线应用写入数据库时，填充modify字段为更改时间戳，包括新增、更新、删除（逻辑...
库表恢复：按备份集恢复
若您要恢复至的时间点是某个备份集（快照）的时间点，可通过按备份集（快照）恢复的方式恢复误操作的数据库或者表的数据。前提条件 已存在备份集（快照）。版本要求和使用限制 版本要求 说明 您可以通过 查询版本号 来确认集群版本。当前 ...
- 产品推荐
- 这些文档可能帮助您