整库离线同步至OSS
同步时默认将源端数据库、数据表写入OSS同名文件中，同时，您可以通过添加映射规则定义最终写入目的端的文件名称。支持通过正则表达式转换写入的文件名，还支持指定内置变量拼接目标文件名。您可以通过该功能实现将多张表数据写入到同一个...
Quick BI在数据源上追加数据报错“追加文件与源表字段...
问题描述 本文主要介绍Quick BI在数据源上追加数据报错“追加文件与源表字段类型不一致，请检查文件”的原因。问题原因 可能的原因是 1.文件的字段类型和Quick BI上的本地文件格式不一致导致的。Quick BI上传的文件展示的类型。可以设置下...
离线同步能力说明
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。使用限制 ...
配置并管理实时同步任务
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。实时同步支持的数据源及其配置详情请参见 实时同步支持的数据源。说明 数据源...
使用Tapdata Cloud导入MySQL数据
通过Tapdata Cloud的可视化界面，您可以将自建MySQL、阿里云RDS MySQL、第三方云数据库的数据实时同步到表格存储。前提条件 使用Tapdata Cloud同步MySQL数据到表格存储前，需要完成如下准备工作。已注册 Tapdata Cloud账号。已创建表格存储...
入门概述
快速入门介绍购买并使用 云数据库 SelectDB 版 的完整过程，旨在帮助新用户快速使用 云数据库 SelectDB 版。使用流程 在本教程中，您将进行以下操作。...创建数据库并写入数据：介绍如何为 云数据库 SelectDB 版 实例创建数据库并写入数据。
【公告】数据库文件存储计费方式调整
尊敬的阿里云用户，阿里云将于2023年05月04日起调整数据库文件存储计费方式。调整时间 2023年05月04日18:00:00。调整地域 华东1（杭州）、华东2（上海）、华北2（北京）、华南1（深圳）。调整内容 调整前 调整后 计费方式 按小时计费，不足...
使用限制
IOPS min{1800+50*容量,1000000} min{1800+50*容量,8000000} 吞吐 min{100+0.5*容量,4000}MBps min{100+0.5*容量,32000}MBps 快照 限制项 限制 限制说明 每个文件系统可以保留的快照总数（包括手动快照与自动快照）256 1，当数据库文件系统...
一键实时同步至Kafka
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
管理健康报告
以下是用于评估小文件影响得分的具体算法：主键表：计算公式为 写入文件总数÷写入文件的平均大小。若平均文件大小较小，同时文件数量较多，则表明此类表的小文件问题潜在影响也越大。非主键表：计算公式改为 写入文件总数平均÷写入单个...
将Oracle数据同步到表格存储
步骤三：连接源数据库和目标数据库 通过Tapdata Cloud连接源数据库和目标数据库。登录 Tapdata Cloud平台。在左侧导航栏，单击 连接管理。连接作为源库的Oracle数据库。在 连接管理 页面，单击 创建连接。在 创建连接 对话框的 认证数据源 ...
一键实时同步至DataHub
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
通过向导模式配置离线同步任务
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。离线同步支持的数据源及其配置详情请参见 支持的数据源与读写插件。说明 数据...
整库离线同步至MaxCompute
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源与读写能力。说明 数据...
整库离线同步至MaxCompute
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
配置并管理实时同步任务
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。实时同步支持的数据源及其配置详情请参见 实时同步支持的数据源。说明 数据源...
文件网关支持的OSS Bucket类型说明
客户端写入文件到网关时，网关至少记录两个动作，写入文件以及设置文件修改时间。网关会尽量合并这两个动作，但仍可能针对某个文件向存储桶发起多个操作。设置修改时间会被转换成修改存储桶里的对象的元数据，通过调用拷贝对象API来实现，...
SQL命令管理数据库
您可以执行以下命令，查询SQL Server实例的所有数据库的数据文件和日志文件的路径信息：SELECT db_name(database_id),physical_name FROM sys.master_files;删除数据库 执行如下命令，删除数据库：DROP DATABASE[TestDb]需注意，若您在删除...
管理数据库
说明 数据库名称中如果包含-，创建出的数据库的文件夹的名字中的-会变成@002d。支持字符集 请按需选择字符集。授权账号 选中需要访问本数据库的账号。本参数可以留空，在创建数据库后再绑定账号，具体操作，请参见 修改或重置账号权限。...
通过脚本模式配置离线同步任务
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。离线同步支持的数据源及其配置详情请参见 支持的数据源与读写插件。说明 数据...
管理数据库
创建RDS MySQL实例后，您需要在实例中创建与您业务相关的数据库。RDS MySQL支持通过控制台、SQL命令、API接口管理数据库，包括创建、删除数据库。背景信息 概念 实例：实例是虚拟化的数据库服务器。您可以在一个实例中创建和管理多个数据库...
背景信息以及准备工作
Data Lake Analytics（简称DLA）作为云上数据处理的枢纽，支持通过标准JDBC连接 阿里云关系型数据库（Relational Database Service，简称RDS）（MySQL、SQLServer、PostgreSQL）数据库、云服务器（Elastic Compute Service，简称ECS）上的...
RDS for SQL Server如何回收表空间
语法如下所示：DBCC CLEANTABLE({ database_name|database_id|0 },{ table_name|table_id|view_name|view_id }[,batch_size])[WITH NO_INFOMSGS]说明如下：语句 描述 database_name|database_id|0 待清除的表所在的数据库。如果指定0，则...
RDS for SQL Server如何回收表空间
语法如下所示：DBCC CLEANTABLE({ database_name|database_id|0 },{ table_name|table_id|view_name|view_id }[,batch_size])[WITH NO_INFOMSGS]说明如下：语句 描述 database_name|database_id|0 待清除的表所在的数据库。如果指定0，则...
连续查询
Lindorm时序引擎支持设置每个数据库的保数据有效期（TTL），您可以结合连续查询，将数据降精度后写入到有效期更长的数据库中。以下示例介绍了如何通过连续查询与数据库TTL设置来实现数据降精度与长期存储。示例 假设，原始数据采样周期为1...
整库离线同步至Elasticsearch
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
使用示例
本文主要介绍如何使用阿里云数据库文件存储服务DBFS。权限要求 读操作：root用户、普通用户均支持读操作。写操作：仅root用户支持进行写操作。场景示例 以下代码示例展示了在DBFS中创建文件、删除文件等基础操作。[root@iZbp156ycm6s06xj*]...
一键实时同步至Elasticsearch
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
Quick BI数据源上传文件后，追加文件报错：追加文件...
问题描述 Quick BI数据源上传文件后，追加文件报错：追加文件字段与源表字段类型不一致。问题原因 源表的字段类型为数值型，追加表的Excel该字段下面为空，Quick BI默认判别为文本，所以导致追加表与源表类型不一致。解决方案 在追加的...
INTO子句
以上查询将数据库 NOAA_water_database 的保留策略 autogen 中的所有数据写入到数据库 copy_NOAA_water_database 的保留策略 autogen 中。反向引用语法（:MEASUREMENT）将源数据库中measurement的名字维持在目标数据库中不变。请注意，在...
从自建Db2迁移至RDS MySQL
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建的Db2数据库迁移至RDS MySQL。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成Db2数据库的...
同步时源库为Db2 for LUW的注意事项及限制
Db2 for LUW同步至PolarDB-X 2.0 说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到目标数据库。类型 说明 源库限制 带宽要求：源库所属的服务器需具备足够出口带宽，否则将影响数据同步速率。待...
从MySQL导入数据
当您需要将云数据库RDS MySQL或云原生数据库PolarDB MySQL中的数据迁移至 云数据库ClickHouse 中进行实时分析时，本文档为您提供了以RDS MySQL为参考的示例，以帮助您轻松完成数据迁移任务。前提条件 已创建目标 云数据库ClickHouse 集群，...
行协议参考
在实践中的行协议 关于如何将行协议数据写入数据库，请查看工具章节。重复数据点 measurement的名字、tag set和时间戳唯一标识一个数据点。如果您提交的数据具有相同measurement、tag set和时间戳但具有不同field set，那么数据的field set...
追加上传
追加上传是指通过AppendObject方法在已上传的追加类型文件（Appendable Object）末尾直接追加内容。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。关于OSS支持的...
Apache Nifi
创建数据库和表 登录Hologres实例，并且建立数据库，命名为 demo，详情请参见 创建数据库。创建数据表。使用如下SQL创建数据表，之后会将数据写入该表中。DROP TABLE IF EXISTS user_info;CREATE TABLE IF NOT EXISTS user_info(id int,...
常见问题
Impala写入Hive表数据的时候，是否可以修改写入文件的owner？如何调整Impalad可使用的节点内存总量？如何限制单条查询语句消耗内存的大小？如何提升非JOIN语句的查询效率？Ranger开启Impala后，新扩容的Impala节点无法正常工作，该怎么办？...
RDS SQL Server I/O高问题
数据文件的读请求操作主要包括查询请求产生的数据页读取和数据库备份产生的数据页读取，事务日志文件在做备份时会有较多的读I/O负载，其他情况主要是写I/O负载。当发现实例的I/O吞吐较高时，您可以在 自定义指标 中增加以下性能指标，然后...
写入文件提示无法满足最小写入副本要求
本文介绍写入文件提示无法满足最小写入副本要求问题的原因和解决方案。具体报错 报错信息如下所示。其中，【X】是当前正在运行的DataNode数量，【Y】是被排除在此操作之外的DataNode数量。org.apache.hadoop.ipc.RemoteException(java.io....
使用mount命令挂载ext4文件系统
如果使用本场景推荐的挂载参数，任何内存的修改都会同步写入磁盘，并且所有数据第一时间保序写入文件系统日志。即使发生低概率异常，文件系统恢复后也能保证数据不丢失。优点：数据安全性高，可以确保系统宕机后文件系统的数据不丢失。缺点...
- 产品推荐
- 这些文档可能帮助您