使用OSS外表高速导入OSS数据
这个参数只能在创建READABLE外部表时指定，即仅支持在导入数据时使用。compressiontype 导入文件的压缩格式。none（默认值）：导入的文件未压缩。gzip：导入的文件压缩格式为GZIP。说明 目前仅支持GZIP压缩格式。compressionlevel 设置写入...
示例数据
为了进一步学习InfluxQL，本节将提供示例数据供您下载，并教您如何将数据导入数据库。数据探索、Schema探索和InfluxQL函数等章节都会引用到这些示例数据。创建数据库 通过阿里云平台，创建名为 NOAA_water_database 的数据库。下载和写入...
使用DataWorks（离线与实时）
说明 如果您创建表后，在导入数据时无法搜索到该表，您可以先在数据地图进行手工同步表操作后，再尝试搜索该表。手工同步操作，请参见 我的数据。单击左上角的，选择 全部产品>更多>上传与下载，然后单击左侧导航栏的 上传（图标），进入 ...
CreateDatabase
Data Long 6666 表示创建成功时数据库的id。Message String Database db001 already exists 如果有异常，返回异常的信息。RequestId String 9BEAC206-0795-4DE3-B1FD-964BEF432B23 本次请求的RequestId。Success Boolean false 标记本次...
从自建MySQL迁移至RDS MySQL实例
当目标库为RDS MySQL时：DTS会自动在RDS MySQL中创建数据库，如果待迁移的数据库名称不符合RDS MySQL的定义规范，您需要在配置迁移任务之前在RDS MySQL中创建数据库。相关操作，请参见 管理数据库。费用说明 迁移类型 链路配置费用 公网...
自建Oracle同步至云原生数据仓库AnalyticDB ...
否则全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升。全量初始化会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量初始化完成后目标实例的表空间比源实例的表空间大。由于DTS的延迟时间是根据...
将RDS PostgreSQL作为RDS MySQL实时分析库
背景信息 当需要使用RDS PostgreSQL数据库特有的功能来分析MySQL中的数据，使用GIS处理时空数据或进行用户画像分析时，可以使用DTS功能将RDS MySQL中的数据实时迁移到RDS PostgreSQL数据库中，使PostgreSQL数据库作为MySQL的实时分析库。...
通过LOCALITY指定存储位置（DRDS模式）
创建成功后，您可以通过如下语句查看数据库的存储位置信息：SHOW CREATE DATABASE db1;返回结果如下：+-+-+|DATABASE|CREATE DATABASE|+-+-+|db1|CREATE DATABASE `db1`/*LOCALITY="dn=polardbx-storage-0-master"*/|+-+-+1 row in set 您...
通过外表导入至数仓版
partition_column":"p1,p2,p3"/针对包含分区的HDFS数据，如需以分区的模式进行查询，那么在导入数据至AnalyticDB MySQL时就需要在外表创建语句中指定分区列partition_column。}';说明 TABLE_PROPERTIES 中的 partition_column 属性必须...
RDS SQL Server空间不足问题
RDS SQL Server实例的空间使用率是日常需要重点关注的监控项之一，实例的存储空间不足，会导致严重后果，例如数据库无法写入、数据库无法备份、存储空间扩容任务耗时过长等。本文介绍如何查看空间使用情况以及排查空间问题。查看空间使用...
导出至OSS
未带hint导出时：导出到单一文件时：分区外表语法支持 使用 INSERT INTO 或 INSERT OVERWRITE SELECT 导入数据时，默认是同步执行流程，如果数据量较大达到几百GB，客户端到 AnalyticDB MySQL 服务端的连接会中断，导致数据导入失败。...
RDS SQL Server实例间复制数据库
按备份集复制数据库时，可以通过查询备份列表接口 DescribeBackups 获取备份集 ID。说明 BackupId 和 RestoreTime 传入一个即可。106523874*RestoreTime string 否 按时间点复制数据库，可以选择备份保留周期内的任意时间点。格式：yyyy-MM...
透明数据加密TDE测试报告
测试工具 sysbench是一个跨平台且支持多线程的模块化基准开源测试工具，用于评估系统在运行高负载数据库时的性能。sysbench的更多信息及使用方法，请参见 sysbench文档。测试指标 每秒执行事务数TPS（Transactions Per Second）：数据库每...
导入Kafka数据
通过公网导入数据时，网络不稳定。Kafka Topic的Partition数量过少。Logstore Shard数量过少。更多原因，请参见 性能限制。检查Kafka集群流量是否达到带宽限制（特别是部署在阿里云上的Kafka集群），如果达到或接近带宽限制，则需要进行...
通过导入实现删除
为了减轻频繁DELETE操作对于 云数据库 SelectDB 版 实例查询性能的影响，云数据库 SelectDB 版 提供了通过导入方式进行删除数据的解决方法，帮助您优化数据查询性能。概述 使用 DELETE 命令删除时，每执行一次 DELETE 都会生成一个新的数据...
预降采样
请求示例 PUT/api/database {"name":"default","downsampleRules":{ } } 查询预降采样数据 预降采样数据查询的匹配原则 当同时存在数据库级别规则和表级别规则时，预降采样查询数据时优先匹配表级别规则。当查询请求指定的降采样粒度与预降...
导入数据并查询
方式一：执行 INSERT INTO 导入数据，当主键重复时会自动忽略当前写入数据，不进行更新覆盖，作用等同于 INSERT IGNORE INTO，详情请参见 INSERT INTO。示例如下：INSERT INTO adb_oss_import_test SELECT*FROM oss_import_test_external_...
Delta Lake概述
Delta数据湖方案如下：在大数据存储层之上提供了数据管理层，该数据管理层等同于数据库中的元数据管理，其元数据随着数据一起存放并对用户可见（例如 图 1 所示）。Delta基于元数据管理引入了ACID，解决了因数据导入失败而产生脏数据和数据...
数据库常见问题
为了有效排查和解决在使用云虚拟主机数据库时遇到的功能问题（例如支持哪些数据库、是否支持开启event_scheduler组件）和其他操作问题（例如，如何扩大数据库空间、数据库导入失败问题等）。本文为您汇总了使用云虚拟主机数据库时遇到的...
从OSS导入数据
在导入数据时，云数据库ClickHouse 支持的默认列分隔符为,。上传数据的具体操作，请参见 上传文件。1,yang,32,shanghai,http://example1.com 2,wang,22,beijing,http://example2.com 3,xiao,23,shenzhen,http://example3.com 4,jess,45,...
导入Elasticsearch数据
通过公网导入数据时，网络不稳定。Logstore Shard数量过少。更多原因，请参见 性能限制。确保设置了合理的 数据最大延迟秒数，并根据真实情况进行调整。检查Elasticsearch集群流量是否达到带宽限制（特别是部署在阿里云上的Elasticsearch...
Sequence列控制更新
当您在Unique模型中导入数据并且需要保证数据正确时，云数据库 SelectDB 版 为您提供了通过Sequence列实现条件更新的功能，使您在导入数据时可以控制列的替换顺序，进而保证您的数据正确。前提条件 表的数据模型为Unique模型。SelectDB数据...
JSON格式导入
示例如下：[{"id":123,"city":"beijing"},{"id":456,"city":"shanghai"},.]这种方式通常用于Stream Load导入方式，以便在一批导入数据中表示多行数据。重要 必须配合设置 strip_outer_array=true 使用。Doris在解析时会将数组展开，然后...
数据上云工具
开源产品 Sqoop（Tunnel通道系列）Sqoop基于社区Sqoop 1.4.6版本开发，增强了对MaxCompute的支持，可以将数据从MySQL等关系数据库导入或导出到MaxCompute表中，也可以从HDFS或Hive导入数据到MaxCompute表中。详情请参见 MaxCompute Sqoop。...
DB2数据源
jdbcUrl":"jdbc:db2:/ip:port/database",/DB2数据库的JDBC连接信息。column":["id"],"batchSize":1024,/一次性批量提交的记录数大小。table":"",/表名。username":"",/用户名。preSql":[]/执行数据同步任务之前执行的SQL语句。},"name...
通过外表导入至数仓版
方式一：执行 INSERT INTO 导入数据，当主键重复时会自动忽略当前写入数据，不进行更新覆盖，作用等同于 INSERT IGNORE INTO，详情请参见 INSERT INTO。示例如下：INSERT INTO adb_oss_import_test SELECT*FROM oss_import_test_external_...
Routine Load
参数 是否必填 描述 job_name 是 导入任务的名称，前缀可以携带导入数据库名称，常见命名方式为时间戳+表名。一个DataBase内，任务名称不可重复。table_name 是 导入的目标表的名称。COLUMNS TERMINATED子句 否 指定源数据文件中的列分隔符...
数据模型
当您需要在不同业务场景中使用 云数据库 SelectDB 版 时，深入了解其数据模型对于您的业务设计具有重要帮助。本文档将指导您了解其数据模型，以帮助您设计出更优的数据存储方案。基本概念 在 云数据库 SelectDB 版 中，数据以表（Table）的...
Broker Load
背景信息 因为Doris表里的数据是有序的，所以Broker Load在导入数据时需要利用Doris集群资源对数据进行排序，相对于Spark Load来完成海量历史数据迁移，Broker Load对Doris集群资源占用较大。Broker Load方式是在没有Spark计算资源的情况下...
Routine Load
参数 是否必填 描述 job_name 是 导入任务的名称，前缀可以携带导入数据库名称，常见命名方式为时间戳+表名。一个DataBase内，任务名称不可重复。table_name 是 导入的目标表的名称。COLUMNS TERMINATED子句 否 指定源数据文件中的列分隔符...
时空数据库版本发布记录
本文介绍PolarDB PostgreSQL版时空数据库（Ganos）的版本更新说明。6.X 6.3 类别 说明 新增特性 Trajectory SQL 新增 ST_InsertAttr 函数，支持为轨迹增加新的属性。GeomGrid SQL 新增 ST_Degeneralize 函数，支持将低层级网格分解成高层级...
时空数据库版本发布记录
本文介绍PolarDB PostgreSQL版（兼容Oracle）时空数据库（Ganos）的版本更新说明。6.X 6.3 类别 说明 新增特性 Trajectory SQL 新增 ST_InsertAttr 函数，支持为轨迹增加新的属性。GeomGrid SQL 新增 ST_Degeneralize 函数，支持将低层级...
入门概览
本文旨在介绍如何购买实例、创建账号、设置白名单、导入数据、连接实例和查询分析图，使您能够了解从购买图数据库GDB到开始使用的流程。前提条件 如果您是初次使用图数据库GDB，请先了解相关使用限制。具体信息，请参见 使用须知。如果您...
时空引擎版本发布记录
ST_ImportFrom 函数在导入数据时出错，会返回具体的错误详情方便排查错误原因。Bug修复 修复栅格裁剪时由于四舍五入可能会有半个像素丢失的问题。修复由于栅格数据带有 NAN 和 INF 等数据，在导入和统计值会出错的问题。4.3 新特性 ST_...
同步数据
通过Kettle将关系型数据库、Hbase等NoSQL数据源，以及Excel、Access中的数据导入分析型数据库MySQL版中，详细操作步骤请参见 使用kettle将本地数据导入分析型数据库MySQL版。通过 Logstash 插件将采集到的日志等数据等实时写入分析型数据库...
逻辑备份恢复至自建数据库
当自建数据库是分片集群时，导入数据命令中的参数需填写为自建数据库中Mongos组件的地址。当自建数据库是分片集群时，导入数据命令中必须添加-nsExclude="config.*"，否则数据恢复过程可能会出现报错。将分片集群实例中的数据恢复至自建...
逻辑备份恢复至自建数据库
当自建数据库是分片集群时，导入数据命令中的参数需填写为自建数据库中Mongos组件的地址。当自建数据库是分片集群时，导入数据命令中必须添加-nsExclude="config.*"，否则数据恢复过程可能会出现报错。将分片集群实例中的数据恢复至自建...
数据导入
本文介绍导入数据量大或数据属性复杂时，可以使用的解决方法，帮助您更快地导入数据。导入方法 图数据库GDB支持如下三种导入方法，具体请参见 数据导入简介。从阿里云云存储对象（OSS）导入数据。使用DataWorks数据集成同步数据到GDB。使用...
通过DMS将逻辑备份导入RDS数据库
通过数据管理DMS（Data Management）可以将数据库备份数据导入RDS目标数据库，实现备份恢复或者数据迁移。操作步骤 本文以RDS MySQL为例。步骤一：下载备份数据 下载RDS MySQL备份数据，详情请参见 下载备份。说明 DMS的数据导入功能支持...
添加数据库
您可以选择以下任意一种方式：在创建数据库网关时，进入 添加本地数据库 步骤，单击 添加数据库 按钮。有关创建数据库网关的信息，请参见 新建数据库网关。进入控制台，单击左侧导航栏中的 网关列表，进入 网关列表 页面，然后单击运行中的...
- 产品推荐
- 这些文档可能帮助您