安全组管控
在 导入安全组规则 面板，单击 选择文件，选择已录入安全组规则信息的CSV文件。系统将自动导入文件中的安全组规则信息。导入完成后，可以查看各条安全组规则的导入情况。如果导入失败，请检查文件安全组规则信息是否符合格式要求。单击 ...
导入概述
所有导入方式都支持CSV数据格式。其中Broker Load还支持Parquet和ORC数据格式。导入方式介绍 导入方式 描述 导入类型 Broker Load 通过Broker进程访问并读取外部数据源，然后采用MySQL协议向StarRocks创建导入作业。提交的作业将异步执行，...
导入概述
所有导入方式都支持CSV数据格式。其中Broker Load还支持Parquet和ORC数据格式。导入方式介绍 导入方式 描述 导入类型 Broker Load 通过Broker进程访问并读取外部数据源，然后采用MySQL协议向StarRocks创建导入作业。提交的作业将异步执行，...
Stream Load
StarRocks支持从本地直接导入数据，支持CSV文件格式，数据量在10 GB以下。本文为您介绍Stream Load导入的基本原理、使用示例和最佳实践。背景信息 Stream Load是一种同步的导入方式，通过发送HTTP请求将本地文件或数据流导入到StarRocks中...
Broker Load
StarRocks支持从外部存储系统导入数据，支持CSV、ORCFile和Parquet等文件格式，建议单次导入数据量在几十GB到上百GB级别。Broker Load导入 查看Broker 阿里云EMR StarRocks实例在创建时已经自动搭建并启动Broker服务，Broker服务位于每个...
Stream Load
StarRocks支持从本地直接导入数据，支持CSV文件格式，数据量在10 GB以下。本文为您介绍Stream Load导入的基本原理、使用示例和最佳实践。背景信息 Stream Load是一种同步的导入方式，通过发送HTTP请求将本地文件或数据流导入到StarRocks中...
RDS MySQL修改字符集（平滑方案）
文件编码 选择数据库的文件编码：UTF-8 GBK ISO-8859-1 自动识别 导入模式 选择导入模式，当前支持两种导入模式：极速模式：在执行阶段读取文件，将SQL语句直接执行到指定的目标库。该模式安全性相比安全模式要低，但是执行时效较高。说明 ...
Broker Load
StarRocks支持从外部存储系统导入数据，支持CSV、ORCFile和Parquet等文件格式，建议单次导入数据量在几十GB到上百GB级别。Broker Load导入 查看Broker实例 阿里云EMR StarRocks集群在创建时已经自动搭建并启动Broker服务，Broker服务位于每...
如何优化数据导入导出
LOCAL代表从本地文件导入，local_infile参数必须开启 csv文件数据适合程序导入，具体方式可查看 使用程序进行数据导入。mysqldump工具使用示例 mysqldump工具可以连接到本地或远程服务器，详细使用方法请参见 使用mysqldump导入导出数据。...
导入Amazon S3文件
例如待导入的文件都在csv/目录下，则可以指定前缀为csv/。如果不设置该参数，则遍历整个S3 Bucket。说明 建议设置该参数。当Bucket中的文件数量非常多时，全量遍历将导致数据导入效率非常低。文件路径正则过滤 通过文件路径的正则表达式...
导入OSS数据
您可以将OSS Bucket中的日志文件，通过数据导入方式导入到日志服务，实现日志的查询分析、加工等操作。目前日志服务只支持导入5 GB以内的OSS文件，压缩文件大小按照压缩后的大小计算。前提条件 已上传日志文件到OSS Bucket中。具体操作，请...
Stream Load
Stream Load主要适用于导入本地文件或通过程序导入数据流中的数据，支持的数据格式包括：CSV（文本）、JSON、PARQUET和ORC。创建导入 Stream Load通过HTTP协议提交和传输数据，这里通过 curl 命令展示如何提交导入。用户也可以通过其他...
数据导入性能优化
弹性导入仅支持导入 MaxCompute数据和以CSV、Parquet、ORC格式存储的OSS数据。使用弹性导入功能加速导入时，需确保Job型资源组中可用资源充足，避免资源不足导致任务长时间等待、耗时长、任务失败等问题。弹性导入支持同时运行多个弹性导入...
数据导入性能优化
弹性导入仅支持导入 MaxCompute数据和以CSV、Parquet、ORC格式存储的OSS数据。使用弹性导入功能加速导入时，需确保Job型资源组中可用资源充足，避免资源不足导致任务长时间等待、耗时长、任务失败等问题。弹性导入支持同时运行多个弹性导入...
数据导入常见问题
例如，上面示例中，源数据为CSV格式，包括三列，列分隔符为逗号（,），但是导入命令或导入语句中却指定制表符（\t）作为列分隔符，最终导致源数据的三列数据解析成了一列数据。解决方案 修改导入命令或导入语句中的列分隔符为逗号（,），...
COPY
CSV 格式 这种格式选项被用于导入和导出很多其他程序（例如电子表格）使用的逗号分隔值（CSV）文件格式。不同于 PolarDB标准文本格式使用的转义规则，它产生并且识别一般的 CSV 转义机制。每个记录中的值用 DELIMITER 字符分隔。如果值包含...
重保场景防护最佳实践
重要 支持上传CSV格式文件。支持导入IPv4和IPv6格式的地址和地址段。每条规则可导入一个文件，每个文件最多支持2000个IP/IP段，一个IP段占用1个计数单元，单次导入的文件大小不能超过1 MB。有大批量IP导入的情况下，可分多次导入。设置生效...
导入数据并查询
对于数据量较大的CSV或TEXT数据文件，强烈建议您按照后续步骤导入 AnalyticDB for MySQL 后再做查询，否则查询性能可能会较差。对于Parquet格式数据文件，直接查询的性能一般也比较高，您可以根据需要决定是否进一步导入到 AnalyticDB for ...
Routine Load
本文介绍如何通过Routine Load导入数据至 云数据库 SelectDB 版 实例。背景信息 Routine Load 支持提交一个常驻的导入任务，通过不断地从指定的数据源读取数据，将数据持续地导入到 云数据库 SelectDB 版 中。Routine Load 功能只支持从...
使用GdbLoader脚本导入数据文件
本文介绍使用GdbLoader脚本将数据文件从对象存储OSS的Bucket中导入至图数据库GDB实例、查看导入任务和取消导入任务的方法。前提条件 已创建目标图数据库GDB实例，创建方法请参见 创建主实例。说明 如果Bucket是在对象存储控制台创建，请...
Dataphin管道任务从本地CSV文件读取汉字显示乱码
产品名称 Dataphin 产品模块 ...问题描述 数据集成CSV(UTF-8)文件导入HIVE，预览时中文出现乱码。问题原因 因为CSV文件格式是UTF-8。解决方案 需要将CSV文件格式转化为GBK，上传到管道任务，预览可以正常显示汉字。更多信息 NA 相关文档 NA
案例：构建文本语义检索系统
cursor.execute(create_table_sql)cursor.execute(create_indexes_sql)connection.commit()将sentences_vectors.csv中处理好的数据导入到表中。import io#定义一个生成器函数，逐行处理文件中的数据。def process_file(file_path):with ...
导入数据
本文以导入On Time数据集至clickhouse_demo数据库的分布式表ontime_local_distributed为例，介绍如何使用客户端clickhouse-client工具导入数据到 云数据库ClickHouse。前提条件 已完成快速入门系列的如下步骤。新建集群 创建账号 设置白...
AddDirectionalCard
调用该接口向定向分组里导入定向卡。使用说明 定向卡是指仅能访问指定地址的物联网卡。可以调用接口 VerifyIotCard 查询物联网卡是否为定向卡。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI...
管理无影硬件终端
导入完成后，可以查看各个终端数据的导入情况。如果导入失败，请检查文件中的终端信息是否符合格式要求。单击 关闭。创建完成后，您可以在 终端管理 页面的 硬件终端 页签上查看终端信息。管理硬件终端 成功添加硬件终端后，您可以根据需要...
GDB Cypher实现的兼容性
LOAD CSV 不支持 GDB支持基于OSS、DataWorks等导入。内置函数 GDB对Cypher内置函数的支持如下：函数 分类 支持情况 all()谓词 不支持 any()谓词 不支持 exists()谓词 是 single()谓词 不支持 none()谓词 是 coalesce()标量 是 endNode()标...
CSV数据文件格式
本文介绍需要导入至图数据库GDB实例的CSV数据文件格式。背景信息 CSV数据文件遵循RFC 4180 CSV规范。更多信息，请参见 CSV文件的一般格式和MIME类型。重要 所有文件必须采用UTF-8格式编码。注意事项 必须将点和边分别放到单独的文件。说明 ...
导出至HDFS
已创建HDFS集群，并在HDFS集群中创建了一个新的文件夹（本示例中文件夹名为 hdfs_output_test_csv_data），用于保存导入的 AnalyticDB MySQL版 数据。说明 使用 INSERT OVERWRITE 进行导入时，系统会覆盖目标文件夹下的原始文件。为避免...
错误信息列表
请求 返回 描述 添加任务 Loader File Format don’t support 要求导入的文件格式不支持，当前只支持.csv格式。Operation not permitted on a read-replica instance 备实例不支持导入任务，需要检查主备情况。Invalid loaderId 任务ID无效...
从OSS导入数据
您也可以使用其它数据进行导入测试，图数据库GDB对CSV数据的文件格式有要求，具体要求，请参见 CSV数据文件格式。上传数据至OSS 以下内容为通过OSS控制台上传数据。如果您需要通过ossutil工具上传数据，请参见 使用ossutil工具上传数据文件...
使用COPY或UNLOAD命令导入或导出数据到OSS
AnalyticDB PostgreSQL版 支持COPY和UNLOAD命令，COPY表示从外表导入数据到本地表，UNLOAD表示从本地表导出数据到外表。COPY和UNLOAD都是基于OSS Foreign Table来完成数据导入导出的，OSS Foreign Table的详细内容请参见 使用 OSS Foreign ...
Flink数据导入
创建一张名为 csv_person 的源表，语句如下：CREATE TABLE if not exists csv_person(`user_id` STRING,`user_name` STRING,`age` INT)WITH('connector'='filesystem','path'='file:/root/data.csv','format'='csv','csv.ignore-parse-...
OSS与ClickHouse间的数据导入与导出
本文为您介绍如何将OSS中的数据导入至ClickHouse集群及如何将ClickHouse集群上的数据导出至OSS。前提条件 已在OSS上创建存储空间，详情请参见 控制台创建存储空间。已创建ClickHouse集群，详情请参见 创建ClickHouse集群。OSS数据导入至...
从CSV文件、TXT文件或SQL脚本导入数据到RDS
数据管理DMS提供数据导入功能，支持大批量数据快速导入至数据库，节省人力物力成本。您可以将CSV文件、TXT文件或SQL脚本的数据导入到RDS实例中。详情请参见 数据导入。
DLF数据探索快速入门-淘宝用户行为分析
样例数据集下载和导入：下载样例数据（csv文件），并上传至OSS。DLF数据发现：使用DLF自动识别文件Schema并创建元数据表。DLF数据探索：使用DLF数据探索，对用户行为进行分析，包括用户活跃度、漏斗模型等。数据说明 本次测试的数据集来自...
数据导入概览
从阿里云对象存储OSS导入数据至图数据库GDB实例 图数据库GDB服务端集成有数据导入模块，可以获取您提供的.csv格式的OSS数据文件，并将其解析为图中的点数据和边数据，然后将点数据和边数据导入至图数据库GDB实例。步骤 步骤说明 ① 将需要...
导入中特殊符号处理
AnalyticDB PostgreSQL版 支持多种数据导入方法，在通过OSS高速并行导入和通过\COPY命令导入数据的过程中，经常因为存在特殊字符导致导入失败。本文将介绍预先处理导入数据中的特殊字符的方法，从而消除特殊字符带来的问题。更多导入数据到...
功能简介
数据导入 支持512 MB以内的XLSX、CSV文件快捷向RDS MySQL、MaxCompute、AnalyticDB PostgreSQL、PostgreSQL资源进行导入，支持对要导入的文件进行预览和编辑。数据预览 支持不同云计算资源数据的快速预览，可为开发人员和数据应用人员提供...
文件分析
示例 读取并访问HDFS存储上的CSV格式文件：MySQL[(none)]>SELECT*FROM hdfs("uri"="hdfs:/127.0.0.1:842/user/doris/csv_format_test/student.csv","fs.defaultFS"="hdfs:/127.0.0.1:8424","hadoop.username"="doris","format"="csv");...
数据查询
（邀测中）物理表导入 支持512 MB以内的XLSX、CSV文件快捷向RDS MySQL、MaxCompute、AnalyticDB PostgreSQL资源进行导入，支持对要导入的文件进行预览和编辑。数据预览 支持不同云计算资源数据的快速预览，可为开发人员和数据应用人员提供...
- 产品推荐
- 这些文档可能帮助您