ResizeDbfs-扩容数据库文件系统
调用ResizeDbfs扩容一个数据库文件系统。接口说明 扩容后的数据库文件系统容量必须大于扩容前的容量。数据库文件系统的状态必须为已挂载（attached）。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，...
通过上传CSV文件选择实例
背景 在执行OOS模板进行批量操作的场景中，当设置实例参数时，有多种方式批量选择实例，其中 上传CSV文件 可以高效地选择维护在文件内的多个实例，本文着重介绍下，如何下载包含多台实例ID的CSV文件，以及上传CSV文件批量选择实例。...
GetSnapshotLink-获取单个快照链
查询数据库文件系统快照链。快照链是一个数据库文件系统所有快照组成的关系链，一个文件系统对应一条快照链。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例...
DeleteDbfs-删除数据库文件系统
调用DeleteDbfs释放一个按量付费的数据库文件系统。接口说明 调用该接口时，您需要注意：释放数据库文件系统时，数据库文件系统的状态必须为：待挂载（Unattached）。如果指定 ID 的数据库文件系统不存在，请求将被忽略。调试 您可以在Open...
GetDbfs-查询单个数据库文件系统
调用GetDbfs查询数据库文件系统详细信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句...
Dataphin中管道任务从CSV文件读取数据显示乱码
问题描述 Dataphin中管道任务从CSV文件读取数据显示乱码。问题原因 CSV文件编码的问题。解决方案 将CSV文件转化为UTF-8格式，本地CSV输入配置文件编码选择UTF-8。适用于 Dataphin
ListDbfs-查询数据库文件系统列表
调用ListDbfs查询您已经创建的数据库文件系统列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限...
MySQL存储计算分离实践
本文主要说明如何基于阿里云数据库文件存储DBFS搭建MySQL数据库。背景信息 云上自建数据库通常会选用云盘和ext4文件系统作为MySQL数据库的文件存储。而基于DBFS构建，不但简化了用户基于块存储架构的复杂度，而且面向数据库场景，提供了...
导入结构和数据
背景信息 ODC 支持批量导入数据库对象的结构和数据。通过 ODC 导入任务可以分别导入数据库对象的结构和数据、仅导入数据或者仅导入结构。导入结构和数据：同时导入数据库对象的定义语句及其数据。仅导入数据：仅导入表/视图对象的数据。仅...
AttachDbfs-挂载数据库文件系统
调用AttachDbfs为一台ECS实例挂载一个按量付费的数据库文件系统。ECS实例和数据库文件系统必须在同一个可用区内。接口说明 调用该接口时，您需要注意：数据库文件系统的状态必须为待挂载（Unattached）。挂载数据库文件系统时，目标 ECS ...
ST_ImportObj
将基于对象存储或内存格式的Obj文件导入到数据库中。语法 boolean ST_ImportObj(text table_name,text url,text id,text options default '{}');boolean ST_ImportObj(text table_name,bytea content,text id,text options default '{}');...
ST_ImportObj
将基于对象存储或内存格式的Obj文件导入到数据库中。语法 boolean ST_ImportObj(text table_name,text url,text id,text options default '{}');boolean ST_ImportObj(text table_name,bytea content,text id,text options default '{}');...
功能特性
数据库文件存储 功能集 功能 功能描述 参考文档 DBFS特性 原子写 支持DIRECT IO的原子写，需按4K，8K，16K对齐-共享读写 一份数据可共享式多点挂载并进行读写，读写可线性扩展-存储加密 通过对数据库文件存储实施加密，可以确保数据库文件...
DMS导出数据到CSV文件
本文介绍如何通过DMS导出数据到CSV文件。检查源数据 在DMS中，查询中文显示正常，如下图。查看表的字符集 显示表的创建语句命令如下：show create table<表名>;创建导出任务 在DMS中，选择 数据库开发>数据导出>数据库导出。选择 数据库...
DMS导出数据到CSV文件
本文介绍如何通过DMS导出数据到CSV文件。检查源数据 在DMS中，查询中文显示正常，如下图。查看表的字符集 显示表的创建语句命令如下：show create table<表名>;创建导出任务 在DMS中，选择 数据库开发>数据导出>数据库导出。选择 数据库...
DMS导出数据到CSV文件
本文介绍如何通过DMS导出数据到CSV文件。检查源数据 在DMS中，查询中文显示正常，如下图。查看表的字符集 显示表的创建语句命令如下：show create table<表名>;创建导出任务 在DMS中，选择 数据库开发>数据导出>数据库导出。选择 数据库...
ST_ImportFrom
从一个OSS、MinIO或HDFS文件导入到数据库。语法 raster ST_ImportFrom(cstring chunkTableName,cstring url,cstring storageOption default '{}',cstring importOption default '{}');参数 参数名称 描述 chunkTableName 块表的名称，名称...
ST_ImportFrom
从一个OSS、MinIO或HDFS文件导入到数据库。语法 raster ST_ImportFrom(cstring chunkTableName,cstring url,cstring storageOption default '{}',cstring importOption default '{}');参数 参数名称 描述 chunkTableName 块表的名称，名称...
API概览
本产品（数据库文件存储/2020-04-18）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，...
关联托管的CSV数据源
日志服务支持通过SDK方式将本地CSV文件上传到日志服务进行托管，并建立Logstore与CSV文件的关联。本文介绍如何在日志服务Logstore中联合托管的CSV文件进行数据分析。前提条件 已采集日志。更多信息，请参见 数据采集。已配置索引。更多信息...
UpdateDbfs-修改数据库文件系统
修改一个数据库文件系统的实例规格和使用场景。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 ...
CreateDbfs-创建数据库文件系统
调用CreateDbfs创建一个按量付费的数据库文件系统。接口说明 创建数据库文件系统需要通过实名认证。请前往会员信息中进行 实名认证。创建数据库文件系统会涉及到资源计费，建议您提前了解数据库文件系统的计费方式。更多详情请参见 按量...
DetachDbfs-卸载数据库文件系统
调用DetachDbfs从一台ECS实例上卸载一个按量付费的数据库文件系统。接口说明 调用该接口时，请注意：数据库文件系统必须已经挂载到实例上，状态为已挂载（Attached)。卸载数据库文件系统时，所挂载的 ECS 实例必须处于运行中（Running）...
一般性问题
1.数据库文件存储DBFS是什么，适合什么场景？数据库文件存储DBFS是面向数据库场景优化的POSIX兼容的共享读写的文件存储系统。主要适用于：OLTP及OLAP数据库场景：例如，MySQL、PostgreSQL等。NoSQL数据库场景：例如，MongoDB、RocksDB等。2...
ApplyAutoSnapshotPolicy-设置自动快照策略
为一个或多个数据库文件系统设置自动快照策略。接口说明 一个文件系统只能设置一条自动快照策略。若需要更换策略，请先取消原自动快照策略。一条自动快照策略支持应用到多个文件系统。数据库文件系统快照基于云盘快照，由云盘进行快照扣费...
数据迁移或同步方案概览
小（少于2000万条数据记录）√编程方式：从任意数据库、文本文件导入到 PolarDB-X 1.0。从 PolarDB-X 1.0 导出到任意数据库、文本文件。详细操作步骤，请参见 使用程序进行大数据导入。大√数据集成：从MaxCompute导入到 PolarDB-X 1.0。从...
使用DataWorks（离线与实时）
场景1：导入本地CSV文件至MaxCompute 同步能力说明 当前支持将CSV格式的文件，基于 本地文件 或 阿里云对象存储OSS 的方式导入MaxCompute。其中：本地文件，最大支持上传5 GB数据。阿里云对象存储OSS，仅支持上传与当前MaxCompute同地域...
克隆快照
您可以基于已有的快照克隆出新的数据库文件系统。控制台上克隆快照 在数据库文件存储控制台左侧导航栏点击 快照 进入 数据库文件系统快照 页面。在顶部菜单栏左上角处，选择地域。选择需要克隆的快照，在右侧 操作 列中单击 克隆。设置文件...
RenameDbfs-重命名数据库文件系统
调用RenameDbfs重命名一个数据库文件系统。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句...
CreateDataImportOrder-创建数据导入工单
false FileType string 是 文件类型，取值如下：SQL：SQL 文件 CSV：CSV 文件 CSV FileEncoding string 否 文件编码，取值如下：AUTO：自动识别 UTF-8：UTF8 编码 GBK：GBK 编码 ISO-8859-1：ISO-8859-1 编码 AUTO TableName string 否 ...
删除文件系统
本文主要说明阿里云数据库文件存储服务删除功能。进入“数据库文件存储控制台”->“数据库文件系统列表”。单击“更多”按钮，单击“删除”，弹出“删除数据库文件系统”窗口。单击“我已知晓风险，确认删除”按钮后，提交删除申请。
数据库管理
导入数据库 堡垒机支持导入RDS数据库，也支持手动填写信息，导入单个自建数据库，或者填写文件模板，从文件批量导入数据库。导入RDS数据库 堡垒机支持MySQL、SQL Server、PostgreSQL类型的RDS数据库，可以直接将RDS数据库同步至堡垒机，...
在线扩容
本文主要说明阿里云数据库文件存储服务DBFS的在线扩容功能。进入“数据库文件存储控制台”-》“数据库文件系统列表”。单击“扩容”按钮，弹出“在线扩容数据库文件系统”窗口。填写“扩容后容量”，单击“开始扩容”按钮后提交扩容申请。
数据源概览
本章节主要介绍如何...CSV文件 JSON文件 Parquet文件 ORC文件 文本文件 外部数据源 Databricks数据洞察读取外部数据源时要求配置其与数据源实例的网络连接。OSS EMR HDFS MySQL Redis MaxCompute Tablestore MongoDB ElasticSearch JindoFS
挂载问题
1.挂载数据库文件存储（DBFS）的约束？数据库文件存储（DBFS）默认会在“/mnt/dbfs”目录下创建挂载点（例如，“/mnt/dbfs/xxxxxx”）。数据库文件存储（DBFS）要求挂载点为空，即“/mnt/dbfs/xxxxxx”目录为空，不能在挂载点下存在文件...
为什么_CSVRead函数读取不到值？
问题现象 在JMeter的脚本中有使用到_CSVRead函数，但是实际压测时通过采样日志未发现CSV文件中的值。解决方案 确认脚本使用到的CSV文件都已经上传到PTS。路径设置使用相对路径。请确保将CSV文件的 value 修改为文件名而不是文件路径。如果...
为什么_CSVRead函数读取不到值？
问题现象 在JMeter的脚本中有使用到_CSVRead函数，但是实际压测时通过采样日志未发现CSV文件中的值。解决方案 确认脚本使用到的CSV文件都已经上传到PTS。路径设置使用相对路径。请确保将CSV文件的 value 修改为文件名而不是文件路径。如果...
读CSV文件
重要 配置的数据类型需要与CSV文件每一列的数据类型保持一致，否则该列内容会读取失败。字段分隔符 字段的分隔符，默认为半角逗号（,）。处理无效值的方法 解析Tensor、Vector和MTable类型的数据失败时，处理无效数据的方法。它们是Alink...
创建OSS外部表
MaxCompute支持您在项目中创建OSS（Object Storage Service）外部表，与存储服务OSS上的目录建立映射关系，您可以通过OSS外部表访问OSS目录下的数据文件中的非结构化数据，或将MaxCompute项目中的数据写入OSS目录。本文为您介绍创建OSS外部...
Dataphin管道任务同步csv文件到中台乱码
问题描述 用户同步csv文件数据到中台，发现数据乱码。问题原因 csv编码格式和中台数据库编码格式不一样。解决方案 对齐两边编码格式即可。适用于 Dataphin 管道任务
- 产品推荐
- 这些文档可能帮助您