通过元数据发现导入至湖仓版
已上传文件到OSS的Bucket中，且OSS路径格式满足如下条件：OSS路径需为<BucketName>/目录/./目录/表/文件 或者<BucketName>/目录/./目录/表/分区/./分区/文件 的格式。Bucket层级下至少有一层目录。OSS路径的同一表或分区中的文件类型必须...
导入镜像流程
您可以将本地或其他云厂商服务器的镜像文件导入阿里云生成自定义镜像，然后使用导入的自定义镜像创建新的ECS实例或者更换已有ECS实例的操作系统（系统盘），以满足各种业务需求和应用场景。本文介绍Linux镜像和Windows镜像的导入流程。...
文件异步检测
功能介绍 功能项 文件检测 支持检测图片所在的文件格式 支持DOC、DOCX、PPT、PPTX、PDF、XLS、XLSX、TXT格式 检测图片中的文字 支持 文件大小限制 200 MB 同时检测文件的数量 10路 近线检测模式（用于批量文件检测）支持 其他 支持开启或...
导入Amazon S3文件
阿里云日志服务SLS支持导入Amazon S3中的日志文件。您可以通过数据导入的方式将Amazon S3的日志文件导入到阿里云的日志服务，实现日志的查询分析、加工等操作。目前日志服务只支持导入5GB以内的S3文件，压缩文件大小按照压缩后的大小计算。...
导入OSS数据
您可以将OSS Bucket中的日志文件，通过数据导入方式导入到日志服务，实现日志的查询分析、加工等操作。目前日志服务只支持导入5 GB以内的OSS文件，压缩文件大小按照压缩后的大小计算。前提条件 已上传日志文件到OSS Bucket中。具体操作，请...
OSS数据源
企业的业务服务所产生的一些标准化表单、日志等数据文件，会被周期性的直接上传到OSS。但是这些存储在OSS的文件缺少元数据管理，导致难以分析和计算。元数据发现任务可以在单次运行中自动为OSS上面的数据文件创建和更新数据湖元数据（一张...
账单概览
导出的账单文件介绍 账单文件 文件格式 账单文件介绍 月账单 PDF 月账单是按账单月份维度统计的用于和客户结算的账单数据，当月的月账单在次月2日12点后生成，账单中包含阿里云财务专用章。产品消费汇总 CSV 产品消费汇总是按照账号、产品...
基本概念
封装格式 封装格式（Format），也称多媒体容器（Multimedia Container），是将已编码压缩好的视频轨道、音频轨道和元数据（视频基本信息如标题、字幕等）按照一定的格式规范，打包放到一个文件中，形成特定文件格式的视频文件。封装格式...
OSS-HDFS数据源
离线写 OSS-HDFS Writer提供向OSS-HDFS文件系统指定路径中写入TextFile文件、ORCFile文件以及ParquetFile格式文件。OSS-HDFS支持的数据类型，如下表所示。类型分类 OSS-HDFS数据类型 整数类 TINYINT、SMALLINT、INT和BIGINT 浮点类 FLOAT和...
HDFS数据源
HDFS是一个分布式文件系统，为您提供读取和写入HDFS双向通道的功能，本文为您介绍DataWorks的HDFS数据同步的能力支持情况。支持的版本 目前不支持阿里云文件存储HDFS版。使用限制 离线读 使用HDFS Reader时，请注意以下事项：由于连通默认...
文档转换和预览问题
文字文件：DOC、DOT、WPS、WPT、DOCX、DOTX、DOCM、DOTM 演示文件：PPTX、PPT、POT、POTX、PPS、PPSX、DPS、DPT、PPTM、POTM、PPSM 表格文件：XLS、XLT、ET、ETT、XLSX、XLTX、CSV、XLSB、XLSM、XLTM 其他格式文件：PDF、LRC、C、CPP、H、...
上传数据
本文介绍在我的数据页面中针对三种不同类型数据，上传不同格式数据的方法。背景信息 在管理数据页面中，数据的类型分为 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六种。不同类型对应可上传的数据包括：矢量：在矢量页签内，...
上传数据
本文介绍在我的数据页面中针对三种不同类型数据，上传不同格式数据的方法。背景信息 在管理数据页面中，数据的类型分为 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六种。不同类型对应可上传的数据包括：矢量：在矢量页签内，...
文档转换
使用REST API 转换信息 转换前 文档格式：DOCX 文档名称：example.docx 处理方式：文档格式转换 转换后 文件格式：PNG 文件存储路径：oss:/test-bucket/doc_images/转换完成消息通知：发送到主题为 doc_images 的MNS 处理示例/将文件...
pg_dump
pg_dump是 PolarDB PostgreSQL版（兼容Oracle）提供的一种逻辑备份工具，用于将集群中的单个数据库备份为脚本文件或其他存档文件。简介 pg_dump用于备份单个数据库。即使当前数据库正在被访问，也会对正在访问的数据进行一致的备份，并且在...
JSON格式
日志服务将日志投递到OSS后，支持存储为不同的文件格式，本文介绍JSON格式。参数配置 在 配置投递规则 时，如果选择 存储格式 为 json，对应的参数配置如下所示。参数 说明 是否投递tag 是否投递日志tag字段，例如_tag_:abc。OSS文件地址 ...
CSV数据文件格式
本文介绍需要导入至图数据库GDB实例的CSV数据文件格式。背景信息 CSV数据文件遵循RFC 4180 CSV规范。更多信息，请参见 CSV文件的一般格式和MIME类型。重要 所有文件必须采用UTF-8格式编码。注意事项 必须将点和边分别放到单独的文件。说明 ...
ST_AsJPEG
将栅格对象转化为JPEG格式二进制流。语法 bytea ST_AsJPEG(raster raster_obj,box extent,integer pyramidLevel default 0,cstring bands default '',cstring option default '');参数 参数名称 描述 raster_obj 需要计算的raster对象。...
CSV格式
日志服务将日志投递到OSS后，支持存储为不同的文件格式。本文介绍CSV格式。参数配置 在 配置投递规则 时，如果选择 存储格式 为 csv，对应的参数配置如下所示。参数说明如下所示。更多信息，请参见 CSV标准 和 postgresql CSV说明。参数 ...
ST_AsJPEG
将栅格对象转化为JPEG格式二进制流。语法 bytea ST_AsJPEG(raster raster_obj,box extent,integer pyramidLevel default 0,cstring bands default '',cstring option default '');参数 参数名称 描述 raster_obj 需要计算的raster对象。...
COPY
COPY 用于在PolarDB表和标准文件系统文件之间移动数据。简介 COPY 在 PolarDB表和标准文件系统文件之间移动数据。COPY TO 把一个表的内容复制 到 一个文件，而 COPY FROM 则从一个文件复制数据到一个表（把数据追加到表中原有数据）。COPY ...
整库离线同步至OSS
说明 当上一步骤中 写入单个文件 开关为关闭状态时，即单表写入OSS多个文件时，此处的OSS文件名为写入OSS文件的前缀名称，实际写入的文件名会添加随机字符串。功能 描述 文件建立方式 写入OSS时的文件建立方式，支持写入已有文件或自动建立...
概述
元数据管理支持的文件元数据包括：文件大小、文件格式、创建时间等文件的基础信息。文档类文件的全文和压缩包内的所有文件信息。利用智能媒体管理服务的人工智能（AI）引擎对图片、视频、音频等媒体文件进行分析得到的标签、人物、文本等...
JSON格式
日志服务将数据投递到OSS后，支持存储为不同的文件格式。本文介绍JSON格式。参数配置 在 创建OSS投递任务（新版）时，如果选择 存储格式 为 json，对应的参数配置如下所示。参数 说明 是否投递tag 是否投递日志tag字段，例如_tag_:abc。OSS...
OSS数据源
支持 不支持 支持且仅支持读取TXT格式的文件，且要求TXT中schema为一张二维表。支持类CSV格式文件，自定义分隔符。支持ORC、PARQUET格式.支持多种类型数据读取（使用String表示），支持列裁剪、列常量。支持递归读取、支持文件名过滤。支持...
导入数据并查询
本文以数据文件存储在OSS中为例，介绍如何将OSS中的数据文件导入 AnalyticDB for MySQL 的 adb_demo 数据库中并进行查询。前提条件 通过以下步骤在OSS中创建存储 AnalyticDB for MySQL 数据的目录。开通OSS服务。详情请参见 开通OSS服务。...
CSV格式
日志服务将日志投递到OSS后，支持存储为不同的文件格式。本文介绍CSV格式。参数配置 在 创建OSS投递任务（新版）时，选择 存储格式 为 csv，对应的参数配置如下所示。参数说明如下所示。更多信息，请参见 CSV标准 和 postgresql CSV说明。...
通过外表导入至数仓版
本文介绍如何通过外表查询OSS数据文件，并将OSS中的数据文件导入 AnalyticDB MySQL 数仓版（3.0）。目前支持的OSS数据文件格式有Parquet、CSV和ORC。前提条件 已开通OSS服务并创建存储空间和项目。具体操作，请参见 开通OSS服务、控制台...
cp（上传文件）
本文涉及的通用示例说明如下：本地文件：examplefile.txt（根目录下的文件）本地文件夹：localfolder（根目录下的文件夹）目标Bucket：examplebucket 目标Bucket指定目录：desfolder 简单上传 当您需要将本地文件、图片、视频等资源上传到...
导入自定义镜像
在云上部署业务时，您可以通过阿里云ECS控制台导入本地镜像文件，也可以通过服务器迁移中心SMC自动为您的服务器生成ECS镜像。本文介绍这两种方法的应用场景和操作步骤。前提条件 通过ECS控制台导入镜像前，请您确认已完成以下操作：阿里云...
分享和导出Notebook文件
您可以将Notebook文件导出为多种格式，以便本地查看，也可直接将Notebook文件分享给其他人。背景信息 DSW 支持将Notebook文件导出为以下几种形式：Asciidoc：.asciidoc 文件 HTML： .html 文件 Latex：.tex 文件 Markdown：.md 文件 PDF：....
不同格式的HTTPS证书转换成PEM格式
概述 PEM格式的证书文件（*.pem）由Base64编码的二进制内容和开头行（-BEGIN CERTIFICATE-）、结束行（-END CERTIFICATE-）组成，支持使用EditPlus等文本编辑器打开。本文介绍了将不同格式的HTTPS证书转换为PEM格式的方法。详细信息 CER或...
ST_AsJPEG
将栅格对象转化为JPEG格式二进制流。语法 bytea ST_AsJPEG(raster raster_obj,box extent,integer pyramidLevel default 0,cstring bands default '',cstring option default '');参数 参数名称 描述 raster_obj 需要计算的raster对象。...
数据水印
当您需要在DMS导出的文件上添加水印，或提取外部文件中的水印信息时，您可参考本文档的水印嵌入和水印提取的操作步骤。前提条件 实例已开通敏感数据保护功能。详细信息，请参见 开通敏感数据保护。使用场景 用于数据的散布或分发过程中追溯...
导出结构和数据
导出文件格式 ODC 导出工具会将导出数据到以.zip 结尾的压缩文件包中，压缩包中包含元数据文件 MANIFEST.bin 和 Schema 下导入导出对象的结构定义文件和数据文件。创建导出任务时，如果您指定 数据格式 为 SQL 格式，那文件包中的结构定义...
FTP数据源
是 无 path 远程FTP文件系统的路径和文件名信息，需要填写包含路径和文件后缀的完整文件路径和文件名。这里可以支持填写多个路径。当指定单个远程FTP文件，FTP Reader暂时只能使用单线程进行数据抽取。后期会在非压缩文件情况下针对单个...
内容生产
上传素材 将已制作好的PNG、JPG、JPEG文件上传作为素材。模板类型分为：贴纸、图标、背景。操作步骤：选择工作空间>内容营销>内容生产>物料管理>素材上传。单击 批量上传，上传PNG、JPG、JPEG格式的素材文件。在配置页面选择素材类型、标签...
使用OSS Foreign Table进行数据湖分析
OSS FDW支持多种格式的数据文件，适用不同的业务场景，具体文件格式如下：支持访问CSV、TEXT、JSON、JSONLINE格式的非压缩文本文件。支持访问CSV、TEXT格式的GZIP压缩、标准SNAPPY压缩文本文件。支持访问JSON、JSONLINE格式的GZIP压缩文本...
配置FTP输入组件
文件不存在时 忽略：当读取的文件不存在时，忽略该文件，并继续读取其他文件。置任务失败：当读取的文件不存在时，终止该任务并置失败。数据内容起始行 设置输入组件读取数据的起始行。默认为1，从第一行开始为数据内容。若需忽略前N行，则...
配置FTP输入组件
文件不存在时 忽略：当读取的文件不存在时，忽略该文件，并继续读取其他文件。置任务失败：当读取的文件不存在时，终止该任务并置失败。数据内容起始行 设置输入组件读取数据的起始行。默认为1，从第一行开始为数据内容。若需忽略前N行，则...
- 产品推荐
- 这些文档可能帮助您