文件数据源
说明 选中 首行作为参数名 后，PTS读取参数文件时将跳过第一行的数据。选中后无需手动定义参数名。若未选中此项，则需根据业务场景定义每列数据的参数名。方式二：通过配置OSS文件创建。具体操作，请参见 创建OSS数据源。
OSS Foreign Table使用技巧
split-l N说明 切分后的小文件需要保证行的完整性，即同一行记录只允许存在同一个文件内，不允许跨文件存放。通过上述方法切分大文件即可保证同一行记录存放在同一文件中。查看OSS文件信息 您可以执行如下操作，获取OSS Foreign Table的OSS...
下载备份文件
如果您想长时间保留云数据库MongoDB的数据，您可以对云数据库MongoDB数据进行备份，然后将备份文件下载至本地进行存储，您也可以将备份文件恢复至自建数据库，用于业务测试或数据分析等场景。本文介绍下载备份文件的方法。前提条件 仅...
管理DAG
下载文件 在 Files 页面，单击目标文件所在行的 图标，即可下载目标文件。删除文件 在 Files 页面，单击目标文件的文件名。单击下方的 Delete。在 Confirm Delete 对话框中，单击 Delete。在 Success 对话框中，单击 OK。
如何统计表行数
通过HBase Shell工具统计表行数 使用HBase RowCounter统计表行数 通过Lindorm SQL统计表行数 如果您要粗略查询Lindorm宽表的行数，可以通过Lindorm集群管理系统的 表概览 页面进行查看，详情请参见 通过集群管理系统粗略查看表行数。...
配置HDFS输出组件
行分隔符 文件类型为Text可配置字段之间行分隔符。非必填项。如果您没有填写，则系统自动添加 作为分隔符。字段分隔符 文件类型为Text可配置字段之间分隔符。非必填项。如果您没有填写，则系统自动添加英文逗号（,）作为分隔符。标记完成...
配置FTP输出组件
任务级标记完成文件中将依次换行写入每个文件的信息。空值转换 非必选，表示null值的字符串。字段映射 输入字段 从上游输入组件读取的字段。输出字段 您需要配置输出字段。Dataphin支持通过 批量添加 和 新建输出字段 的方式配置输出字段：...
配置FTP输出组件
任务级标记完成文件中将依次换行写入每个文件的信息。空值转换 非必选，表示null值的字符串。字段映射 输入字段 从上游输入组件读取的字段。输出字段 您需要配置输出字段。Dataphin支持通过 批量添加 和 新建输出字段 的方式配置输出字段：...
如何在fstab文件中配置文件磁盘标识方式为UUID
概述 在Linux系统中，fstab文件内通常配置了文件系统的挂载信息，如果配置有误，会导致系统启动异常。本文主要介绍如何在fstab文件中配置文件磁盘标识方式为UUID，可以解决此类重启异常问题。详细信息 阿里云提醒您：如果您对实例或数据有...
配置FTP输入组件
行分隔符 填写文件存储行分隔符。如果您没有填写，则系统默认将 行分隔符 填写为换行符号（）。说明 Text类型不支持自定义行分隔符。字段分隔符 切分方式选择分隔符切分时，需要填写文件存储字段分隔符。如果您没有填写，则系统默认将 字段...
配置FTP输入组件
行分隔符 填写文件存储行分隔符。如果您没有填写，则系统默认将 行分隔符 填写为换行符号（）。说明 Text类型不支持自定义行分隔符。字段分隔符 切分方式选择分隔符切分时，需要填写文件存储字段分隔符。如果您没有填写，则系统默认将 字段...
简介
NAS NFS ACL（包括NFSv4 ACL和POSIX ACL）是阿里云NAS推出的针对NFS协议文件系统的ACL。您可以通过NFS ACL实现给不同的用户和群组设置不同目录或文件的权限。本文简要介绍POSIX ACL和NFSv4 ACL的概念、注意事项及通过控制台开启NFS ACL。...
账单导出能力升级公告
2、总数据量超过阈值：两层zip压缩包结构，一级zip压缩包文件内容为导出子任务生成的zip文件，子zip内有1个csv文件，csv行数不定。csv格式 通过OSS订阅方式获取。30万行一个文件，如果文件数量大于1个则生成一个zip压缩包；否则直接输出csv...
基于OSS外表的单表多文件查询
您可以将CSV文件按行拆分为多个小的CSV文件，且单个CSV文件大小建议为128 MB，最大限制为1 GB。说明 拆分CSV格式的文件时，必须按照完整的一行数据进行拆分，不能从一行数据中间进行拆分，需要保证每一个OSS数据文件的完整性。文件命名规则...
查询文件
本文主要介绍如何使用Python SDK的SelectObject查询CSV和JSON文件。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。关于OSS支持的Region与Endpoint的对应关系，请...
账单概览
重要 如果存储文件的行数超过一定阈值（系统默认阈值：30万行数据），会自动拆分成多个CSV文件，并合并压缩成一个ZIP文件。用户可设置推送起始账期，只支持对近12个月已出账的账单进行订阅。首次操作订阅时，需要进入到RAM授权页进行授权。...
COPY
COPY 用于在PolarDB表和标准文件系统文件之间移动数据。简介 COPY 在 PolarDB表和标准文件系统文件之间移动数据。COPY TO 把一个表的内容复制 到 一个文件，而 COPY FROM 则从一个文件复制数据到一个表（把数据追加到表中原有数据）。COPY ...
上传数据
参数 配置说明 文件格式 您可以根据待上传的数据文件类型选择文件格式，当前支持 CSV 和 自定义文本文件 两种文件格式，其中自定义文本文件支持.txt、.csv 和.log 类型的文件。选择文件 单击 浏览，根据界面提示选择待上传的数据文件。选择...
上传本地文件
单次上传CSV文件中，数据行数最多为5,000行，文件大小最多为5 MB。添加本地文件 在 物联网平台控制台 的 实例概览 页面，单击目标企业版实例 ID 或备注名称。在左侧导航栏，选择 数据服务>数据接入，单击 本地上传 页签。单击 本地数据上传...
通过导入工具导入至数仓版
host=host port=3306 user=adbuser password=pwd database=dbname encryptPassword=false#导入表名#tableName=please_set_table_name#导入的文件或文件夹的绝对路径，支持：#1）单个文件或单个文件夹#或者#2）同时导入多个文件，多个文件的...
Tunnel命令常见问题
使用Tunnel Upload命令行上传CSV文件时，如何跳过第一行表头上传其他数据？使用Tunnel Upload命令行上传CSV文件时，为什么导入成功后原文本中有很大一部分内容莫名消失？如何在Shell脚本中将一个TXT文件中的数据上传到MaxCompute的表中？...
准备工作
压缩CSV文件 需要将CSV文件压缩为csv.gz文件，压缩方法如下：压缩单个文件 例如dir目录下有一个文件file1，需执行如下压缩命令：gzip-r dir 说明 执行以上 gzip 命令压缩文件，不会保留源文件，如需保留源文件压缩，请执行命令 gzip-c 源...
读CSV文件
是否忽略第一行数据 是否忽略第一行的数据，当CSV文件首行为表头信息时，需要勾选此参数。是否容错 输入数据与 Schema 中定义的不一致时，例如类型不一致或列数不一致的容错方法：打开 是否容错 开关：当解析失败时，丢弃该行数据。关闭 ...
GetMergeRequestChangeTree-查询合并请求Diff统计信息
查询合并请求的Diff统计信息，包括总变更文件树、总新增行、总删减行以及每个文件的新增行与删减行。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 ...
导入结构和数据
导入文件格式 为 CSV 文件时，支持跳过首行字段列头字段。导入文件格式 为 ZIP 压缩文件时，支持导入单表或者多表和跳过已存在的结构。上传导入文件。单击文件池进入文件资源管理器以选择需要导入的文件，或者直接将文件拖入文件池中以完成...
小程序集成
修改 sts.js 文件第68行的URL：服务端地址/vod/videoPublish。修改 sts.js 文件第61行的URL：视频点播加速域名。详情请参见 前提条件。示例 假设您的公网IP地址为 192.0.2.0，则将 sts.js 文件第37行的URL修改为 ...
数据导入
数据位置 选择数据的位置：第1行为属性：表格首行是字段名。第1行为数据：表格首行是数据。写入方式 选择文件的写入方式：INSERT：插入数据时数据库会检查主键（PrimaryKey），如果出现重复会报错。INSERT_IGNORE：如果表中已经存在相同的...
导入数据
数据位置 选择数据的位置：第1行为属性：表格首行是字段名。第1行为数据：表格首行是数据。写入方式 选择文件的写入方式：INSERT：插入数据时数据库会检查主键（PrimaryKey），如果出现重复会报错。INSERT_IGNORE：如果表中已经存在相同的...
通过阿里云客户端管理ECS实例
查看文件目录信息：在目标文件目录所在行，选择 操作>查看文件属性。管理文件 上传文件：在文件列表上方，单击 上传文件。下载文件：在目标文件所在行，选择 操作>下载文件。删除目录：在目标文件所在行，选择 操作>删除文件。重要 文件...
恢复NAS文件
您可以将备份的NAS文件恢复到原ECS实例中，也可以根据需要，将同仓库中其他ECS实例或本地备份客户端备份的NAS文件恢复到该ECS实例。前提条件 已完成NAS备份。具体操作，请参见 备份NAS文件。创建恢复任务 登录 云备份Cloud Backup控制台。...
恢复NAS文件
文件列表每行填写一个路径，且每一行只能以源备份路径最后一个文件夹开头，例如备份路径 folder/test/data，要恢复data里的file.txt和abc.png，请按如下格式填写路径。data/file.txt/data/abc.png 排除下列文件：勾选不需要恢复的文件或...
恢复NAS文件
文件列表每行填写一个路径，且每一行只能以源备份路径最后一个文件夹开头，例如备份路径 folder/test/data，要恢复data里的file.txt和abc.png，请按如下格式填写路径。data/file.txt/data/abc.png 排除下列文件：勾选不需要恢复的文件或...
管理数据流动任务
导出此文件列出的所有文件：文件中每一行代表一个文件在CPFS文件系统中的路径，不支持目录。删除数据 配置项 说明 删除文件 选择数据流动任务执行的目录或者文件列表。删除CPFS此目录下所有文件：目录必须以正斜线（/）开头和结尾。删除此...
删除Excel行
1.组件介绍 说明 必要前置组件：启动Excel 或 获取已打开的Excel 利用本组件可以将Excel文件中指定行整体删除 2.输入项 说明 请参照可视化编辑器内组件面板中各输入项的帮助信息 3.输出项 说明 请参照可视化编辑器内组件面板中各输出项的...
LLM-特殊内容移除（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 LLM-特殊内容移除组件支持以下功能：去除URL链接 删除文本中匹配正则...
通用型NAS备份
在文件列表每行填写一个路径，且每一行只能以源备份路径最后一个文件夹开头。例如备份路径为/test/data，要恢复data文件夹下file.txt和abc，请按如下格式填写路径。data/file.txt/data/abc 在 恢复目的地 页签，选择该地域下的需要恢复的 ...
恢复ECS文件
使用 云备份 将ECS文件备份到云上备份库后，ECS实例中文件丢失或者异常时，您可以根据历史备份点，进行文件恢复。您可以根据需要将备份的ECS文件 恢复到源ECS实例、一个新的ECS实例 或者 一个本地服务器。前提条件 已完成ECS文件备份（存在...
管理人群
说明 您需要上传不带header行的CSV文件，文件将按行解析为号码，目前仅支持国内号码段，例如：示例文件。多列CSV文件 目标用户的手机号和变量模板的变量内容，将这两类数据存储在一个多列的CSV文件中（需要包含列名），后续在人群管理页面...
恢复本地NAS
手动输入文件列表 文件列表每行填写一个路径，且每一行只能以源备份路径最后一个文件夹开头。恢复指定文件 例如备份路径为 folder/test/data，要恢复data目录下的file.txt和abc.png，则文件列表填写如下：/data/file.txt/data/abc.png 恢复...
恢复大规模文件系统
使用 云备份 将文件到云上备份库后，当文件系统中文件丢失或者受损时，您可以根据历史备份，将 全量文件 或者 满足条件的部分文件 进行恢复。可以 恢复到源大规模文件系统，或者 恢复到一个新的大规模文件系统。前提条件 已完成大规模文件...
- 产品推荐
- 这些文档可能帮助您