使用MaxCompute控制台（离线）
MaxCompute控制台提供数据上传功能，支持您将本地文件或阿里云对象存储服务OSS中的文件数据离线（非实时）上传至MaxCompute进行分析处理及相关管理操作。使用限制 仅支持基于 本地文件 或 阿里云对象存储OSS 上传数据，具体如下。本地文件...
使用云助手插件导入迁移源
说明 迁移后，如果目标服务器中仍然需要源服务器的历史动态数据，您可以自行保存源服务器的历史动态数据，并将数据上传至迁移后的目标服务器。在Linux源服务器中导入迁移源 运行以下命令，查看云助手插件列表，确认插件可用。acs-plugin-...
网络异常时如何抓取数据包
背景信息 如果源服务器访问目标服务器时出现异常，您可以抓包获取最原始的交互数据进行排查分析。在介绍常用的抓包工具以及如何抓包的详细信息前，请参见以下文档排查和分析问题。能ping通但端口不通时端口可用性探测说明 丢包或不通时链路...
使用Tunnel命令或Tunnel SDK
MaxCompute的客户端（odpscmd）、Studio等数据上传下载工具均通过Tunnel功能实现数据的上传与下载，本文为您介绍如何使用Tunnel命令或Tunnel SDK上传数据至MaxCompute。前提条件 已经创建好MaxCompute项目，并用对应的工具连接MaxCompute。...
通过WinSCP上传或下载文件（本地主机为Windows）
进入WinSCP文件传输界面。上传或下载文件 上传文件至云服务器：选择左侧本地主机的文件，拖拽到右侧的云服务器，将文件上传到云服务器。下载文件到本地：选择右侧的远程云服务器的文件，拖拽到左侧本地主机，将文件下载到本地主机。相关...
最大上传大小
使用场景 大型文件上传：对于涉及大型文件上传的业务，如在线视频平台、大型游戏分发、大数据分析等，用户可能会尝试上传超出服务器处理能力的文件。在此场景下，您可以上调上传大小的上限值，以确保大文件能够顺利上传，满足业务需求。...
数据传输服务（上传）场景与工具
本文为您介绍如何将数据上传至MaxCompute或从MaxCompute下载数据，包括服务连接、SDK、工具和数据导入导出、上云等常见操作。背景信息 MaxCompute提供了多种数据上传下载的通道支持，方便您在各种场景下进行技术方案选型时参考。批量数据...
Tunnel命令常见问题
如何在Shell脚本中将一个TXT文件中的数据上传到MaxCompute的表中？导入文件夹中的文件数据时，提示字段不匹配，但是文件夹下的文件可以单独导入，如何解决？使用Tunnel Upload命令上传两个文件时，第一个文件上传结束之后，第二个文件没有...
数据上云工具
MaxCompute平台支持丰富的数据上传和下载工具（其中大部分工具已经在GitHub公开源代码，以开源社区的方式进行维护）。您可以根据实际应用场景，选择合适的工具进行数据的上传和下载。阿里云数加产品 MaxCompute客户端（Tunnel通道系列）...
使用DataWorks（离线与实时）
说明 DataWorks的上传与下载模块的数据上传功能，基于 本地文件 的上传，仅支持CSV格式和最大5 GB大小的文件。详细操作指导请参见 数据上传。场景3：导入其他数据源数据至MaxCompute 同步能力说明 DataWorks 数据集成 支持将其他数据源的...
自建SQL Server通过物理网关迁移上云
物理协议迁移上云和逻辑数据迁移上云的区别 对比项 物理协议迁移上云 逻辑数据迁移上云 迁移原理 采用数据库原生物理备份协议以数据块的方式写入到目标端。采用JDBC逻辑协议获取SQL并写入到目标端。操作系统要求 仅支持Windows上的SQL ...
自建SQL Server通过物理网关迁移上云
物理协议迁移上云和逻辑数据迁移上云的区别 对比项 物理协议迁移上云 逻辑数据迁移上云 迁移原理 采用数据库原生物理备份协议以数据块的方式写入到目标端。采用JDBC逻辑协议获取SQL并写入到目标端。操作系统要求 仅支持Windows上的SQL ...
如何将文件上传到轻量应用服务器
免责声明：本文档可能包含第三方产品信息，该信息仅供参考。阿里云对第三方产品的性能、可靠性以及操作可能带来的...Linux服务器 请搭建FTP服务器，对文件进行上传、下载、创建或删除等操作，详细请参见 搭建FTP服务器。适用于 轻量应用服务器
快速搭建移动应用上传回调服务
系统变量 含义 bucket 移动应用上传文件到OSS的哪个存储空间 object 移动应用上传文件到OSS后保存的文件名 etag 该上传的文件的ETag，即返回给用户的etag字段 size 上传文件的大小 mimeType 资源类型 imageInfo.height 图片高度 imageInfo....
分区格式化数据盘
如果您的轻量应用服务器挂载了数据盘，则必须创建分区和文件系统才能使数据盘变为可用。本文主要介绍如何分区格式化数据盘。背景信息 服务器上挂载的数据盘必须分区格式化才能正常使用。不同操作系统的数据盘分区格式化的操作不同，请您...
Tunnel SDK示例汇总引导
数据上传时，建议您使用TunnelBufferedWriter，详情请参见 BufferedWriter 相关的示例代码。不同版本SDK在使用时会有不同，文档示例中的版本信息仅供参考。请您注意版本变更。Java示例 简单上传示例 简单下载示例 多线程上传示例 多线程...
概述
方案 说明 适用场景 Tunnel 通过MaxCompute的Tunnel功能，将日志数据上传至MaxCompute。详情请参见 通过Tunnel迁移日志数据至MaxCompute。Tunnel主要用于批量上传数据至离线表，适用于离线计算的场景。DataHub DataHub数据迁移功能通过...
创建FTP数据源
目前支持传输协议包括以下几种：FTP：文件传输协议，用于控制文件的双向传输，同时也是一个应用程序。SFTP：基于SSH的安全文件传送协议，为传输文件提供一种安全的加密方法。FTPS：基于SSL/TLS的文件传输协议，相当于加密的FTP。Host FTP...
TunnelBufferedWriter
数据上传：调用 Write 接口，数据会先写入本地缓存区，缓存区满后会批量提交到服务端，这样可以避免连接超时。此外，如果数据上传失败，则会自动进行重试。结束上传：调用 close 接口，最后再调用UploadSession的 commit 接口，即可完成...
Tunnel操作
类型 功能 角色 操作入口 上传数据 将本地文件的数据上传至MaxCompute的表中，以追加模式导入。具备修改表权限（Alter）的用户。本文中的命令您需要在 MaxCompute客户端 执行。下载数据 将MaxCompute表数据或指定Instance的执行结果下载至...
创建FTP数据源
目前支持传输协议包括以下几种：FTP：文件传输协议，用于控制文件的双向传输，同时也是一个应用程序。SFTP：基于SSH的安全文件传送协议，为传输文件提供一种安全的加密方法。FTPS：基于SSL/TLS的文件传输协议，相当于加密的FTP。Host FTP...
手动搭建FTP站点（CentOS 8）
背景信息 FTP（File Transfer Protocol）是一种文件传输协议，基于客户端/服务器架构，支持以下两种工作模式：主动模式：客户端向FTP服务器发送端口信息，由服务器主动连接该端口。被动模式：FTP服务器开启并发送端口信息给客户端，由客户...
上传数据
参数 配置说明 文件格式 您可以根据待上传的数据文件类型选择文件格式，当前支持 CSV 和 自定义文本文件 两种文件格式，其中自定义文本文件支持.txt、.csv 和.log 类型的文件。选择文件 单击 浏览，根据界面提示选择待上传的数据文件。选择...
后续指引
说明 相关文档 数据迁移 上传下载数据 MaxCompute提供Tunnel批量数据通道、Streaming Tunnel流式数据写入通道和DataHub实时数据通道三种数据上传下载的通道，同时还支持基于DataHub和Tunnel提供的SDK实现上传下载数据，满足多样化场景需求...
功能发布记录（2024年）
2024.2.20 所有地域 DataWorks标准版及以上版本用户 查找代码 新增数据上传与下载功能 DataWorks的数据上传与下载功能支持将本地CSV文件、OSS文件数据上传至MaxCompute进行处理及分析。同时，也可管理上传的文件列表和DataWorks数据分析等...
上传数据
本文介绍在我的数据页面中针对三种不同类型数据，上传不同格式数据的方法。背景信息 在管理数据页面中，数据的类型分为 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六种。不同类型对应可上传的数据包括：矢量：在矢量页签内，...
上传数据
本文介绍在我的数据页面中针对三种不同类型数据，上传不同格式数据的方法。背景信息 在管理数据页面中，数据的类型分为 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六种。不同类型对应可上传的数据包括：矢量：在矢量页签内，...
搭建FTP服务器（Linux）
协议：FTP-文件传输协议。主机：FTP服务器公网IP地址。本文中为Linux实例的公网IP地址，例如 121.43.XX.XX。端口：21。登录类型：匿名。本示例中使用FTP客户端连接匿名模式的FTP服务器。如果您需要使用FTP用户密码连接FTP服务器，则登录...
数据上传下载成本优化
本文为您介绍如何优化数据上传和下载的同步成本。尽可能使用经典网络和VPC网络 您可以使用内部网络（经典网络或VPC）实现零成本数据导入和导出。网络设置详情请参见 配置Endpoint。合理利用ECS的公共下载资源 如果您的ECS使用包月资源，...
典型场景
文件上传：数据上传后，DLA元数据发现功能可自动发现并构建好元数据体系。数据ETL：DLA支持Spark，提供强大的数据ETL能力，把ODS层的原始数据清洗为结构化的DW数据。机器学习：DLA支持Spark，支持开源算法库。交互式分析：DLA提供Presto...
同步时源库为PolarDB-X 2.0的注意事项及限制
如果同步的源实例为 PolarDB分布式版，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。源库为PolarDB-X的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标...
逻辑复制槽故障转移（Logical Replication Slot ...
此时丢失的数据，除了HA本身造成的数据丢失外，还可能会丢失HA后新主库上新增的部分数据。为避免上述数据丢失的情况，可以将 polar_priority_replication_force_wait 参数设置为 on。备库断开期间，主库会一直等待备库重新连接或者重搭完成...
逻辑复制槽故障转移（Logical Replication Slot ...
此时丢失的数据，除了HA本身造成的数据丢失外，还可能会丢失HA后新主库上新增的部分数据。为避免上述数据丢失的情况，可以将 polar_priority_replication_force_wait 参数设置为 on。备库断开期间，主库会一直等待备库重新连接或者重搭完成...
建表并上传数据
本地数据上传至bank_data DataWorks支持以下操作：上传本地的文本文件至工作空间的表中。通过数据集成模块，从多个不同的数据源导入业务数据至工作空间。说明 本地文本文件上传的限制如下：文件类型：仅支持.txt、.csv 和.log 类型的文件。...
什么是数据库自治服务DAS
数据库是所有企业业务的基座，企业内的研发、测试、运营和运维人员每天都需要对数据库进行操作或者查询，但是使用数据库的人员对数据库的了解程度参差不齐，所以数据库的稳定性不断受到如下问题的挑战。视频简介 数据库运维和管理的挑战 ...
逻辑复制槽故障转移（Logical Replication Slot ...
此时丢失的数据，除了HA本身造成的数据丢失外，还可能会丢失HA后新主库上新增的部分数据。为避免上述数据丢失的情况，可以将 polar_priority_replication_force_wait 参数设置为 on。备库断开期间，主库会一直等待备库重新连接或者重搭完成...
同步时源库为PolarDB MySQL版的注意事项及限制
如果同步的源集群为 PolarDB MySQL版，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。源实例为PolarDB MySQL版的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：说明 DTS默认...
备份数据
数据备份可以用于还原数据，从而应对数据丢失或损坏。实例默认会自动备份数据，您也可以修改自动备份策略或发起手动备份。操作步骤 不同的引擎备份数据的配置存在差异，您可以参考引擎选择：备份MyBase MySQL数据请参见 自动备份 或 手动...
Linux实例中数据恢复
在处理磁盘相关问题时，您可能会碰到操作系统中数据盘分区丢失的情况。本文介绍了Linux系统下常见的数据盘分区丢失的问题以及对应的处理方法，同时提供了使用云盘的常见误区以及最佳实践，避免可能的数据丢失风险。前提条件 在修复数据前，...
数据分析概述
进入 数据分析 首页，页面包含以下两个区域：快捷入口：在 快捷入口 区域，单击对应图标进入 SQL查询、电子表格、数据上传 等模块进行数据分析操作。最近编辑：在 最近编辑 区域，可以查看最近编辑的文件，单击文件名打开文件进行后续操作...
- 产品推荐
- 这些文档可能帮助您