使用客户端（odpscmd）或Studio
MaxCompute的客户端（odpscmd）、Studio等数据上传下载工具均通过Tunnel功能实现数据的上传与下载，本文为您概要介绍如何在对应的工具中使用Tunnel命令或Tunnel SDK上传数据至MaxCompute。使用Tunnel命令下载数据 Tunnel命令主要有 Upload...
采集Open-Falcon数据
本文介绍如何通过Logtail和Transfer将Open-Falcon数据上传至日志服务。前提条件 已创建Project和MetricStore。具体操作，请参见 创建Project 和 创建MetricStore。使用限制 您所使用的Open-Falcon版本需包含 Influxdb support 功能。只有...
数据文件管理
在 数据查看 页面，根据不同的数据上传方式上传数据文件。为了方便您使用该功能，我们为您提供各模型的测试数据集demo供您下载使用：通用分类数据集demo 通用检测数据集demo 通用实例分割数据集demo 如果通过 本地文件上传 方式上传数据：...
通过Tunnel迁移日志数据至MaxCompute
背景信息 Tunnel是MaxCompute的批量上传数据工具，适用于离线计算场景。Tunnel详细信息请参见 Tunnel使用说明。操作步骤 在MaxCompute客户端（odpscmd）执行如下命令创建表 loghub，用于存储上传的日志数据。打开新类型数据开关，此命令...
Streaming Tunnel SDK示例（Python）
Streaming Tunnel是MaxCompute的流式数据通道，您可以通过Streaming Tunnel向MaxCompute中上传数据，本文为您介绍使用Python版Streaming Tunnel SDK上传数据的简单示例。注意事项 Streaming Tunnel仅支持上传数据，下文为您介绍一个简单的...
Tunnel命令
Tunnel命令说明 命令格式 tunnel[options][args]可选项说明：Available subcommands:upload(u)download(d)resume(r)show(s)purge(p)help(h)参数说明 upload：上传数据到MaxCompute的表中。支持文件的上传，每一次上传只支持数据上传到一张...
UploadFile
0：成功 Data String 1 上传数据文件返回信息 Message String SUCCESS 上传数据文件返回消息 RequestId String fwer-42faf-faer-4fasdf 唯一请求标识 示例 请求示例 http(s):/[Endpoint]/?Action=UploadFile&CorpId=AFHOFD24HOH77&...
概述
MaxCompute提供的 数据上传和下载工具 是基于Tunnel SDK编写的。本文将为您介绍Tunnel SDK的主要接口，不同版本的SDK在使用上有所差别，准确信息以 SDK Java Doc 为准。主要接口 描述 TableTunnel 访问MaxCompute Tunnel服务的入口类。您...
使用说明
支持文件的上传，每一次上传只支持数据上传到一张表或表的一个 分区。分区表一定要指定上传的分区，多级分区一定要指定到末级分区。更多信息请参见 Upload。Download：下载MaxCompute表或指定Instance执行结果至本地。只支持下载到单个文件...
数据传输方案
准备好智能圈选数据后，您可以使用阿里云对象存储OSS或DataWorks两种传输方案上传数据。使用阿里云对象存储OSS 推荐使用阿里云对象存储OSS(Object Storage Service)进行数据传输。重要 使用OSS数据前需要在网页端一键授权OSS访问权限，并为...
简单上传示例
本文为您介绍如何使用StreamUploadSession和StreamRecordPack接口上传数据。典型的表数据上传流程 创建TableTunnel。创建StreamUploadSession。创建StreamRecordPack，写入Record。提交上传。示例 import java.io.IOException;import java....
传输加速
通过传输加速Endpoint上传数据时，会产生加速上传流量。通过传输加速Endpoint下载数据时，会产生加速下载流量，同时会与OSS外网流出流量同时计算。例如，通过传输加速Endpoint从开启传输加速功能的存储空间中下载了1 GB的数据，则会产生1 ...
使用阿里云Flink（流式数据传输）
背景信息 实时计算Flink版可以调用MaxCompute SDK中的接口将数据写入缓冲区，当缓冲区的大小超过指定的大小（默认为1 MB）或每隔指定的时间间隔时，将数据上传至MaxCompute结果表中。说明 建议Flink同步MaxCompute并发数大于32或Flush间隔...
Web端直传概述
本教程介绍如何在Web端通过表单上传方式直接上传数据到OSS。Web端常见的上传方法是用户在浏览器或App端上传文件到应用服务器，应用服务器再把文件上传到OSS。这种方式需通过应用服务器中转，传输效率明显低于数据直传至OSS的方式。数据直传...
客户端加密
OSS客户端加密是在数据上传至OSS之前，由用户在本地对数据进行加密处理，确保只有密钥持有者才能解密数据，增强数据在传输和存储过程中的安全性。免责声明 使用客户端加密功能时，您需要对主密钥的完整性和正确性负责。因您维护不当导致主...
客户端加密
OSS客户端加密是在数据上传至OSS之前，由用户在本地对数据进行加密处理，确保只有密钥持有者才能解密数据，增强数据在传输和存储过程中的安全性。免责声明 使用客户端加密功能时，您需要对主密钥的完整性和正确性负责。因您维护不当导致主...
数据安全性
MD5校验 需要在上传文件时提供文件的Content-MD5值，OSS服务器会帮助用户进行MD5校验，仅当OSS服务器接收到文件的MD5值和上传提供的MD5一致时才可以上传成功，以此保证上传数据的完整性。OSSPutObjectRequest*request=[OSSPutObjectRequest...
导入OSS作业文件到集群中
上传数据 至OSS 您可以将作业数据及执行文件上传至对象存储OSS，操作步骤如下：选择与E-HPC集群相同的地域开通OSS服务。具体操作，请参见 开通OSS服务。创建存储作业的存储空间。具体步骤，请参见 创建存储空间。上传作业文件。具体步骤，...
客户端加密
OSS客户端加密是在数据上传至OSS之前，由用户在本地对数据进行加密处理，确保只有密钥持有者才能解密数据，增强数据在传输和存储过程中的安全性。免责声明 使用客户端加密功能时，您需要对主密钥的完整性和正确性负责。因您维护不当导致主...
快速搭建移动应用上传回调服务
但该方案有个问题：对于Android/iOS移动应用来说，只需要申请一次STS凭证，就能多次使用该STS凭证上传数据到OSS。这就导致应用服务器无法得知用户上传了哪些数据，作为该App的开发者，就无法对应用上传数据进行管理。为此OSS提供了上传回调...
客户端加密
OSS客户端加密是在数据上传至OSS之前，由用户在本地对数据进行加密处理，确保只有密钥持有者才能解密数据，增强数据在传输和存储过程中的安全性。免责声明 使用客户端加密功能时，您需要对主密钥的完整性和正确性负责。因您维护不当导致主...
SetIdpMetadata-上传身份提供商元数据
上传基于SAML 2.0的身份提供商IdP（Identity Provider）的元数据。接口说明 该接口仅支持 AD 工作区和便捷工作区，不支持 RAM 目录。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer...
添加数据
表单模式添加数据 添加向量数据 在向量管理>添加数据页中选择表进行添加数据：添加相应字段值（包括主键、稠密向量），点击 添加：当执行结果出现"message":"success"说明数据上传成功：数据上传成功后，可以在查询测试页面进行查询：添加...
系统管理
本文为您介绍如何在系统管理中配置SQL查询、数据上传任务所使用的资源组。使用限制 仅支持阿里云主账号访问系统管理页面。系统管理中的配置仅在本租户的当前地域生效，并且您需确保SQL查询、数据上传任务使用的数据源和资源组网络连通。...
使用DataWorks（离线与实时）
单击左上角的，选择 全部产品>更多>上传与下载，然后单击左侧导航栏的 上传（图标），进入 数据上传 页面，单击 数据上传。说明 DataWorks的上传与下载模块的数据上传功能，基于 本地文件 的上传，仅支持CSV格式和最大5 GB大小的文件。详细...
概述
方案 说明 适用场景 Tunnel 通过MaxCompute的Tunnel功能，将日志数据上传至MaxCompute。详情请参见 通过Tunnel迁移日志数据至MaxCompute。Tunnel主要用于批量上传数据至离线表，适用于离线计算的场景。DataHub DataHub数据迁移功能通过...
Tunnel SDK常见问题
问题类别 常见问题 Tunnel SDK Upload 使用Tunnel SDK上传数据时，上传的数据可以自动分配到各个分区吗？使用Tunnel SDK上传数据时，编写完UDF打成JAR包后上传，对JAR包大小有要求吗？使用Tunnel SDK上传数据时，是否有分区数量限制？使用...
视频专区
本文档汇总了DataV产品的介绍和操作视频。DataV数据可视化 7.0 如何使用模板快速创建第一个大屏 如何配置可视化组件样式和数据 ...DataV-Card可视分析创作间 数据上传与探查 可视分析及卡片的保存 更多视频教程请参见 DataV-Card视频教程。
后续指引
说明 相关文档 数据迁移 上传下载数据 MaxCompute提供Tunnel批量数据通道、Streaming Tunnel流式数据写入通道和DataHub实时数据通道三种数据上传下载的通道，同时还支持基于DataHub和Tunnel提供的SDK实现上传下载数据，满足多样化场景需求...
功能发布记录（2024年）
2024.2.20 所有地域 所有DataWorks用户 数据上传 数据下载 数据开发新增CDH集群节点 您可在DataWorks上进行CDH相关的Hive、Spark、MR、Presto、Impala等任务的开发和周期性调度。2024.2.19 所有地域 所有DataWorks用户 创建CDH Hive节点 ...
整体流程介绍
操作流程 操作步骤 支持方法 准备工作 准备工作 包含如下内容：准备CSV数据文件 获取图数据库GDB实例信息 获取OSS中的Bucket信息 OSS导入授权 图数据库GDB控制台一键授权 通过RAM控制台授权 将数据上传至OSS 使用OSS控制台上传数据文件 ...
典型场景
文件上传：数据上传后，DLA元数据发现功能可自动发现并构建好元数据体系。数据ETL：DLA支持Spark，提供强大的数据ETL能力，把ODS层的原始数据清洗为结构化的DW数据。机器学习：DLA支持Spark，支持开源算法库。交互式分析：DLA提供Presto...
数据分析：即时快速分析
功能概述 数据分析支持基于个人视角的数据上传、公共数据集、表搜索与收藏、在线SQL取数、SQL文件共享、SQL查询结果下载及用电子表格进行大屏幕数据查看等产品功能。适用场景 适合更多非专业数据开发人员，如数据分析、产品、运营等工作...
数据上云场景
MaxCompute平台提供了丰富的数据上传下载工具，可以广泛应用于各种数据上云的应用场景，本文为您介绍三种经典数据上云场景。Hadoop数据迁移 您可使用MMA、Sqoop和DataWorks进行Hadoop数据迁移。使用DataWorks结合DataX进行Hadoop数据迁移的...
数据分析概述
进入 数据分析 首页，页面包含以下两个区域：快捷入口：在 快捷入口 区域，单击对应图标进入 SQL查询、电子表格、数据上传 等模块进行数据分析操作。最近编辑：在 最近编辑 区域，可以查看最近编辑的文件，单击文件名打开文件进行后续操作...
调试实时任务
手动上传数据（本地调试方式）即通过 本地调试方式 手动上传数据进行调试。上传数据方式包括手动 上传样例数据文件、手动输入数据、自动抽样数据。手动上传样例数据文件 您可以通过上传数据的方式，手动上传本地数据。上传本地数据前需要先...
使用Copilot+增强分析实现一站式智能数据查询与可视化
数据上传结束后，您可在弹窗中执行如下操作。查看上传任务的成功或失败状态，以及上传任务的结束时间。单击 数据查询，进行上传数据的数据查询及联合分析。发起一次新的数据上传，或返回上传列表页查看列表详情。基于以上操作，本教程展示...
入门概览
上传数据到OSS的操作，请参见 上传数据至OSS。将数据从OSS导入到图数据库GDB的操作，请参见 OSS数据导入至GDB。登录数据库 您需要登录图数据库GDB实例后，才能对图数据进行查询和分析。快速入门教程将使用数据管理服务DMS登录图数据库GDB。...
概述
大部分阿里云用户以CSV格式将数据存储在OSS上，若要提高数据扫描性能，需要借助第三方工具对文件进行格式转换，然后将转换后的数据上传至OSS，整个过程比较繁琐。为减轻用户工作量，您可以直接使用DLA来转换文件格式。假设将1.2GB的数据以...
UpsertChunks-上传切分后的文档
说明 指定文件名不为空时，则会覆盖上传此文件名对应的数据；为空时，则直接将 chunks 数据追加上传到文档库中。mydoc.txt TextChunks object[]否 切分后的文档列表。Content string 是 文档内容。云原生数据仓库AnalyticDB PostgreSQL版...
- 产品推荐
- 这些文档可能帮助您