表流读写
Delta Lake克服了许多流式处理系统和文件相关的常见限制，例如：合并低延迟引入产生的小文件 保持多个流（或并发批处理作业）执行“仅一次”处理 使用文件作为流源时，可以有效地发现哪些文件是新文件 Delta表作为流源 当您将Delta表加载为...
如何处理备份失败问题
具体操作，请参见 如何检查云备份客户端运行状态 和 排查和处理文件备份客户端状态异常。如果备份任务只是偶发性失败，一般是由于网络抖动或者临时断开导致的。此时不需要您进行任何操作，待网络恢复后，备份任务就能自动正常执行。如果...
如何选择产品类型
对比项 基础版 专业版 适用场景 现代数据仓库 准实时分析 流式处理和分析 在存储、计算分离的架构之上支持：现代数据仓库 准实时分析 流式处理和分析 主要功能 Runtime：提供约50个开源组件（包含常见存储、计算组件）。Cloudera Manager：...
恢复ECS文件
具体操作，请参见 排查和处理文件备份客户端状态异常。查看日志Log，定位具体报错的ErrorCode。说明 备份客户端默认安装路径参考如下，操作中请以实际安装路径为准。Windows版本日志路径：本地磁盘（C）>Program Files>Aliyun Hybrid ...
Flink Python作业快速入门
本文带您快速体验Flink Python流作业和批作业的创建、部署和启动，以了解实时计算Flink版Python作业的操作流程。前提条件 如果您使用RAM用户或RAM角色等身份访问，需要确认已具有Flink控制台相关权限，详情请参见 权限管理。已创建Flink...
添加媒体Bucket
将OSS的Bucket在媒体处理MPS中绑定为输入媒体Bucket、输出媒体Bucket后，媒体处理MPS才有权限监听该Bucket上传完成的消息，以实现触发工作流执行和处理完成的文件回写动作。本文为您介绍如何通过媒体处理控制台添加媒体Bucket。前提条件 ...
如何存储函数程序产生的较大文件？
如果需要在磁盘中存储较大文件，例如，超过500 MB的文件，您可以按照以下方式处理：使用性能实例，当前性能实例磁盘空间为10 GB。更多信息，请参见 实例类型及使用模式。使用文件存储NAS。函数计算 为您提供临时文件存储目录/tmp，您还可以...
定制Linux自定义镜像
判断出当前实例的网络类型后再有针对性地解析和处理。VPC类型实例在 os.conf 文件的 eth0_route 参数中配置默认公网路由。经典网络类型实例在 os.conf 文件的 eth1_route 参数中配置默认公网路由，内网路由配置在 eth0_route 中。配置优化 ...
快速入门（CPFS-NFS）（推荐）
CPFS通过 协议服务 支持NFS协议。利用NFS协议，可以获得更加优秀的操作系统兼容性和计算端弹性，并仍能享受CPFS强大的吞吐能力。本文以CentOS操作系统为...本文以ECS实例上挂载的本地路径/mnt 为例，介绍在CPFS文件系统中创建文件和删除文件。
消息通知
异步处理请求返回时仅返回任务ID，您需要在处理请求内添加消息通知参数，以在数据处理完成时获取到数据处理任务的结果。注意事项 仅异步处理支持消息通知。消息通知仅支持MNS主题。关于MNS的更多信息，请参见 消息服务MNS快速入门。参数...
SDK示例
本文列出了使用Java代码通过Hadoop FileSystem API对 文件存储 HDFS 版 文件系统进行常用操作的示例，您可以参考这些示例代码开发您的应用。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储...
文件存储 HDFS 版和对象存储OSS双向数据迁移
本文档介绍 文件存储 HDFS 版 和对象存储OSS之间的数据迁移操作过程。您可以将 文件存储 HDFS 版 数据迁移到对象存储OSS，也可以将对象存储OSS的数据迁移到 文件存储 HDFS 版。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和...
Ruby SDK收发消息
在解压的Demo工程找到 kafka-ruby-demo 文件夹，根据接入点类型打开对应的文件夹，配置producer.ruby文件和consumer.ruby文件。表 1.配置项说明 参数 描述 brokers SSL接入点。您可在 云消息队列 Kafka 版 控制台 的 实例详情 页面的 接入...
智能生产
说明 当输出路径和待处理文件路径相同，如果文件不同名，则输出文件不会覆盖源文件。如果文件同名，是否覆盖由OSS配置决定，无需覆盖请参见 禁止覆盖同名文件 进行配置。配置后会导致同名文件转码完成后写入OSS失败，建议不要设置输出文件...
备份和恢复
将ECS备份基础版预付费实例与ECS实例绑定，您就可以备份ECS上的文件、ECS整机和ECS数据库。本文介绍如何添加ECS实例进行备份和恢复。支持的备份方案 添加ECS备份时，您可以同时备份ECS文件、ECS自建数据库和ECS整机，也可以任意组合进行...
CreateFileSystem-创建文件系统
例如：快照的源文件系统版本是 1，需要创建版本 2 的文件系统，可以先通过快照创建一个文件系统 A，然后再创建一个满足版本 2 配置的文件系统 B，把文件系统 A 中的数据拷贝至文件系统 B，拷贝完成后把业务迁移到文件系统 B 即可。...
CreateFileSystem-创建文件系统
例如：快照的源文件系统版本是 1，需要创建版本 2 的文件系统，可以先通过快照创建一个文件系统 A，然后再创建一个满足版本 2 配置的文件系统 B，把文件系统 A 中的数据拷贝至文件系统 B，拷贝完成后把业务迁移到文件系统 B 即可。...
视频DNA
参数 说明 待处理文件地址 单击 选择，在 Bucket 下拉列表中，选择Bucket名称。路径 下方会显示对应Bucket已经创建好的文件夹，在文件夹下选择一个文件作为输入路径。视频DNA管道 在下拉列表中选择管道名称。说明 如果 视频DNA管道 下拉...
Stream API
Stream API是一种处理流式数据的方法。通过Stream API，您可以在边缘节点上处理流式数据，例如音频和视频。Stream API可以将流式数据分块传输，提高数据传输效率。ReadableStream 定义：ReadableStream的定义，请参见MDN官方文档 ...
Stream API
Stream API是一种处理流式数据的方法。通过Stream API，您可以在边缘节点上处理流式数据，例如音频和视频。Stream API可以将流式数据分块传输，提高数据传输效率。ReadableStream 定义：ReadableStream的定义，请参见MDN官方文档 ...
Stream API
Stream API是一种处理流式数据的方法。通过Stream API，您可以在边缘节点上处理流式数据，例如音频和视频。Stream API可以将流式数据分块传输，提高数据传输效率。ReadableStream 定义：ReadableStream的定义，请参见MDN官方文档 ...
安装
如果您需要管理OSS存储空间、上传下载文件、管理数据、进行图片处理等，可以先安装OSS Node.js SDK。本文为您介绍如何安装和使用OSS Node.js SDK。前提条件 已开通阿里云对象存储OSS服务。已创建RAM用户的AccessKey ID和AccessKey Secret。...
什么是文件存储 HDFS 版
文件存储 HDFS 版（Apsara File Storage for HDFS）是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。产品概述 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统（Hadoop Distributed File System）中一样管理和访问数据。您...
AttachDbfs-挂载数据库文件系统
调用AttachDbfs为一台ECS实例挂载一个按量付费的数据库文件系统。ECS实例和数据库文件系统必须在同一个可用区内。接口说明 调用该接口时，您需要注意：数据库文件系统的状态必须为待挂载（Unattached）。挂载数据库文件系统时，目标 ECS ...
Pig作业配置
x mapreduce ossref:/emr/checklist/jars/chengtao/pig/script1-hadoop-oss.pig 说明 您也可以单击下方的+插入OSS路径，选择 文件前缀 为 OSSREF，从 文件路径 中进行浏览和选择，系统会自动补齐OSS上Pig脚本的路径。单击 保存，作业内容...
挂载NAS数据卷
NAS文件系统必须和实例处于同一VPC内。NAS为共享存储，一个NAS可以挂载到多个实例上。此时，如果多个实例同时修改相同数据，需要应用自行执行数据同步。在卸载NAS前，请勿删除NAS挂载点，否则可能会造成操作系统无响应。准备工作 使用阿里...
前言
示例代码包括以下内容：示例文件 示例内容 Object.php 文件的相关操作，包括 上传文件、下载文件 和 管理文件 等 MultipartUpload.php 分片上传 Signature.php URL签名授权访问 Callback.php 上传回调 Image.php 图片处理 LiveChannel....
如何设置拼接和剪辑
在视频制作过程中，如果您有添加片头、片尾、直播录制视频拼接或截取视频中的关键内容等需求，可以通过媒体处理的拼接剪辑功能实现。拼接是指把多个不同格式、不同编码、分辨率的视频拼接在一起，输出成一个格式、编码、分辨率相同的新视频...
部署高可用及共享存储Web服务
随着业务规模的增长，数据请求和并发访问量增大、静态文件高频变更，企业需要搭建一个高可用和共享存储的网站架构，以确保网站服务能够7*24小时运行的同时，可保障数据一致性和共享性，并降低数据重复存储的成本。方案架构 方案提供的默认...
DeleteUserGroupsMapping-删除用户和组的映射关系
删除文件存储 HDFS 版文件系统实例的用户和组的映射关系。接口说明 文件存储 HDFS 版的文件系统权限管理依赖文件的用户和组，用户和组映射关系需要通过 OpenAPI 进行管理。有关文件存储 HDFS 文件系统目录和文件访问权限的信息，请参见文件...
管理函数
其余运行环境支持 使用示例代码、通过 ZIP 包上传代码、通过文件夹上传代码 和 通过 OSS 上传代码。使用示例代码 启动命令 说明 仅当您选择 使用自定义运行时创建 函数时，需设置此配置项。程序的启动命令。如果不配置启动命令，您需要在...
使用实例时镜像相关问题
在使用ECS实例过程中，可能会遇到一些与镜像有关的问题或咨询，比如实例启动慢、系统负载高、如何编译内核等。本文介绍在使用ECS实例过程中遇到的镜像相关问题及解决方案。Windows镜像问题 如何手动更新Windows实例的virtio驱动？Windows ...
流式下载
如果要下载的文件太大，或者一次性下载耗时太长，您可以通过流式下载，一次处理部分内容，直到完成文件的下载。OSS iOS SDK没有提供stream类型的下载接口，但是提供了类似 NSURLSession 库的 didRecieveData 函数的分段回调功能。如果设置...
API概览
本产品（媒体处理/2014-06-18）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可通过...
流式下载
说明 使用 getStream 下载文件时，返回的 Readable Stream 用于流式地处理文件内容。const OSS=require('ali-oss');const fs=require('fs');const client=new OSS({/yourRegion填写Bucket所在地域。以华东1（杭州）为例，Region填写为oss-...
图片处理
图片处理使用 说明 这里图片处理后只会应用于“/处理下载的数据”处的使用方式，并不会改变OSS的原文件，如需使用处理后的图片文件替换原文件，请参考 图片处理持久化。匿名访问 String url=oss.presignPublicObjectURL(testBucket,...
ListUserGroupsMappings-查看用户和组的映射关系
查看文件存储 HDFS 版文件系统实例的用户和组的映射关系。接口说明 文件存储 HDFS 版的文件系统权限管理依赖文件的用户和组，用户和组映射关系需要通过 OpenAPI 进行管理。有关文件存储 HDFS 版文件系统目录和文件访问权限的信息，请参见 ...
EAIS软件包说明
用途 提供使用EAIS推理的示例代码以及示例推理程序所需要的模型文件和数据文件，还可以提供使用Python脚本推理PyTorch模型的环境。当前版本 4.2.4 安装方法 执行如下命令，下载并解压eais-miniconda软件包。wget ...
另存为
本文为您介绍另存为的概念、注意事项、参数说明和使用示例。什么是另存为 同步处理默认不保存处理后的文件，您需要在处理请求内添加另存为参数，将处理后的文件作为对象(Object)保存到指定的存储空间(Bucket)内。异步处理由于是以任务形式...
CreateUserGroupsMapping-创建用户和组的映射关系
创建文件存储 HDFS 版文件系统实例的用户和组的映射关系。接口说明 文件存储 HDFS 版的文件系统权限管理依赖文件的用户和组，用户和组映射关系需要通过 OpenAPI 进行管理。有关文件存储 HDFS 版文件系统目录和文件访问权限的信息，请参见 ...
- 产品推荐
- 这些文档可能帮助您