迁移开源HDFS的数据到文件存储 HDFS 版

准备工作 开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。基于阿里云ECS搭建Hadoop集群(下称"迁移集群"),用于访问 文件存储 HDFS 版 实例和迁移数据,并满足以下条件:迁移集群与 ...

使用前须知

本文介绍该应用的功能、工作原理、资产、费用等信息。重要 本文档为阿里云原创文档,知识产权归阿里云所有,由于本文档旨在介绍阿里云与第三方产品交互的服务能力,因此可能会提及第三方公司或产品等名称。功能说明 提供便捷的配置,帮助您...

使用rsync工具迁移数据

准备工作 NAS文件系统之间进行数据迁移时,需要云服务器可以同时访问源NAS和目的NAS。因此,您需要确保通过同一个阿里云专有网络VPC可以同时访问两个NAS。查看源文件系统挂载点信息。迁移之前请记录源文件系统的挂载点和所属的专有网络VPC...

生命周期管理概述

阿里云文件存储NAS推出的生命周期管理功能,可以帮助您将低频访问的冷文件数据从标准存储转换到低频存储或归档存储中,并采用低频存储或归档存储计费方式,从而减少文件系统的存储费用。本文主要介绍生命周期的策略、使用限制、应用场景、...

使用Robocopy工具迁移数据

准备工作 NAS文件系统之间进行数据迁移时,需要云服务器可以同时访问源NAS和目的NAS。因此,您需要确保通过同一个阿里云专有网络VPC可以同时访问两个NAS。查看源文件系统挂载点信息。迁移之前请记录源文件系统的挂载点和所属的专有网络VPC...

配置CDH6使用文件存储 HDFS 版

数据迁移完成后,您还需要配置CDH上的HDFS服务、YARN服务、Hive服务、Spark服务、HBase服务,才能使用 文件存储 HDFS 版。配置Cloudera Management服务 执行以下命令,将最新的 文件存储 HDFS 版 Java SDK复制到Cloudera Management服务的...

Runtime安全

工作原理是拦截系统调用并只对列入白名单的系统调用放行。Docker有一个默认的Seccomp配置文件,适用于大多数通用工作负载。containerd运行时也包含默认的Seccomp配置文件。更多信息,请参见 默认的Seccomp配置文件。您可以通过向容器或...

使用SQL分析连接

模块 说明 工作文件列表,公测(Beta)版本的工作文件列表支持连通本地文件。首次访问时显示 无打开的文件夹,您可以单击 打开文件夹 按钮,选择打开本地文件夹,首次打开会有弹框让您确认查看文件夹权限。重要 我们一贯重视您的系统...

单账号跟踪概览

工作原理 创建单账号跟踪并投递到日志服务SLS或对象存储OSS,事件会以JSON格式保存在SLS Logstore或OSS存储空间中,便于您后续查询、分析或长时间存储事件。您可以按需选择存储服务:如果您需要查询或分析事件,可以将事件投递到日志服务...

如何使用 Git LFS

在上面的一些举例之后,相信大家会有对Git LFS有一点体感,其工作原理如下:Git 场景 首先,我们看下普通的场景,普通场景不论是针对小型的代码文本文件、还是比较大型的图片文件,在相关变更从本地提交到远端仓库时,所有的相关文件资源...

功能概览

本文介绍 云备份 的数据同步功能概览,包括数据同步的简介、工作原理、操作流程和费用等。简介 数据同步功能是阿里云 云备份 提供的一项在线数据同步服务,便于将源端数据(包括NAS、HDFS、S3兼容存储、对象存储OSS、CPFS、OSS协议兼容存储...

补丁管理原理介绍

该文档会详细介绍补丁管理的工作原理,以及如何扫描系统上的补丁状态,安装缺失的补丁等。Linux 补丁管理支持的Linux系统包括 CentOS/Alibaba Cloud Linux/Debian/Ubuntu 等,不同OS使用不同的包管理工具,具体如下,不同包管理工具扫描、...

自动优化

说明 详细内容可参考Databricks官网文章:自动优化 自动优化的工作原理 自动优化包含两个重要特性:优化Delta表的写入 在开源版Spark中,每个executor向partition中写入文件时,都会创建一个文件进行写入,最终会导致一个partition中包含...

功能概览

本文介绍云备份的本地NAS备份的功能概览,包括优势、工作原理、操作流程和费用等。简介 本地NAS备份功能是阿里云的云备份服务提供的针对客户本地NAS的高效率低成本数据保护解决方案。云备份支持常见的NFS和CIFS/SMB存储,提供多节点并发...

HaaS EDU场景式应用整体介绍

本案例中包括以下主要知识点:陀螺仪工作原理 MPU-6050的驱动和使用 基础算法实现小球随手摆动 通过本案例的学习,能完整的学习到陀螺仪的工作原理,AliOS Things中陀螺仪数据读取,基础算法调教等等操作。同时,您还可以基于陀螺仪的数据...

使用ALS算法实现音乐评分预测(旧版)

ALS算法 交替最小二乘ALS(Alternating Least Squares)算法的原理是对稀疏矩阵进行模型分解,评估缺失项的值,从而得到基本的训练模型。在协同过滤分类方面,ALS算法属于User-Item CF(Collaborative Filtering),兼顾 User 和 Item 项,...

配置Range回源

开启Range回源的工作原理如下图所示:注意事项 开启Range回源前需确认源站是否支持Range请求,即HTTP请求头中包含Range字段,并且源站能够响应正确的206文件分片。如果源站不支持Range请求,开启Range回源将导致资源无法缓存。操作步骤 ...

Range分片

开启Range分片后的工作原理如下图所示:注意事项 Range分片功能默认为关闭状态。在启用Range分片功能之前,请确认源站是否能够处理带有Range头的HTTP分段请求,并能够以状态码206正确地返回请求的文件分片。如果源站不支持Range请求,启用...

为什么云存储网关与OSS上的文件不一致

工作原理 详情请参见 基于按需扫描机制的常规反向同步。详情请参见 基于消息通知的极速同步。详情请参见 基于API触发的单次反向同步。基于按需扫描机制的常规反向同步 云存储网关默认采用基于按需扫描机制的 反向同步 功能,将OSS上的变化...

配置Range回源

开启Range回源的工作原理如下图所示:注意事项 开启Range回源有以下注意事项:开启Range回源前需确认源站是否支持Range请求,即HTTP请求头中包含Range字段,并且源站能够响应正确的206文件分片。如果源站不支持Range请求,开启Range回源将...

概述

本文档主要介绍直播录制的工作原理及其API提供的功能。什么是直播录制 直播录制的原理 直播录制的过程,是通过拉取您推上来的直播流,将音视频封装成单独的一个个媒体切片(封装格式为TS),然后存入您指定的OSS bucket。直播录制在工作时...

自动归档

本文介绍 云备份 的自动归档功能,包括功能介绍、关键优势、支持范围和使用限制、工作原理、费用以及注意事项等。功能介绍 自动归档功能是阿里云 云备份 提供的在合规场景下低成本长期保存备份数据解决方案。在合规场景要求下,如果您需要...

Page Cache限制功能

工作原理 开启Page Cache限制功能后,memcg粒度的工作原理如下。当memcg进程分配Page Cache时,判断当前memcg的Page Cache是否超过限制,并从当前memcg开始往上遍历,逐级检查父memcg的 memory.pagecache_limit 值,如果该值为0,表示父...

基础开发

本文介绍 Serverless 应用引擎 SAE(Serverless App Engine)源码部署的工作原理、环境配置、构建流程、源代码导入等信息。整体工作原理 作为 Serverless 应用引擎 SAE(Serverless App Engine)中,降低用户运维负担的重要一环,源码部署...

通过云企业网实现同地域跨VPC挂载NAS

更多信息,请参见 转发路由器工作原理。转发路由器各版本支持的地域,请参见 转发路由器的版本。场景示例 某企业在阿里云华南3(广州)地域创建了2个VPC,2个VPC使用ECS部署了相关服务,同时在VPC2下面创建了1个NAS,2个VPC之间互不相通。...

导出开源引擎任务

导出DolphinScheduler任务 原理介绍 DataWorks导出工具通过调用DolphinScheduler的批量导出工作流来定义API信息,获取DolphinScheduler工作流定义的JSON配置,生成一个Zip格式的文件。后续可在 迁移助手>任务上云 的 调度引擎作业导入 页面...

通过云企业网实现跨账号跨地域挂载NAS

更多信息,请参见 转发路由器工作原理。转发路由器各版本支持的地域,请参见 转发路由器的版本。场景示例 某企业使用账号A在华南3(广州)地域、华北6(乌兰察布)地域分别创建了VPC1和VPC3,使用账号B在华南3(广州)创建了VPC2和创建了...

备份策略

在实例列表中找到目标集群实例,单击集群实例名称,进入 集群实例工作台。在左侧导航栏中单击 备份恢复,在备份恢复页面单击 备份策略 页签,您可以查看集群实例的备份策略信息。当初次对集群进行备份时,显示的是默认备份策略。单击页面右...

上传视频

待上传文件 单击扫描文件、扫描文件夹或将文件拖拽至区域内进行文件上传,视频文件上传后自动执行工作流并生成媒体文件。单击 上传文件,开始上传。后续步骤 上传后的视频文件会在媒体处理控制台 媒体列表 中生成媒体文件。查看或发布媒体...

工作流概述

Designer 默认为您提供两个工作文件夹:我的工作流 和 工作空间公开工作流,分别用于分类存储 仅自己可见 的工作流和 工作空间内公开可见 的工作流,同时您也可以在这两个文件夹下再新建文件夹,根据业务分类需要进一步做文件夹分类,...

工作流概述

功能概览 基本概念 基本概念 说明 媒体工作流(MediaWorkflow)工作流是预先编排好的一系列任务流程,可以实现在指定(或任意)OSS Bucket上传一个文件后,自动(或手动)触发按照预先编排好的环节和条件依次执行作业。由媒体工作流ID...

创建工作

工作流也支持 新增文件手动触发工作流(推荐输入文件为直播录制的M3U8文件使用)、历史文件手动触发工作流,详细说明请参见本文 后续步骤。登录 媒体处理控制台。在顶部菜单栏左侧选择地域。在左侧导航栏,选择 工作流>工作流编排。单击 ...

添加媒体Bucket

将OSS的Bucket在媒体处理MPS中绑定为输入媒体Bucket、输出媒体Bucket后,媒体处理MPS才有权限监听该Bucket上传完成的消息,以实现触发工作流执行和处理完成的文件回写动作。本文为您介绍如何通过媒体处理控制台添加媒体Bucket。前提条件 ...

什么是Git LFS大文件存储?

一方面,他们希望继续使用Git的版本控制和工作流能力,在另一方面Git仓库中大文件及其历史不断增多,导致工作效率越来越差。所以,针对上述的问题,Git LFS应运而生,是目前针对大文件场景下的主流的解决方案。什么是Git大文件存储?Git ...

DNS概述

DNS为Kubernetes集群内的工作负载提供域名解析服务。本文主要介绍Kubernetes集群中DNS域名解析原理和ACS集群中默认内置的DNS服务器CoreDNS。Kubernetes集群中DNS域名解析原理 ACS集群中kubelet的启动参数有-cluster-dns=和-cluster-domain=...

迁移EMR项目至DataWorks

本文为您介绍,如何通过一键迁移方式及文件导入导出方式,将EMR项目迁移至DataWorks工作空间。前提条件 已开通DataWorks服务并创建DataWorks工作空间。详情请参见 创建并管理工作空间。如您是RAM用户,需拥有 空间管理员、...

GetWorkitemFile-获取工作文件信息

获取工作项的文件信息,例如工作项的描述中的图片信息。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 ...

Kerberos基础使用

如果修改或导出该类Principal对应的Keytab文件,将会导致原有的Keytab文件失效,从而影响服务的正常工作。因此,请勿修改该类Principal,并禁止导出Keytab文件。客户端 Ticket是Kerberos认证协议的一部分,承载着用于验证用户身份的加密...

概述

您可以使用本地文件备份客户端来备份本地数据中心的SMB NAS文件,并可以在文件丢失或受损时恢复文件。说明 本地备份SMB NAS文件仅适用于不支持ECS备份方式的地域。...本地备份SMB NAS包含以下内容:准备工作 备份NAS文件 恢复NAS文件

概述

您可以使用本地文件备份客户端来备份本地数据中心的NFS NAS文件,并可以在文件丢失或受损时恢复文件。说明 本地备份NFS NAS文件仅适用于不支持ECS备份方式的地域。...本地备份NFS NAS包含以下内容:准备工作 备份NAS文件 恢复NAS文件
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储HDFS版 文件存储NAS 数据库文件存储 云备份 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用