快速入门
将 core-site.xml 文件同步到所有节点上。部署 文件存储 HDFS 版 Java SDK。下载最新的 文件存储 HDFS 版 Java SDK。将下载的 文件存储 HDFS 版 Java SDK部署到HDFS组件的CLASSPATH路径下。cp aliyun-sdk-dfs-x.y.z.jar${HADOOP_HOME}/...
挂载访问FAQ
为什么Windows挂载NFS文件系统创建和打开文件时速度缓慢？Windows使用NFS文件系统是否支持文件锁功能？noresvport挂载参数 为什么要使用noresvport参数挂载NAS？如何检查并修改noresvport挂载参数问题？什么情况会引发网络切换或者后端服务...
高级管理FAQ
当文件系统中包含每月访问频率或每季度访问频率低于2次的文件时，可以开启通用型NAS生命周期管理功能，符合生命周期管理策略的文件将自动转储至低频存储或归档存储，采用低频存储计费方式，从而降低存储成本。为什么我的文件系统不支持生命...
CreateDataFlow-创建数据流动
Hardlink 类型的文件仅作为普通文件同步到 OSS。Socket、Device、Pipe 类型的文件导出到 OSS Bucket 时，会变成一个普通的无数据空白对象。不支持长度大于 1023 字符的目录路径。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您...
导出全量数据到OSS
如果要以更低成本备份 表格存储 中的全量数据或者以文件形式导出 表格存储 数据到本地，您可以通过DataWorks数据集成服务将 表格存储 中的全量数据导出到OSS。全量数据导出到OSS后，您可以自由下载文件到本地。注意事项 此功能适用于 表格...
常见问题
如果业务对数据要求比较精确，您可以删除目标库的数据，然后重新配置同步任务，并在 任务步骤 同时选中 库表结构同步 和 全量同步（默认已选中 增量同步）。DTS全量同步任务长时间没进度，如何处理？若待同步的表为无主键的表，全量同步会...
【邀测】同步备份
使用同步备份 创建双向同步：单击 同步备份>创建双向同步，建立同步映射关系，云端和本地的文件会自动同步更新。高级设置：支持同步过滤，排除指定文件类型，支持设置同步限速。同步状态管理：支持管理同步状态。同步任务管理：支持暂停...
低成本跨境文件传输
对文件同步延时不敏感，能接受一定程度上网络抖动带来同步文件时的延迟。希望传输数据的系统有足够的弹性和扩展性应对大规模文件的写入。方案简介 云服务器模拟应用访问华东2（上海）和美国（硅谷）的对象存储，负责内容的制作和上传。内容...
路由同步
您可以通过路由同步功能控制企业版转发路由器向网络实例传播网络实例连接关联的企业版转发路由器路由表中的路由。本文为您介绍路由同步的使用限制、路由同步机制以及如何开启和关闭路由同步功能。使用限制 仅企业版转发路由器支持路由同步...
DSW连接EMR集群
在DSW Gallery页面中，搜索 大数据和AI一体化：向EMR集群提交Spark作业，单击 在DSW中打开，即可自动将本教程所需的资源和教程文件下载至DSW实例中，并在下载完成后自动打开教程文件。运行教程文件 在打开的教程文件 emr_connect.ipynb 中...
低成本跨境文件传输
对文件同步延时不敏感，能接受一定程度的网络抖动带来的文件同步延迟。希望传输数据的系统有足够的弹性和扩展性应对大规模文件的写入。方案简介 方案架构如下：方案流程如下：ECS模拟应用访问上海和硅谷的OSS，负责内容的制作和上传。内容...
准备工作
您可以使用 云备份 来同步源端数据（包括NAS、HDFS、S3兼容存储等）到目的端（包括阿里云上）。在同步前，您需要完成操作授权、安装和激活客户端。（推荐）使用RAM用户AccessKey RAM是阿里云提供的用户身份管理与资源访问控制服务。RAM允许...
低成本跨境文件传输
对文件同步延时不敏感，能接受一定程度的网络抖动带来的文件同步延迟。希望传输数据的系统有足够的弹性和扩展性应对大规模文件的写入。方案简介 方案架构如下：方案流程如下：ECS模拟应用访问上海和硅谷的OSS，负责内容的制作和上传。内容...
主机管理
新建主机 您可以 登录云盾堡垒机Web管理页，在 资产>主机管理 页面创建主机，创建方式包括：手动创建、同步阿里云ECS、从本地文件导入。手动创建 单击 新建主机，进入 新建主机 页，然后按要求填写主机信息后即可创建。同步阿里云ECS 在 ...
使用须知
文件网关须知 建议不要频繁中断大文件拷贝到NFS或SMB共享文件夹。由于后台的分段上传机制，中断大文件拷贝会造成碎片遗留在OSS。这些碎片会影响OSS的空间统计，造成OSS空间统计略大于看到的文件总量。通过OSS的碎片自动删除策略，可以帮助...
无影云盘功能概述
挂载盘 无影云盘 支持自动挂载到 无影云电脑 中，挂载时默认挂载到 云电脑 的P盘（即 无影云盘(P:)），在该P盘中同步生成 个人空间 和 收到的共享 两个文件夹。挂载盘文件夹中的文件与您 无影云盘 中的文件一致，您在文件夹中的相关操作，...
读写访问文件类问题
当您访问文件系统中的文件时，文件系统中的文件会受到某些限制影响，导致文件操作错误、挂载点无响应或访问无响应等。您可以在本文中查找一些常见文件操作错误、文件属主、数据不同步或访问无响应的解决方案。交叉挂载兼容性问题 Linux挂载...
UpdateGatewayFileShare
RemoteSync Boolean 否 true 文件共享是否打开反向同步。取值范围如下：false（默认）：否。true：是。RemoteSyncDownload Boolean 否 false 复制模式情况下，是否下载文件数据。网关版本1.2.0及以上支持此参数。取值范围如下：false（默认...
备份大规模文件系统
添加完备份数据源，需要新建备份计划进行数据备份任务。本文介绍新建备份计划的操作步骤。备份计划创建后，云备份按照备份间隔...云备份 数据同步功能支持将源端的海量NAS文件同步至目的端。更多信息，请参见 数据同步功能概览。什么是云备份
CreateGatewayFileShare
RemoteSync Boolean 否 false 文件共享是否打开反向同步。取值范围如下：false（默认）：否 true：是 PollingInterval Integer 否 4500 文件共享反向同步时间间隔。取值范围为15~36000。说明 在复制模式+反向同步启用下载文件数据时，取值...
使用MongoShake实现MongoDB实例间的延迟同步
准备工作 为达到最理想的同步性能，请确保源端MongoDB副本集实例的网络类型为专有网络VPC，如果是经典网络，请切换成专有网络VPC。更多信息，请参见 经典网络切换为专有网络。创建作为同步目标端的MongoDB副本集实例，在创建的时候请选择与...
开启Binlog
说明 此时如需删除Binlog文件，您可以重新打开Binlog，将上述Binlog的保存时长参数（loose_expire_logs_hours 或 binlog_expire_logs_seconds）设置为一个较小的值，等文件超过保存时长自动删除后再关闭Binlog。开启Binlog 为存量集群开启...
备份本地NAS文件
为了避免本地NAS（用户自建文件系统）数据丢失或受损，建议您通过 云备份 对自建文件系统NAS中的所有目录及文件进行备份。...云备份 数据同步功能支持将源端的海量NAS文件同步至目的端。更多信息，请参见 数据同步功能概览。什么是云备份
Logstash FAQ
Logstash实例部署在专有网络VPC（Virtual Private Cloud）下，可以通过配置NAT网关实现与公网的连通。具体操作，请参见 配置NAT公网数据传输。使用自建Kafka作为Logstash的输入或者输出时，出现错误日志，如何处理？常见错误日志如下：No ...
启动Word
流程搭建示例 搭建流程 在画布中新增“启动Word”组件，打开一个指定的Word文件 启动方式选择默认打开Word Word文件路径参数栏点击文件夹按钮，进入文件路径界面，选择指定的文件夹 执行结果 该流程成功执行完后，会自动启动打开Word文件。
参数配置常见问题
Binlog文件清理相关参数 Binlog文件有如下两种保存策略：开启Binlog后，文件默认保存3天，超过3天的Binlog文件会被自动删除。说明 在2023年11月23日前购买的 PolarDB MySQL版 集群，其Binlog文件默认保存两周（14天）。在2024年1月17日前...
管理NFS共享
背景信息 NFS（Network File System，网络文件系统）允许网络中的计算机之间通过TCP/IP网络共享资源。在NFS应用中，本地NFS客户端应用可以透明地读写位于远端NFS服务器上的文件，就像访问本地文件一样。云存储网关作为NFS的服务器端提供...
CREATE TABLE AS（CTAS）语句
通过CTAS语句，在实时同步数据的同时，还能实时将上游表结构（Schema）的变更同步到下游表，提高您在目标存储中创建表和维护源表结构变更的效率。本文为您介绍CREATE TABLE AS（CTAS）的使用方法，并提供了多种使用场景下的示例。前提条件 ...
迁移演练项说明
打开/etc/fstab文件，找到配置XFS文件系统所在的行，将第四列中已经弃用的XFS挂载选项删除或者改为defaults。具体操作，请参见 日志提示“Deprecated XFS mount options present in FSTAB”，怎么办？NFS文件系统 严重 系统中挂载了NFS文件...
部署高可用及共享存储Web服务
如果对于写有可用性要求，那么在Master NAS故障恢复后，不应该立即将 ECS 应用的操作文件目录切换到Master NAS的挂载点目录上，应该先将故障期间，Backup NAS上产生的新文件，同步到Master NAS之后，再做切换，并且要确保切切换期间，...
数据流动概述
背景信息 当CPFS Fileset 与OSS Bucket创建数据流动后，CPFS文件系统会自动同步OSS Bucket中的对象元数据。同步完成后您能通过高性能且POSIX兼容的文件接口快速地处理OSS中的数据。同时，CPFS文件系统支持通过CPFS控制台或OpenAPI将数据...
常见问题
资源组操作及网络连通 在做离线同步时，我们需要先了解哪些DataWorks及其网络能力？同步ECS自建的数据库的数据时，如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个地域（Region）下，进行数据同步时如何保障数据库与...
上报日志
写到客户端本地文件中的日志，会通过以下方式同步到日志服务器。自动上报：满足一定条件后自动上报。日志开关上报：在自动上报的基础上，通过服务端下发的开关值，修改自动上报触发的条件。手动上报：调用上报日志接口强制上传。自动上报 ...
MSE Sync迁移方案
MSE Sync是一款基于开源Nacos Sync项目深度定制和优化的数据同步工具，不仅具备双向数据同步能力，还集成了自动服务发现与一键全量同步服务等高效功能。通过采用多实例部署架构，实现了高级别的容灾备份机制，适用于在Nacos、Zookeeper以及...
全球数据库常见问题
说明 GDN网络中所有集群的数据保持同步，网络中每个集群均提供读写服务，并且提供异地灾备能力。跨地域写数据会受一定的网络延迟影响，GDN网络做了特殊优化，通过多通道物理复制，高压力下全球同步延迟小于2秒。如何清理GDN主从空间以及表...
在云控制台上使用文件网关
本文介绍如何通过阿里云云存储网关控制台快速创建文件网关并完成共享设置。前提条件 已注册阿里云账号，并完成实名认证，更多信息，请参见 注册阿里云账号。说明 建议您使用RAM账户登录云存储网关控制台进行相关操作，更多信息，请参见 ...
上报日志
写入客户端本地文件中的日志，会通过以下三种方式同步到日志服务器。自动上报：满足一定条件后自动上报。日志开关上报：在自动上报的基础上，通过服务端下发的开关值，修改自动上报触发的条件。手动上报：调用上报日志接口强制上报。如需...
管理共享
加入同步组 开启该共享的极速同步功能，将其加入同步组，对该共享的Bucket中数据进行的任何改动都会自动同步至共享的本地客户端。开启该选项后，该共享的反向同步选项将自动关闭。说明 要选择该选项，您必须提前创建一个同步组，且同步组的...
使用Tapdata Cloud导入MySQL数据
数据校验 打开 数据校验 开关后，任务会自动对同步结果的一致性进行全量校验和增量校验，并会在运行监控页面展示校验不一致的数据行数。重要 当任务符合以下任意一种情况时，即使打开 数据校验 开关，任务也不会进行校验。添加了中间处理...
系统设置
开启自动创建网络域后，无需您手动创建网络域并关联资产，PAM 会在资产同步过程中，自动统计 ECS 资产所属 VPC，并根据资产所在的 VPC 自动创建相应的网络域。同时，在网络域配额范围内尽可能启用网络域。接下来，资产将被自动关联到相应的...
- 产品推荐
- 这些文档可能帮助您