使用须知
通过OSS的碎片自动删除策略，可以帮助用户管理碎片，详情请参见 删除碎片。文件共享的缓存区估算公式为：本地建议缓存容量=（应用带宽（MB/s）-网关后端带宽（MB/s））×写入时长（s）×1.2。如果您需要获得较好的本地访问性能，可以先预估...
删除直播截图文件
false：不同步删除OSS文件。返回数据 名称 类型 示例值 描述 FailureCount Integer 1 删除截图失败的数量。RequestId String 90F60327-ABEC-5A93-BF1F-*请求ID。SnapshotDeleteInfoList Array of SnapshotDeleteInfo 快照删除信息列表。...
NAS存储卷概述（ASK）
它提供了简单的可扩展文件存储以供与ECS配合使用，多个ECS实例可以同时访问NAS文件系统，并且存储容量会随着您添加和删除文件而自动弹性增长和收缩，为在多个实例或服务器上运行产生的工作负载和应用程序提供通用数据源。存储规格 NAS提供...
监控
说明 在日志服务控制台可以查看网关文件的同步列表，请参见 如何在日志监控中查看网关文件同步列表。相关操作 在 日志监控 区域，您还可以进行如下操作。参数 说明 删除日志监控 如果您不想再使用日志监控功能，可以单击 删除，删除已创建...
使用rsync工具迁移数据
本文介绍如何使用rsync工具实现阿里云文件存储NAS NFS协议文件系统之间的数据迁移。前提条件 已拥有一个存有数据的NFS协议文件系统，并且拥有一个专有网络类型挂载点。费用说明 NAS与NAS之间的迁移，会涉及如下费用：使用ECS作为数据传输的...
截图常见问题
提交M3U8文件同步截图失败 M3U8文件同步截图必须保证M3U8索引中的TS路径与M3U8在相同的路径下，异步无要求。提交单张截图失败，指定时间超过视频时长 错误码：InvalidParameter.ResourceContentBad 错误描述：The resource operated ...
全增量数据同步
增量同步中的日志管理 开启增量同步后，如果不消费数据，默认日志会保留48小时，超时后订阅关系自动取消，保留的数据自动删除。什么场景会导致“不消费数据”：没有终止任务的前提下直接释放LTS集群；同步任务暂停；任务异常阻塞 注意事项 ...
API概览
ResetFileSystem 使文件系统回滚至某一阶段 使文件系统回滚至某一历史快照的文件系统状态。标签 API 标题 API概述 TagResources 为文件系统创建并绑定标签 为指定文件系统创建并绑定标签。UntagResources 解绑并删除标签 删除指定文件系统...
素材库
图片/视频 本地直接上传，自动获取文件名，支持批量上传图片和视频文件，修改时文件标题限制128个字符，超出后自动取前128个字符。图片大小限制2M，格式限制jpg、png、jpeg、gif。视频大小限制10M，格式限制mp4。网页 标题：限制60个字符。...
HBase数据同步与迁移
开启增量同步后，如果不消费数据，默认日志会保留48小时，超时后订阅关系自动取消，保留的数据自动删除。前提条件 已检查源集群、目标集群、LTS之间的网络连通性。已添加HBase、Lindorm数据源。如何添加，请参见 添加HBase数据源 和 添加...
通过整库迁移配置集成任务
离线整库迁移可用于将本地数据中心或在ECS上自建的数据库同步数据至大数据计算服务，包括MaxCompute、Hive、TDH Inceptor等数据源。本文为您介绍如何新建并配置整库迁移任务。前提条件 已完成所需迁移的数据源创建。整库迁移支持MySQL、...
删除直播录制文件
false：不同步删除OSS文件。返回数据 名称 类型 示例值 描述 Code String OK 状态定义码。若状态错误，请参考错误码信息。Message String OK 状态解释。若状态错误，请参考错误码信息。RecordDeleteInfoList Array of RecordDeleteInfo ...
自动优化
自动优化是Delta Engine一组可选特性，当开启该组特性后，Delta Engine会自动合并对Delta表的多次写入产生的小文件，以牺牲部分写性能为代价，大幅提升查询性能。自动优化在这些场景下尤其有用：1）能接受分钟级时延的流式数据入湖；2）常...
同步时源库为Redis的注意事项及限制
源库为Redis的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：Redis间的双向同步 Redis间的单向同步 Redis间的双向同步 类型 说明 源库限制 为保障同步质量，DTS会在源库中插入一个前缀为DTS_REDIS_TIMESTAMP_HEARTBEAT的...
常见问题
若单机运行超过一个ossutil实例，且都在进行上传或下载任务，当其中一个ossutil的任务完成后，会自动删除.ossutil_checkpoint 文件夹，导致其它需要使用断点续传的ossutil任务进度超过100%且无法完成。解决方案：将当前任务结束，重新开始...
创建同步OSS
准备工作 1.准备OSS Bucket DataHub支持将数据同步到对象存储...确认同步数据同步文件在OSS中的命名格式如下图所示：包含Bucket、目录前缀、二级目录以及文件名等 下载该文件，并查看文件内容，TUPLE同步文件内容为csv数据格式，如下图所示：
通过整库迁移配置集成任务
离线整库迁移可用于将本地数据中心或在ECS上自建的数据库同步数据至大数据计算服务，包括MaxCompute、Hive、TDH Inceptor等数据源。本文为您介绍如何新建并配置整库迁移任务。前提条件 已完成所需迁移的数据源创建。整库迁移支持MySQL、...
快照FAQ
例如修改关键系统文件、实例从经典网络迁移至专有网络VPC、日常数据备份、实例误释放恢复、预防网络攻击、更换操作系统、为生产环境提供数据支撑和其他具有操作风险的场景。出现错误操作时，您可以及时回滚云盘，降低风险。更多信息，请...
PolarDB MySQL版间的双向同步
TRUNCATE TABLE 重要 仅正向任务（即源库同步至目标库）支持同步DDL，反向任务（即目标库同步至源库）不支持同步DDL，将自动过滤DDL操作。支持的冲突检测 为保障同步数据的一致性，您需要确保同一个主键、业务主键或唯一键的记录只在一个...
挂载文件存储 HDFS 版文件系统
将 core-site.xml 文件同步到所有节点上。部署 文件存储 HDFS 版 Java SDK。下载最新的 文件存储 HDFS 版 Java SDK。将下载的 文件存储 HDFS 版 Java SDK部署到HDFS组件的CLASSPATH路径下。cp aliyun-sdk-dfs-x.y.z.jar${HADOOP_HOME}/...
同步主实例中的资源
当业务应用在多地域进行主备或多活容灾部署时，为了保证容灾场景下的业务连续性，推荐您使用KMS的跨地域同步功能，即在多个地域分别购买KMS实例（其中1个作为主实例、其他为副本实例）并进行资源同步。本文介绍如何同步主实例中的资源。...
OSS文件如何避免数据误删或误覆盖
概述 使用阿里云对象存储OSS时，有些操作可能会导致文件被删除或者覆盖，本文主要介绍如何避免数据误删或误覆盖。详细信息 OSS是分布式存储产品，通过数据自动多重冗余备份保证数据的持久性。因此正常情况下，OSS本身是不会导致数据出现...
管理数据流动任务
删除（Evict）将释放CPFS上文件的数据，删除后文件在CPFS上只保留元数据，您仍能看到该文件，但文件的数据块已清除，不占用CPFS上的存储空间，访问该文件数据时，再从源端存储（例如OSS）按需加载。说明 删除前，请务必确认对应文件在OSS上...
修改自动快照策略
持续保留，直至快照数量达到额度上限后被自动删除：在快照总数量达到上限后，系统会删除最早创建的自动快照。说明 修改保留时间不影响已经复制的快照，只对新增的复制快照生效。相关文档 ModifyAutoSnapshotPolicy-修改自动快照策略
HDFS数据源
HDFS是一个分布式文件系统，为您提供读取和写入HDFS双向通道的功能，本文为您介绍DataWorks的HDFS数据同步的能力支持情况。支持的版本 目前不支持阿里云文件存储HDFS版。使用限制 离线读 使用HDFS Reader时，请注意以下事项：由于连通默认...
产品计费
本文档介绍 IDaaS EIAM 2.0 的商业化计划、版本区分、产品计费等。版本区分 IDaaS EIAM 2.0 会提供如下版本：免费版：免费使用众多身份管理能力，满足基础身份管理场景，例如将 AD ...一天后将自动删除专属端点，删除后资源和数据不可恢复。
出错提示S10磁盘分区文件数据同步测试出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S10_*磁盘分区文件数据同步测试出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S10_*磁盘分区文件数据同步测试出错”。其中S10_*可能的错误码如下：S...
什么是CPFS智算版（邀测）
CPFS智算版是阿里云文件存储CPFS推出的一款超高性能的文件存储服务，支持端到端RDMA网络，应用于AIGC、自动驾驶等智算场景。本文介绍CPFS智算版的使用限制、费用说明及操作指引。关于CPFS智算版的性能指标，请参见 产品规格。使用限制 仅...
出错提示S2磁盘分区文件数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S2_*磁盘分区文件数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S2_*磁盘分区文件数据同步出错”。其中S2_*可能的错误码如下：S2_R255 S2_R...
2021/08/11 更新日志
2021-08-11 仓库同步 企业在切换代码托管仓库，特别是已关联了较多工具生态的情况...详情参看 日志分析 代码评审文件过大，支持WebIDE查看 差异Diff文件过大不支持页面浏览时，支持通过WebIDE便捷评审代码。历史更新日志 点击查看历史更新日志
无影云盘功能概述
相关说明如下：回收站中的文件默认保留90天，超出后将被自动删除。在90天内，您可以根据需要恢复文件或者提前手动删除文件。恢复文件时，文件将恢复至原路径。删除文件时，文件将被彻底删除且不可恢复。回收站中的文件不支持打开或者预览。...
API概览
本产品（数据库文件存储/2020-04-18）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，...
PolarDB MySQL版间的双向同步
数据传输服务DTS（Data Transmission Service）支持两个 PolarDB MySQL版 集群间的双向数据同步，适用于异地多活、异地容灾等多种应用场景。本文介绍双向数据同步的配置步骤。前提条件 已购买源和目标 PolarDB MySQL版 集群（简称PolarDB...
DeleteUserGroupsMapping-删除用户和组的映射关系
删除文件存储 HDFS 版文件系统实例的用户和组的映射关系。接口说明 文件存储 HDFS 版的文件系统权限管理依赖文件的用户和组，用户和组映射关系需要通过 OpenAPI 进行管理。有关文件存储 HDFS 文件系统目录和文件访问权限的信息，请参见文件...
同步时源库为PostgreSQL的注意事项及限制
源库为PostgreSQL的同步方案概览 根据同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到如下目标数据库：RDS PostgreSQL 云原生数据仓库AnalyticDB ...
CreateDataFlow-创建数据流动
Hardlink 类型的文件仅作为普通文件同步到 OSS。Socket、Device、Pipe 类型的文件导出到 OSS Bucket 时，会变成一个普通的无数据空白对象。不支持长度大于 1023 字符的目录路径。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您...
通过SCIM同步Okta用户或用户组的示例
删除不相关的属性映射，仅保留下图所示的属性映射。可选：单击 Push Groups 页签，同步用户组。上述步骤完成后，Okta用户已经自动同步到云SSO中。如果您还想同步用户组，且用户组已分配到应用程序CloudSSODemo，请按以下操作进行：在 Push ...
手把手教您配置通用型NAS容灾
警告-delete 选项代表从容灾文件系统中删除已在业务文件系统中被删除的数据，请谨慎使用，避免将容灾文件系统中的数据意外删除。您也可以为两个文件系统开启回收站功能，当您误删除业务或容灾文件系统中的文件后，可以通过NAS回收站恢复...
增加或删除已运行任务的同步表
同步数据至Kafka解决方案为您提供了一键增加及删除同步表功能，方便您为已成功配置运行的同步任务快速添加新表或删除已有同步表。本文为您介绍如何增加或删除已运行任务的同步表。前提条件 已创建并运行同步数据至Kafka解决方案的任务，...
StopDataFlow-停用数据流动
如果配置了自动更新，源端发生的数据更新也不会同步到 CPFS 上。停用后，由于资源被回收，数据流动带宽将不再计费，但重新启动数据流动可能因为库存不足导致启动失败。停用数据流动一般耗时 2～5 分钟，您可通过 DescribeDataFlows 查询...
- 产品推荐
- 这些文档可能帮助您