块存储FAQ
如何跨ECS实例拷贝数据？上一代云盘-本地SSD盘相关问题 云盘空间不足问题 解决Windows实例磁盘空间满问题 解决Linux实例磁盘空间不足 什么是存储容量单位包SCU？存储容量单位包SCU（Storage Capacity Unit）是一种预付费存储售卖形态，可以...
0042-00000308
问题原因 您发起了UploadPartCopy请求来从一个已存在的Object中拷贝数据来上传一个Part，x-oss-copy-source 参数用来指定拷贝源，如果该参数指定的拷贝源是一个软链接（Symlink），就会产生该错误。问题示例 比如您发起了如下请求：PUT/...
0042-00000306
问题原因 您发起了S3兼容的UploadPartCopy请求来从一个已存在的Object中拷贝数据来上传一个Part，x-amz-copy-source 参数用来指定拷贝源，x-amz-copy-source-range 参数指定的拷贝范围，如果该参数指定的拷贝范围超出了拷贝源文件的大小，...
重要组件
由于只读实例的扩展不需要拷贝数据，创建新的只读实例不但速度快，而且很便宜，您只需要支付相应计算节点的成本即可。阿里云称StandBy和Replica节点为Slave节点，Primary节点也可称为Master节点。User Space File System 即用户态文件系统...
多表归并任务中执行Online DDL操作导致目标库数据丢失
创建临时表：CREATE TABLE tmp_table_table LIKE table_name 变更临时表结构：ALTER TABLE tmp_table_table XXXX 全量拷贝数据：INSERT IGNORE INTO tmp_table_table(SELECT%s FROM table_name FORCE INDEX(%s)WHERE xxx 增量数据Binlog...
UploadPartCopy
通过在 UploadPart 请求的基础上增加一个请求头x-oss-copy-source来调用 UploadPartCopy 接口，实现从一个已存在的Object中拷贝数据来上传一个Part。注意事项 当拷贝一个大于1 GB的文件时，必须使用 UploadPartCopy 的方式进行拷贝。如果想...
技术架构
利用上述的实时扩展能力，PolarDB可以在5分钟内快速拉起一个新的只读节点，挂载同一块存储数据卷，不需要复制拷贝数据即可对外提供服务。计算节点与存储节点之间通过理解数据库语义的智能互联协议将filter和projection等算子从计算层下推到...
从HDFS迁移数据到OSS/OSS-HDFS
拷贝数据到阿里云OSS/OSS-HDFS上。登录集群，详情请参见 登录集群。进入/opt/apps/JINDOSDK/jindosdk-current/tools 目录。在该目录下获取 jindo-distcp-tool-${version}.jar 完整的包名。例如，jindo-distcp-tool-4.6.11.jar。您可以使用...
迁移OSS-HDFS服务不同Bucket之间的数据
oss:/srcbucket.cn-hangzhou.oss-dls.aliyuncs.com/ --dest OSS-HDFS中存放迁移或拷贝数据的目标Bucket的完整路径。oss:/destbucket.cn-hangzhou.oss-dls.aliyuncs.com/ --hadoopConf 访问OSS-HDFS服务的AccessKey ID和AccessKey Secret。...
拷贝文件
分片拷贝默认从一个已存在的Object的当前版本中拷贝数据来上传一个Part。允许通过在请求header:x-oss-copy-source中附带versionId的子条件，实现从Object的指定版本进行拷贝，如x-oss-copy-source:/SourceBucketName/SourceObjectName?...
无锁结构变更方案对比
触发器的设计中拷贝数据和变更数据只能并行，无疑将会增加锁竞争。无触发器解耦了源表和目标表的依赖，所以锁竞争也就不复存在。关于目标表上的拷贝和更新时的竞争，我们在逻辑上使用交叉执行的方式避免和降低锁竞争，虽然会影响变更效率，...
数据量
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
无锁结构变更概览
全量拷贝数据：INSERT IGNORE INTO tmp_table_name(SELECT%s FROM table_name FORCE INDEX(%s)WHERE xxx。增量数据Binlog同步：UPDATE/INSERT/DELETE tmp_table_name。切换新旧表：RENAME TABLE table_name to old_tmp_table_name,tmp_...
无锁结构变更
全量拷贝数据。增量数据同步。数据一致性校验。Kill Session。切换新旧表。执行流程 用户发起无锁结构变更工单。对用户输入的 SQL 语句进行预检查。审批任务流程。执行无锁结构变更任务。操作步骤 新建无锁结构变更任务 示例：将表 student...
CopyDataCache-拷贝数据缓存
注意 拷贝数据缓存的过程相当于复制快照，费用涉及复制过程产生的流量费用以及最终生成的数据缓存的存储费用。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码...
拷贝文件
UploadPartCopy 默认从一个已存在的Object的当前版本中拷贝数据来上传一个Part。允许通过在请求header:x-oss-copy-source中附带versionId的子条件，实现从Object的指定版本进行拷贝，如x-oss-copy-source:/SourceBucketName/...
拷贝文件
UploadPartCopy 默认从一个已存在的Object的当前版本中拷贝数据来上传一个Part。允许通过在请求header:x-oss-copy-source中附带versionId的子条件，实现从Object的指定版本进行拷贝，例如x-oss-copy-source:/SourceBucketName/...
拷贝文件
UploadPartCopy 默认从一个已存在的Object的当前版本中拷贝数据来上传一个Part。允许通过在请求header:x-oss-copy-source中附带versionId的子条件，实现从Object的指定版本进行拷贝，例如x-oss-copy-source:/SourceBucketName/...
拷贝文件
UploadPartCopy 默认从一个已存在的Object的当前版本中拷贝数据来上传一个Part。允许通过在 x-oss-copy-source 的请求Header中附带versionId的子条件，实现从Object的指定版本进行拷贝，例如 x-oss-copy-source:/SourceBucketName/...
拷贝文件
UploadPartCopy 默认从一个已存在的Object的当前版本中拷贝数据来上传一个Part。允许通过在请求header:x-oss-copy-source中附带versionId的子条件，实现从Object的指定版本进行拷贝，例如x-oss-copy-source:/SourceBucketName/...
拷贝文件
UploadPartCopy 默认从一个已存在的Object的当前版本中拷贝数据来上传一个Part。允许通过在请求header:x-oss-copy-source中附带versionId的子条件，实现从Object的指定版本进行拷贝，如x-oss-copy-source:/SourceBucketName/...
产品优势
本文档主要为您说明阿里云数据库文件存储DBFS的主要优势。数据库文件存储DBFS是阿里云推出的一款针对数据库场景的文件存储。它在性能、弹性、高可用、成本及数据安全等维度上做了诸多技术创新与优化。适合云上自建数据库使用，提供企业级...
DBS沙箱功能概览
存储快照和克隆技术：无数据拷贝，让备份数据快速可用。存储虚拟化技术：不依赖用户生产实例，将直接使用云上资源的沙箱实例，且在沙箱中的读写不会影响到源数据库。典型应用场景 基于线上数据的开发测试（Dev或Ops）：测试和预发布需要...
Hudi数据源
本文介绍 云数据库 SelectDB 版 与Hudi数据源进行对接使用的流程，帮助您对Hudi数据源进行联邦分析。...FillBlockTime：Java数据拷贝为C++数据的时间。GetRecordReaderTime：调用Java SDK并创建Hudi Record Reader的时间。
HBase数据同步与迁移
文件层数据拷贝比API层数据迁移效率更高，通常能节省超过50%的流量。单个节点迁移速度可达到150 MB/s，节点数支持水平扩展，可满足TB、PB级别的数据迁移。有完善的错误重试机制、实时监控任务速度和进度，支持任务失败报警。自动同步Schema...
什么是数据库存储DBFS
用户态：减少核内外数据拷贝来提高性能。关键IO加速：针对数据库关键IO实现加速，提升数据库每秒事务数。存储计算分离：自建数据库实现存储计算分离，获得优于单纯基于云盘架构的性能、易用性、容量弹性及成本节省等。MySQL数据库：关闭...
Hadoop DistCp介绍
使用方法 Hadoop DistCp最常见的调用是集群间拷贝，例如将nn1集群的/foo/bar 目录下的数据拷贝至nn2集群的/bar/foo 目录下：hadoop distcp hdfs:/nn1:8020/foo/bar hdfs:/nn2:8020/bar/foo 更多使用说明，请参见 Hadoop社区的DistCp使用...
引擎指标
indexName es_region 指标聚合：sum()采样聚合：avg()elasticsearch-server.cube.follower_indices_store_size_in_bytes Indexing Service 写入托管数据量 通过时序写入到Elasticsearch上，写入索引所占空间内存大小。indexName es_region ...
初始化小于等于2 TiB数据盘（Linux）
一块全新的数据盘挂载到ECS实例后，还不能直接存储数据，通常您需要在数据盘进行分区、文件系统格式化、挂载文件系统等初始化操作后，才能供系统读写数据。本文介绍如何在Linux系统中初始化一块小于等于2 TiB的数据盘。前提条件 数据盘已...
JindoDistCp使用说明
重点优化HDFS到OSS-HDFS的数据拷贝，通过定制化CopyCommitter，实现No-Rename拷贝，并保证数据拷贝落地的一致性。功能全量对齐S3 DistCp和HDFS DistCp，性能较HDFS DistCp有较大提升，致力于提供高效、稳定、安全的数据拷贝工具。环境要求 ...
Tair集群无感扩缩容
本文列举社区版Redis集群、云数据库Redis集群版扩缩容方案的不足，并介绍 云原生内存数据库Tair 集群版无感扩缩容方案。社区版Redis集群版通常会涉及到数据节点弹性扩缩容、分片间的数据迁移等需求，但业界常见的扩缩容方案仍存在一些问题...
LTS（原BDS）服务介绍
文件层的数据拷贝比通常API层的数据迁移通常能节省50%以上的流量。高效性，单个节点迁移速度可达到100MB/s，节点数支持水平扩展，能够满足支持TB、PB级别的数据迁移。稳定性，有完善的错误重试机制，实时监控任务速度和进度，支持任务失败...
全增量数据同步
文件层的数据拷贝比通常API层的数据迁移通常能节省50%以上的流量高效性。单个节点迁移速度可达到150MB/s，节点数支持水平扩展，能够满足支持TB、PB级别的数据迁移稳定性。有完善的错误重试机制，实时监控任务速度和进度，支持任务失败报警...
Tair集群无感扩缩容介绍
本文列举社区版Redis集群、云数据库Redis集群版扩缩容方案的不足，并介绍Tair集群版无感扩缩容方案。社区版Redis集群版通常会涉及到数据节点弹性扩缩容、分片间的数据迁移等需求，但业界常见的扩缩容方案仍存在一些问题，例如按Key迁移速度...
Phoenix全增量迁移
文件层的数据拷贝比通常API层的数据迁移通常能节省50%以上的流量高效性。单个节点迁移速度可达到150MB/s，节点数支持水平扩展，能够满足支持TB、PB级别的数据迁移稳定性。有完善的错误重试机制，实时监控任务速度和进度，支持任务失败报警...
LTS（原BDS）服务介绍
文件层的数据拷贝比通常API层的数据迁移通常能节省50%以上的流量。高效性，单个节点迁移速度可达到100 MB/s，节点数支持水平扩展，能够满足支持TB、PB级别的数据迁移。稳定性，有完善的错误重试机制，实时监控任务速度和进度，支持任务失败...
Doris概述
数据湖联邦查询：通过外表的方式联邦分析位于Hive、Iceberg、Hudi中的数据，在避免数据拷贝的前提下，查询性能大幅提升。技术概述 Doris整体架构如下图所示。Doris架构非常简单，只有两类进程：Frontend（FE），主要负责客户请求的接入、...
通过无锁变更工单实现无锁结构变更
确保数据库磁盘空间充足：由于需要在目标数据库中新建临时表用于数据拷贝，请确保磁盘剩余空间为目标表的两倍以上，磁盘空间不足将导致实例被锁定。更多信息，请参见 数据库性能。目标表中有主键或唯一键：在执行无锁结构变更时，主键或...
常见问题
Linux系统的ECS中没有禁ping却ping不通的解决方法 当IIS搭建的网站显示“500-内部服务器错误”时如何查看真实报错信息 远程连接问题 无法远程连接Windows实例的处理方法 无法通过SSH远程登录Linux实例时的排查指引 如何查看和修改Windows...
技术面临的挑战与革新
新增加的节点，直接访问共享的数据副本，不需要做任何数据拷贝，所以扩充节点的耗时可以达到1分钟内，而与数据量无关。PolarDB同时内置Proxy能力，可以将负载均衡到各个节点，使得加减节点操作对业务透明。在存储层，所有用户共享一个规模...
- 产品推荐
- 这些文档可能帮助您