数据量
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
上传数据
本地上传 单击 方法一：本地上传 下方的空白区域，即可在本地PC中选择一个CSV数据文件，单击对话框右下方 上传 即可上传一个CSV数据文件。OSS上传 在 方法二：OSS上传 下方的输入框中，输入CSV数据文件的OSS链接地址，并单击对话框右下方 ...
上传数据
本地上传 单击 方法一：本地上传 下方的空白区域，即可在本地PC中选择一个CSV数据文件，单击对话框右下方 上传 即可上传一个CSV数据文件。OSS上传 在 方法二：OSS上传 下方的输入框中，输入CSV数据文件的OSS链接地址，并单击对话框右下方 ...
RDS SQL Server空间不足问题
由于tempdb库总是使用简单恢复模式，因此tempdb库的日志文件通常很小，但是数据文件容易增长地很快，例如创建大量临时表、连接大表或排序等都可能导致tempdb库数据文件空间增加。解决方案 尽量从数据库应用层面规避，例如减少不必要的临时...
数据组织优化
当中等大小的DeltaFile达到一定规模后，会进一步触发Level1~Level2的合并，生成更大的DeltaFile（图中橙色数据文件）。针对超过一定大小的数据文件，将进行专门的隔离处理，以避免触发进一步的合并，从而避免不必要的读写放大问题。例如：...
快速体验
了解一个项目从数据建模、数据同步（数据传输）、数据开发、运维、数据治理到数据应用的全流程。了解DataWorks、MaxCompute、Hologres、E-MapReduce等各个云产品、组件之间的联动关系。了解如何规划DataWorks工作空间、MaxCompute项目、...
空间管理
自治服务的空间管理功能提供分层的监控与分析，从实例深入到数据库，再从数据库深入到表，帮助用户发现和定位数据库空间相关问题。空间管理提供您查看实例基本信息、空间总览、空间数据图表信息、空间变化趋势等等，帮助您从各个维度了解...
空间管理
数据库自治服务DAS 为 RDS SQL Server 提供空间管理功能，可以分层监控与分析，从实例深入到数据库，再从数据库深入到表，帮助用户发现和定位数据库空间相关问题。空间管理提供您查看实例基本信息、空间总览、空间数据图表信息、空间变化...
项目管理（新版）
开启成默认数据传输服务资源组 的值为开启时，该项目默认提交的数据传输服务会自动使用数据传输服务（包年包月）资源组。开启成默认数据传输服务资源组 的值为关闭时，该项目默认提交的数据传输服务会自动使用Default资源组。说明 如果需要...
ECS实例数据传输的实现方式
SCP命令使用SSH来传输数据，并使用与SSH相同的认证模式，提供同样的安全保障。SSH是目前较可靠的、为远程登录会话和其他网络服务提供安全性的协议，利用SSH协议可以有效防止远程管理过程中的信息泄露问题。SCP是基于SSH的应用，所以进行...
什么是备份数据量
数据文件空间 数据库所属数据文件在服务器上占用的磁盘空间。备份数据量 备份数据量指通过备份链路的实际数据大小。与数据文件空间不同，备份数据量取决于数据库类型、备份方式、备份粒度等因素。存储数据量 存储数据量指存放存储介质的...
什么是DTS Serverless实例
在数据传输量波动较大的场景下，普通实例和Serverless实例资源使用和规格变化情况如下图所示：由上图可以看到，在业务波动较大的场景下：普通实例：在波谷期浪费的资源较多，在高峰期资源不足，业务受损。Serverless实例：实例的资源规格随...
低成本跨境文件传输
希望传输数据的系统有足够的弹性和扩展性应对大规模文件的写入。方案简介 方案架构如下：方案流程如下：ECS模拟应用访问上海和硅谷的OSS，负责内容的制作和上传。内容通过内网域名上传到上海的OSS。文件上传OSS，触发函数计算调用 ...
低成本跨境文件传输
希望传输数据的系统有足够的弹性和扩展性应对大规模文件的写入。方案简介 方案架构如下：方案流程如下：ECS模拟应用访问上海和硅谷的OSS，负责内容的制作和上传。内容通过内网域名上传到上海的OSS。文件上传OSS，触发函数计算调用 ...
使用OSS Foreign Table进行数据湖分析
OSS FDW支持多种格式的数据文件，适用不同的业务场景，具体文件格式如下：支持访问CSV、TEXT、JSON、JSONLINE格式的非压缩文本文件。支持访问CSV、TEXT格式的GZIP压缩、标准SNAPPY压缩文本文件。支持访问JSON、JSONLINE格式的GZIP压缩文本...
低成本跨境文件传输
希望传输数据的系统有足够的弹性和扩展性应对大规模文件的写入。方案简介 云服务器模拟应用访问华东2（上海）和美国（硅谷）的对象存储，负责内容的制作和上传。内容通过内网域名上传到华东2（上海）的对象存储。文件完成上传到对象存储后...
云备份客户端访问服务接入点和端口都有哪些
新版文件备份客户端的接入点域名和端口 如果您运行的文件备份客户端进程为 hbrclient，则您使用的为新版文件备份客户端。新版文件备份客户端使用的接入点域名和端口如下所示。地域 用途 公网接入点域名 VPC网络接入点域名 端口 华东1（杭州...
GetDbfs-查询单个数据库文件系统
调用GetDbfs查询数据库文件系统详细信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句...
表设计最佳实践
建议采集终端上使用DataHub进行数据汇聚，然后依据稳定的流量值选择合适的Shard通道数量，以批量数据传输的方式写入到天气日志表中，而非INSERT INTO。说明 设计互动明细表时，区分存量数据和增量数据之间的关系非常重要。新增数据应作为...
购买与使用独享数据传输服务资源组
当您在MaxCompute中需要对大规模数据进行传输且对传输稳定性和延迟有要求时，您可以使用独享数据传输服务资源组。独享数据传输服务资源组可以提供更高的数据传输速度和更好的网络条件，以减少传输时间并提高效率。本文为您介绍如何购买、...
ListDbfs-查询数据库文件系统列表
调用ListDbfs查询您已经创建的数据库文件系统列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限...
下载和导入迁移对象配置
在左侧导航栏，单击 数据传输>数据迁移。在 数据迁移 页面，单击目标数据迁移项目的名称。在目标项目的详情页面，单击右上角的.>下载对象配置。重要 以 匹配规则 方式选择迁移对象的数据迁移项目，不支持下载对象配置信息。导入对象配置 ...
CreateDataFlow-创建数据流动
创建一个CPFS文件系统与源端存储的数据流动。接口说明 基础操作 文件存储 CPFS 2.2.0 及以上版本、智算 CPFS 2.4.0 及以上版本支持数据流动。文件存储 CPFS、CPFS 智算版状态为运行中，才能创建数据流动。一个文件存储 CPFS 或者 CPFS 智算...
创建快照
数据库文件系统快照基于云盘快照，它是一种便捷高效的数据容灾手段，用于对文件系统的数据进行备份。前提条件 进行快照创建时，数据库文件系统必须处于 已挂载 或 待挂载 状态。说明 如果文件系统处于 待挂载 的状态，则需要保证文件系统有...
导出结构和数据
创建导出任务时，如果您指定 数据格式 为 SQL 格式，那文件包中的结构定义文件是以 对象名-schema.sql 命名的 SQL 文本，数据文件是以 对象名.sql 命名的 SQL 文本，其中对象名与数据库实际对象名保持一致。如果您指定 数据格式 为 CSV ...
迁移开源HDFS的数据到文件存储 HDFS 版
本文档介绍如何将开源HDFS的数据平滑地迁移到 文件存储 HDFS 版。背景信息 当前业界有很多公司是以Hadoop技术构建数据中心，而越来越多的公司和企业希望将业务顺畅地迁移到云上。文件存储 HDFS 版 可以帮助您实现将开源HDFS的数据迁移到云...
功能特性
DBFS特性 原子写 支持DIRECT IO的原子写，需按4K，8K，16K对齐-共享读写 一份数据可共享式多点挂载并进行读写，读写可线性扩展-存储加密 通过对数据库文件存储实施加密，可以确保数据库文件存储上的所有数据（包括静态存储和动态传输中的...
启动和暂停数据同步项目
在左侧导航栏，单击 数据传输>数据同步。在 同步项目列表 页面，单击目标项目后的 启动。您也可以在 同步项目列表 页面，单击项目名称进入详情页面，单击右上角的 启动。系统自动完成对数据同步项目的预检查后，启动数据同步项目。暂停数据...
管理数据源
在左侧导航栏，单击 数据传输>数据源管理。数据源列表 页面为您展示所有已创建的数据源及其基本信息，包括 数据源标识、数据源类型、数据源来源、用户名 和数据源的 创建时间。您可以在操作列单击 测试连接，检查数据库的网络连接情况。...
启动和暂停数据迁移项目
在左侧导航栏，单击 数据传输>数据迁移。在 数据迁移 页面，单击未启动的目标项目后的 启动。您也可以在 数据迁移 页面，单击项目名称进入详情页面，单击右上角的 启动。暂停数据迁移项目 处于 运行中 状态的数据迁移项目支持暂停操作。...
导入数据
本文为您介绍如何通过MaxCompute客户端，使用Tunnel Upload将本地数据文件中的数据导入创建好的表中。前提条件 请确认您已满足如下条件：已创建表。更多创建表操作，请参见 创建表。已将CSV或TXT数据文件下载至本地。本文提供的数据文件样...
结束和释放数据迁移项目
在左侧导航栏，单击 数据传输>数据迁移。在 数据迁移 页面，单击目标项目后的 结束。如果是处于 失败 状态的项目，请单击目标项目后的.>结束。在 是否确认结束 对话框中，单击 确定。释放数据迁移项目 释放数据迁移项目后，数据传输会清空...
新建 ADB 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 ADB，并配置各项参数。参数 描述 数据源标识 建议使用中文、数字和字母的组合。名称中不能包含空格，...
新建 PostgreSQL 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 PostgreSQL，并配置各项参数。参数 描述 实例类型 目前仅支持 RDS 实例。数据源标识 建议使用中文、...
新建 DataHub 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 DataHub。配置各项参数。从 实例类型 下拉列表选择不同的 实例类型 后，下方会自动显示对应的表单。...
JindoFS介绍和使用
JindoFS是基于阿里云对象存储OSS，为开源大数据生态构建的Hadoop兼容文件系统（Hadoop Compatible File System，HCFS）。JindoFS提供兼容对象存储的纯客户端模式（SDK）和缓存模式（Cache），以支持与优化Hadoop和Spark生态大数据计算对OSS...
新建 TiDB 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 TiDB。配置各项参数。从 实例类型 下拉列表选择不同的 实例类型 后，下方会自动显示对应的表单。说明...
新建 PolarDB-X 1.0 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 PolarDB-X 1.0，并配置各项参数。参数 描述 实例类型 目前仅支持 阿里云 PolarDB-X 1.0 实例。重要 ...
使用数据订阅功能传输数据后日期数据格式发生变化
概述 本文主要介绍MySQL中数据类型为Date的数据，通过数据订阅传输数据后，数据格式由 YYYY-MM-DD 格式变化为 YYYY:MM:DD 的原因。详细信息 DTS默认数据存储格式为 YYYY:MM:DD，YYYY-MM-DD 是展现出来的格式，实际存储是 YYYY:MM:DD 格式。...
下载和导入同步对象配置
在左侧导航栏，单击 数据传输>数据同步。在 数据同步 页面，单击目标数据同步项目的名称。在目标项目的详情页面，单击右上角的.>下载对象配置。重要 数据库至数据库的数据同步项目中，仅选择 指定对象 方式时，支持导入对象。导入对象配置 ...
- 产品推荐
- 这些文档可能帮助您