整体流程介绍
操作步骤 支持方法 准备工作 准备工作 包含如下内容：准备CSV数据文件 获取图数据库GDB实例信息 获取OSS中的Bucket信息 OSS导入授权 图数据库GDB控制台一键授权 通过RAM控制台授权 将数据上传至OSS 使用OSS控制台上传数据文件 使用ossutil...
挂载访问概述
受NFS协议本身性能影响，数据和元数据的IOPS性能低于POSIX客户端，推荐访问100 KiB及以上数据文件使用。更多信息，请参见 产品规格。访问控制 NFS v4 ACL。NFS v4 ACL基于IP和IP段的只读和读写控制。推荐场景 ECS。容器（K8s/ACK/ECI）、...
协议服务FAQ
受NFS协议本身性能影响，数据和元数据的IOPS性能低于POSIX客户端，推荐访问100 KiB及以上数据文件使用。更多信息，请参见 产品规格。访问控制 NFS v4 ACL。NFS v4 ACL基于IP和IP段的只读和读写控制。推荐场景 ECS。容器（K8s/ACK/ECI）、...
功能特性
删除DBFS 删除数据库文件存储并停止计费 删除DBFS 修改DBFS实例规格 在使用数据库文件存储的过程中根据业务存储性能的要求，调整数据库文件存储的实例规格，实例规格越高，消耗的CPU和内存资源越多 实例规格说明 修改DBFS使用场景 在使用...
开通快照
您在初次使用数据库文件系统快照服务前，请先开通云盘块存储的快照服务。详见 云盘快照开通。费用相关 数据库文件系统快照功能不另外单独收取费用，仅收取云盘快照费用，详见 云盘快照计费。后续步骤 创建快照
申请与创建
使用场景 使用数据库文件存储的应用场景。性能等级 容量越大，可供选择的性能级别越高（460 GB 以上可选 PL2，1260 GB 以上可选 PL3），性能级别越高相应的费用也越高。存储加密 开启存储加密能够最大限度保护您的数据安全，您的业务和应用...
使用curl命令导入数据文件
本文介绍使用curl命令将数据文件从对象存储OSS的Bucket中导入至图数据库GDB实例、查看导入任务和取消导入任务的方法。前提条件 已创建目标图数据库GDB实例，创建方法请参见 创建主实例。说明 如果Bucket是在对象存储控制台创建，请确保图...
数据库高级特性管理
默认值为CHECKSUM，使用数据页的校验和进行验证。target_recovery_time_in_seconds 在发生故障时，数据库恢复所需的目标时间（秒）。默认值为60。compatibility_level 数据库与特定版本的兼容性级别。取值如下：100：Server 2008及更高版本...
导入接口介绍
已将数据文件上传至Bucket中，上传方法请参见 使用OSS控制台上传数据文件 或 使用ossutil工具上传。添加导入任务 使用HTTP POST请求发送至<gdb-endpoint>:<port>/loader 终端，将数据从OSS的Bucket导入至图数据库GDB实例中。注意 MIME类型...
使用GdbLoader脚本导入数据文件
本文介绍使用GdbLoader脚本将数据文件从对象存储OSS的Bucket中导入至图数据库GDB实例、查看导入任务和取消导入任务的方法。前提条件 已创建目标图数据库GDB实例，创建方法请参见 创建主实例。说明 如果Bucket是在对象存储控制台创建，请...
数据量
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
设置列索引的排序键
总体流程如下：按照主键索引遍历并将读取到的完整数据保存至数据文件，然后将排序列添加到排序缓存区，其中每个线程使用不同的数据文件，累积达到一定数据后再写入；不断遍历并插入到排序缓存区，当排序缓存区满时，在内存中根据排序键组合...
Hudi数据源
本文介绍 云数据库 SelectDB 版 与Hudi数据源进行对接使用的流程，帮助您对Hudi数据源进行联邦分析。注意事项 Hudi表支持的查询类型如下。表类型 支持的查询类型 Copy On Write Snapshot Query+Time Travel Merge On Read Snapshot Queries...
Hive数据源
使用数据集成向Hive集群进行离线同步的过程中，会在服务端侧产生临时文件，在同步任务执行完成时，会自动删除。您需要留意服务端HDFS目录文件数限制，避免非预期的文件数达到上限导致HDFS文件系统不可用，DataWorks平台无法保障文件数在...
通过文件管理优化性能
使用案例 测试数据生成：创建10,000个小文件，每个文件中包含10,000行连接数据：（src_ip,src_port,dst_ip,dst_port），基于这些文件创建外部表：conn_rand%spark import spark.implicits._import scala.util.Random val numRecords=100*...
什么是备份数据量
空间大小 在单次全量备份情况下，数据库磁盘空间（RDS/ECS）>数据文件空间（实际使用）>备份数据量（DBS）>存储数据量（OSS）。综上所述，您可通过调整DBS提供的备份粒度、备份周期等方法降低备份数据量，进而降低DBS费用；您也可通过DBS...
敏感数据溯源
常见问题 目标溯源任务执行结束后，可能的泄漏源 显示 无结果，则可能的原因及解决方案如下：原因一：您所溯源的文件数据量不足，导致水印信息无法还原。解决方案：使用 数据水印 功能生成的水印信息需要提供充足的数据量，才能保证通过...
存储格式与SerDe
DLA内置了处理各类数据文件的Serialize/Deserilize（简称SerDe，用于序列化和反序列化），您无需编写程序，直接选用一款或多款SerDe来匹配OSS上的数据文件格式。通过SerDe，DLA可以对OSS上的多种格式的文件进行查询分析，包括纯文本文件...
计费常见问题
当您在 文件存储 HDFS 版 中写入文件数据产生实际存储容量，则开始计费。文件存储 HDFS 版 服务如何停止计费？如果您确实不再使用 文件存储 HDFS 版 服务，可以删除数据，并删除挂载点，再删除文件系统，即可在下一个账期不产生扣费。删除...
上传数据
DataWorks支持将本地的CSV文件或部分文本文件数据直接上传至MaxCompute表中，本文为您介绍操作步骤详情。前提条件 已准备好用于接收本地数据的MaxCompute表。您可以选择已创建的MaxCompute表，或者直接新创建一个MaxCompute表，建表操作可...
导入数据
本文为您介绍如何通过MaxCompute客户端，使用Tunnel Upload将本地数据文件中的数据导入创建好的表中。前提条件 请确认您已满足如下条件：已创建表。更多创建表操作，请参见 创建表。已将CSV或TXT数据文件下载至本地。本文提供的数据文件样...
RDS SQL Server空间不足问题
select*from sys.dm_db_file_space_usage 查看当前数据库的数据文件的总空间大小以及实际已使用数据空间大小。说明 仅适用于SQL Server 2012及以上版本。如果发现实例的空间使用率过高，首先应该在 RDS管理控制台 的 监控与报警 页面中检查...
添加静态数据
本文档介绍在DataV中添加静态数据文件的方法。前提条件 已准备好待添加的静态数据文件。操作步骤 登录 DataV控制台。在 工作台 页面中，将鼠标移动至需要编辑的数据看板上，单击 编辑。重要 如果您的 工作台 页面内还没有创建任何数据看板...
开启透明数据加密TDE
云原生内存数据库Tair 支持透明数据加密TDE（Transparent Data Encryption），可对RDB数据文件执行加密和解密。您可以通过控制台启用TDE功能，对RDB数据进行自动加密和解密，以满足提升数据安全性及合规需要。前提条件 实例存储介质为 内存...
使用MaxCompute控制台（离线）
MaxCompute控制台提供数据上传功能，支持您将本地文件或阿里云对象存储服务OSS中的文件数据离线（非实时）上传至MaxCompute进行分析处理及相关管理操作。使用限制 仅支持基于 本地文件 或 阿里云对象存储OSS 上传数据，具体如下。本地文件...
开启透明数据加密TDE
云数据库Redis支持透明数据加密TDE（Transparent Data Encryption），可对RDB数据文件执行加密和解密。您可以通过控制台启用TDE功能，对RDB数据进行自动加密和解密，以满足提升数据安全性及合规需要。前提条件 实例存储介质为 Redis企业版 ...
基于OSS外表的单表多文件查询
数据查询。以上述步骤示例中的 t1 表为例进行说明。查询t1表内的数据数量 SELECT count(*)FROM t1;范围查询 SELECT id FROM t1 WHERE id< 10 AND id >1;点查 SELECT id FROM t1 where id=3;多表join SELECT id FROM t1 left join t2 on t1.id=t...
数据组织优化
Clustering 当前痛点 Transactional Table 2.0支持分钟级近实时增量数据导入，高流量场景下可能会导致增量小文件数量膨胀，从而引发存储访问压力大、成本高，并且大量的小文件还会引发meta更新以及分析执行慢，数据读写IO效率低下等问题，...
导入导出表数据
MaxCompute Studio可以将CSV、TSV等格式的本地数据文件导入至MaxCompute表中，也可将MaxCompute表中的数据导出到本地文件。MaxCompute Studio通过Tunnel导入导出数据。前提条件 导入导出数据使用MaxCompute Tunnel，因此要求MaxCompute ...
概述
Federated引擎允许您访问远程 PolarDB MySQL版 集群或社区MySQL数据库中的数据，而无需使用复制或集群技术。本地Federated表中未存储任何数据，查询本地Federated表会通过远程方式提取远程表数据。当您使用 PolarDB MySQL版 或社区MySQL...
RDS for SQL Server如何回收表空间
如果需要收缩一个SQL Server的数据文件，必须使用 DBCC SHRINKDATABASE 命令收缩指定数据库的指定数据或日志文件大小，或者使用 DBCC SHRINKFILE 命令收缩当前数据库的指定数据或日志文件大小。MySQL表的空间是独立的一个文件，所以收缩...
RDS for SQL Server如何回收表空间
如果需要收缩一个SQL Server的数据文件，必须使用 DBCC SHRINKDATABASE 命令收缩指定数据库的指定数据或日志文件大小，或者使用 DBCC SHRINKFILE 命令收缩当前数据库的指定数据或日志文件大小。MySQL表的空间是独立的一个文件，所以收缩...
整体架构
Transaction Table2.0的增量存储和处理架构的特殊设计主要集中在五个模块：数据接入、计算引擎、数据优化服务、元数据管理、数据文件组织，其他部分与MaxCompute通用的架构一致。本文为您介绍Transaction Table2.0的核心架构要点。...
解决SQL Server实例空间满自动锁的问题
系统文件空间使用量 master、msdb和model数据库的数据文件和日志文件，以及SQL Server实例目录下面的一些系统文件（错误日志和dll文件等）的大小。方法二：通过SQL语句查看所有数据库的数据文件（mdf和ndf文件）和日志文件（ldf文件）的...
使用OSS控制台上传数据文件
对象存储OSS控制台支持上传大小不超过5 GB的文件，如果您需要导入图数据库GDB实例的数据文件不超过5 GB，您可以将数据文件上传至对象存储OSS的Bucket中，然后从Bucket中将数据文件导入至图数据库GDB实例。本文介绍将数据文件上传至对象存储...
解决SQL Server实例空间满自动锁的问题
系统文件空间使用量 master、msdb和model数据库的数据文件和日志文件，以及SQL Server实例目录下面的一些系统文件（错误日志和dll文件等）的大小。方法二：通过SQL语句查看所有数据库的数据文件（mdf和ndf文件）和日志文件（ldf文件）的...
堆表结构
结构 说明 table files 表文件，由一个或多个数据文件组成，文件数量与文件大小有关，超过1 GB就会生成一个新的数据文件。file 数据文件，由多个数据块组成。page 数据块，由多个数据行组成。page header 数据块头，详细信息请参见 数据...
什么是数据库备份DBS
DBS支持备份恢复MySQL、SQL Server、PostgreSQL、Oracle等近10种数据源，同时支持阿里云云数据库、阿里云ECS数据库、本地数据中心、其他云厂商等环境，允许通过数据库网关DG私网、专线、VPN网关等网络进行接入，帮助您有效解决备份耗时耗...
导出结构和数据
导出文件格式 ODC 导出工具会将导出数据到以.zip 结尾的压缩文件包中，压缩包中包含元数据文件 MANIFEST.bin 和 Schema 下导入导出对象的结构定义文件和数据文件。创建导出任务时，如果您指定 数据格式 为 SQL 格式，那文件包中的结构定义...
导出至OSS
重要 导入到OSS中的文件，数据文件内默认不带列名，只有数据。如果需要导出带列名的文件，请在导入语句前添加hint/*+sql_output_oss_file_head_enable=true*/。INSERT SELECT FROM 功能：如果您的数据在其他表中已经存在，可以通过 INSERT ...
- 产品推荐
- 这些文档可能帮助您