通过Excel导入逻辑表
标准格式：待导入文件的格式，当选择该值时，表示导入的是Excel格式的数据包括逻辑表和规则数据。Visual Paradigm格式：待导入文件的格式，当选择该值时，需要通过Visual Paradigm工具建立逻辑表，将导出的VP格式文件进行导入。说明 文件...
通过Excel导入逻辑表
标准格式：待导入文件的格式，当选择该值时，表示导入的是Excel格式的数据包括逻辑表和规则数据。Visual Paradigm格式：待导入文件的格式，当选择该值时，需要通过Visual Paradigm工具建立逻辑表，将导出的VP格式文件进行导入。说明 文件...
配置本地文件输入组件
本地文件输入组件可用于将本地文件的TXT、excel、CSV格式的数据。同步至其他数据源的场景中。本文为您介绍如何配置本地文件输入组件。使用限制 仅支持手动任务配置本地文件输入组件。操作步骤 请参见，进入离线管道组件开发页面。按照下图...
配置本地文件输入组件
本地文件输入组件可用于将本地文件的TXT、excel、CSV格式的数据。同步至其他数据源的场景中。本文为您介绍如何配置本地文件输入组件。使用限制 仅支持手动任务配置本地文件输入组件。操作步骤 请参见 离线管道组件开发入口，进入离线管道...
在文件存储 HDFS 版上使用Presto
Presto使用maven-shade-plugin插件打包，对引入的Hadoop依赖进行了重命名，文件存储 HDFS 版 Java SDK和Hadoop共用了protobuf-xxx.jar包，Presto通过Hive Metastore读取 文件存储 HDFS 版 上的数据时，文件存储 HDFS 版 获取不到Presto重...
存储空间的常见问题
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
存储空间的常见问题
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
存储空间的常见问题
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
存储空间的常见问题
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
存储空间的常见问题
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
Memcache（OCS）数据源
Memcache（原名OCS）数据源为您提供其它数据源向Memcache写入数据的功能，目前仅支持脚本模式配置同步任务，本文为您介绍DataWorks的Memcache（OCS）数据同步的能力支持情况。使用限制 当前仅支持使用脚本模式将数据写入Memcache（OCS）。...
监控与日志
容量监控数据 在容量监控页面，选择文件系统类型和目标文件系统ID，查看该文件系统的存储空间使用量、文件数、低频介质读写流量等监控数据。健康状态监控 建议实时了解云资源的健康状态，方便在有任何异常的情况下，您能及时采取相应的处理...
计费常见问题
OSS和 文件存储 HDFS 版 之间的数据迁移 如果您从阿里云OSS读写数据，则会产生OSS请求费用，该费用由OSS收取。更多信息，请参见 请求费用。如何查看是否欠费？欠费会影响您的 文件存储 HDFS 版 的使用，您可以在 用户中心 查看是否欠费。...
Iceberg连接器
Iceberg是一种开放的数据湖表格式，使用Iceberg连接器可以用来查询Iceberg格式的数据文件。背景信息 Iceberg的详细信息，请参见 Iceberg概述。本文为您介绍Iceberg连接器相关的内容和操作，具体如下：配置Iceberg连接器 示例：查询Iceberg...
ORC文件
ORC和Parquet文件格式的区别：本质上Parquet针对Spark进行了优化，而ORC针对Hive进行的优化。前提条件 通过主账号登录 阿里云 Databricks控制台。已创建集群，具体请参见 创建集群。已使用OSS管理控制台创建 非系统目录存储空间，详情请...
E-MapReduce数据迁移
本文介绍如何将E-MapReduce HDFS上的数据迁移到 文件存储 HDFS 版 文件系统。背景信息 阿里云E-MapReduce是构建在阿里云云服务器ECS上的开源Hadoop、Spark、Hive、Flink生态大数据PaaS产品。提供用户在云上使用开源技术建设数据仓库、离线...
OSS数据源
格式解析器 格式解析器会读取数据文件内容，从而确定文件的数据格式。默认自动解析，即按照顺序调用所有内置解析器，也可指定特定文件类型的格式解析器，比如json、parquet、avro、orc、csv。json：需要读取文件开头以确定文件格式。...
生命周期管理概述
全部数据存储在低频存储或归档存储节省的存储费用（费用A）读写低频存储或归档存储中的数据产生的流量费用（费用B）（通用型NAS存储单价-低频存储单价或归档存储）×预估存储容量 文件存储NAS的存储单价，请参见 文件存储NAS产品定价。...
什么是备份数据量
与备份数据量不同，存储数据量取决于备份数据量、备份数据存储格式、压缩算法等因素。空间大小 在单次全量备份情况下，数据库磁盘空间（RDS/ECS）>数据文件空间（实际使用）>备份数据量（DBS）>存储数据量（OSS）。综上所述，您可通过调整...
概述
可靠的备份功能可以有效防止数据丢失，支持周期性的自动备份以及即时生效的手动备份。...费用说明 备份和恢复功能均免费使用，但备份文件需要占用一定的存储空间。具体计费规则请参见 标准版备份存储计费规则 或 企业版 备份存储计费规则。
数据量
存储数据量 存放存储介质的实际数据大小，与备份数据量不同，存储数据量取决于备份数据量、备份数据存储格式、压缩算法等因素。空间大小：数据库磁盘空间（RDS/ECS）>数据文件空间（实际使用）>备份数据量（DBS）>存储数据量（内置存储）。
账单概览
订阅完成之后，可以在账单数据存储页面，查看已经订阅的存储文件。在账单数据存储页面，单击 取消，可以进行账单存储文件订阅的取消，取消之后系统将不会推送对应文件。账单存储文件介绍 支持用户订阅的文件包括：月账单PDF、实例明细账单...
计费常见问题
当您的包年包月极速型NAS文件系统到期后，您可以新建按量付费模式的极速型NAS文件系统，并将原包年包月极速型NAS文件系统中的数据迁移至新的按量付费文件系统中。同时存在资源包和存储包时，NAS如何计费？同时存在存储包和资源包时，会优先...
功能特性
挂载DBFS 卸载DBFS 从ECS云服务器上卸载数据库文件存储 卸载DBFS 扩容DBFS 支持业务友好地在线扩充存储容量 在线扩容 格式化DBFS 格式化数据库文件存储操作会清空已写入的数据，建议操作前创建快照备份数据库文件存储的数据-重命名DBFS ...
云数据库的导入与导出
数据导出 您可以将数据库中的内容导出为JSON或者CSV格式的文件，导出结果中的每行数据都对应数据库中的一条记录。导出格式 是否必须指定导出字段 默认导出内容 建议使用场景 JSON格式 不必须 默认导出全部内容，指定字段时仍会导出_id字段 ...
OSS数据离线同步至MaxCompute
背景信息 阿里云对象存储OSS（Object Storage Service）是一款海量、安全、低成本、高可靠的云存储服务，提供99.9999999999%（12个9）的数据持久性，99.995%的数据可用性。还有多种存储类型供您选择，全面优化存储成本。数据集成支持从OSS...
OSS数据离线同步至MaxCompute
背景信息 阿里云对象存储OSS（Object Storage Service）是一款海量、安全、低成本、高可靠的云存储服务，提供99.9999999999%（12个9）的数据持久性，99.995%的数据可用性。还有多种存储类型供您选择，全面优化存储成本。数据集成支持从OSS...
如何使用OSS更省钱？
如果数据以标准类型已上传至OSS，则建议通过生命周期将Bucket内数据的存储类型由标准转换为低频访问。具体操作，请参见 基于最后一次修改时间的生命周期规则。假设该Bucket内存储了1,000万个文件，则通过生命周期从标准转为低频访问类型时...
数据扫描和识别
只有在您的数据库中的数据发生变化时，才会扫描有变化的文件或表。为了减少扫描对您数据库性能的影响，您可以参考以下规则配置全量扫描周期：增大全量扫描的扫描周期，有效减轻 DSC 扫描对数据库性能产生的影响。将扫描时间设置为数据库...
对象存储服务路径
Ganos支持基于阿里云对象存储服务（OSS）、MinIO和HDFS的矢量数据。OSS文件路径 基于OSS的文件路径格式如下：oss:/<access_id>:<secrect_key>@[]/path_to/file 说明 各参数解释如下：access_id 和 secrect_key 分别为OSS访问的AccessKey...
OSS/OSS-HDFS概述
使用OSS或OSS-HDFS存储数据可以有效节省成本，结合低频、归档和冷归档等方式，可以进一步优化冷数据的存储成本。可扩展性。OSS和OSS-HDFS具有更好的可扩展性，不受硬盘容量限制，无需人工扩容。特性 通过JindoSDK使用OSS和OSS-HDFS的特性...
对象存储服务路径
Ganos支持基于阿里云对象存储服务（OSS）、MinIO和HDFS的矢量数据。OSS文件路径 基于OSS的文件路径格式如下：oss:/<access_id>:<secrect_key>@[]/path_to/file 其中Endpoint可以被省略，系统会自动寻找相应的Endpoint。如果Endpoint被省略...
对象存储服务路径
Ganos支持基于阿里云对象存储服务（OSS）、MinIO和HDFS的矢量数据。OSS文件路径 基于OSS的文件路径格式如下：oss:/<access_id>:<secrect_key>@[]/path_to/file 其中Endpoint可以被省略，系统会自动寻找相应的Endpoint。如果Endpoint被省略...
备份下载的常见问题
RDS实例 基本信息 页面显示的 存储空间 大小为所有数据、系统文件、备份数据等的总和。因此存储空间数据量不等于下载的备份文件数据量。说明 如需扩容或释放实例存储空间，请参见 存储空间的常见问题。MySQL自建数据库的备份文件如何恢复或...
备份下载的常见问题
RDS实例 基本信息 页面显示的 存储空间 大小为所有数据、系统文件、备份数据等的总和。因此存储空间数据量不等于下载的备份文件数据量。说明 如需扩容或释放实例存储空间，请参见 存储空间的常见问题。MySQL自建数据库的备份文件如何恢复或...
通过缓存优化性能
注意 Delta缓存适用于所有Parquet文件，并且不仅限于 Delta Lake格式的 文件。Delta和Apache Spark缓存 Databricks提供两种类型的缓存：增量缓存和Apache Spark缓存。这是每种类型的特征：存储的数据类型：Delta缓存包含远程数据的本地副本...
OSS和NAS之间的数据迁移
本文介绍如何通过ossutil工具或在线迁移服务实现阿里云对象存储OSS和文件存储NAS之间的数据双向迁移。费用说明 使用ossutil工具迁移 ossutil工具本身不收取费用，但是由于迁移数据时涉及到API请求，所以会产生一定的API请求费用。OSS数据...
0053-00000003
问题描述 视频截帧请求访问的目标视频文件打开失败。问题原因 您发起了视频截帧请求，但是目标视频文件打开视频流失败导致截帧失败。问题示例 无。解决方案 当前仅支持对视频编码格式为H264和H265的视频文件进行视频截帧，请确保您访问的...
数据湖管理FAQ
OSS存储CSV格式文件时，为什么OSS元数据发现不出任何表？OSS存储CSV格式文件时，为什么OSS元数据发现的字段类型不对？OSS元数据发现，是否支持CSV文件第一行是说明，第二行是文件头，第三行才是数据？多库合并/一键建仓相关问题 如何处理一...
推荐的挂载方式
本文介绍阿里云容器服务挂载NAS文件系统的方式，您可以使用CSI存储插件或使用容器网络文件系统CNFS挂载NAS文件系统。重要 请使用以下推荐的方式挂载NAS文件系统。使用其他方式挂载NAS文件系统可能出现稳定性风险，NAS团队无法预估该风险且...
- 产品推荐
- 这些文档可能帮助您