存储空间的常见问题
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
存储空间的常见问题
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
存储空间的常见问题
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
功能特性
查询Schema详情 元信息发现 元数据爬取功能可以自动为OSS上面的数据文件创建及更新数据湖元数据，方便分析和计算。具有自动探索文件数据字段及类型、自动映射目录和分区、自动感知新增列及分区、自动对文件进行分组建表的能力。OSS数据源 ...
OSS数据源
企业的业务服务所产生的一些标准化表单、日志等数据文件，会被周期性的直接上传到OSS。但是这些存储在OSS的文件缺少元数据管理，导致难以分析和计算。元数据发现任务可以在单次运行中自动为OSS上面的数据文件创建和更新数据湖元数据（一张...
重要组件
Primary即为拥有读写权限的读写库，Replica即为只读实例，仅仅拥有读取数据的权限（后台线程也不能修改数据），Primary和Replica采用Shared Everything架构，即底层共享同一份数据文件和日志文件。StandBy节点拥有一份独立的数据和日志文件...
添加数据
前提条件 已在云存储上存储了数据文件。背景信息 空间数据支持添加的 数据类型与格式有：数据类型 数据格式 矢量 Shapefile GeoJSON CSV GDB PostGIS 栅格 GeoTIFF Images NetCDF 倾斜摄影 OSGB S3M 3DTiles BIM RVT DGN IFC 点云 LAS PCD ...
设置生命周期策略
生命周期策略仅对文件大小在64 KiB~4.88 TiB范围内的冷数据文件进行转储，超出此范围的数据将不会转储至低频存储或归档存储。单击 确定。查看生命周期策略 登录 NAS控制台。在左侧导航栏，选择 生命周期管理>生命周期策略列表。在顶部菜单...
设置透明数据加密TDE
在安全合规或静态数据加密等场景下，推荐使用透明数据加密TDE（Transparent Data Encryption）功能，对数据文件执行实时I/O加密和解密，通过在数据库层执行静态数据加密，阻止可能的攻击者绕过数据库直接从存储中读取敏感信息，有效提高...
分析外部OSS上的数据
第一种方式：从OSS数据文件中获取列类型（推荐），如下所示：CREATE FOREIGN TABLE `test` FROM CONNECTION='OSS:/${oss_key}:${oss_key_secret}@${endpoint}/${bucket}/test.orc' COMMENT='columnar=1';您可以使用 SHOW create table ...
数据归档至专属存储
文件合并功能可实现对单次执行归档的数据文件进行重组排列（例如将两个文件合并为一个文件），合并后可以提升本次归档数据的查询性能。费用说明 该功能免费使用。注意事项 已归档数据文件合并后，会额外增加存储量（已归档数据量的0.5~1倍...
命名词典
在 数据导入 页签上传并预览数据文件。您可选择仅预览DataWorks中已存在的同名字段，根据需要进行同名字段的删除、修改等处理。说明 导入模式：当DataWorks中已存在导入文件的同名对象，则导入时可选择跳过该对象，或使用此次导入的文件...
导入结构和数据
单表导入时支持导入 CSV 文件，CSV 文件是.csv 或.txt 结尾的支持自定义分割符的数据文件。注意事项 Web 版 ODC 对导入上传的文件大小有限制，最大支持导入 2GB（压缩后）的文件，超出部分无法上传。如需导入大量数据，请使用导数工具 ...
导入
在 数据导入 页签上传并预览数据文件。您可选择仅预览DataWorks中已存在的同名字段，根据需要进行同名字段的删除、修改等处理。说明 导入模式 及 导入状态 根据所选导入类型确定。导入模式：当DataWorks中已存在导入文件的同名对象，则导入...
Catalog概述
数据文件以不同的格式存储在分布式文件系统或对象存储系统中。当FE将生成的查询计划分发给各个BE后，各个BE会并行扫描Hive存储系统中的目标数据，并执行计算返回查询结果。查询数据 查询内部数据 如果需要查询存储在StarRocks中的数据，请...
Delta Lake参数
Delta log过期被定义为：该log文件对应的数据文件已经做过了compaction。该log文件超过了上述文件过期时间。每当Delta log进行checkpoint动作时，会检查是否有需要删除的过期文件，如果有，则删除这些过期文件以防Delta log文件无限增长。...
数据库高级特性管理
运行时信息 属性名称 说明 TotalDataSizeInMB 当前数据库的数据文件占用的总空间（MB）。DataUsedSizeInMB 当前数据库的数据文件已使用的空间（MB）。TotalLogSizeInMB 当前数据库的日志文件占用的总空间（MB）。LogUsedSizeInMB 当前数据...
层级生成器功能介绍
将自定义绘制的边界数据制作成层级下钻结构数据后，您也可以将其导出成DataV专有格式，并将该导出的层级结构数据文件，应用到 基础平面地图 3.0 组件的 自定义区域下钻层 子组件中，具体生成层级结构数据及应用到DataV组件的操作方法，请...
如何选用NAS、OSS和EBS？
如：AI计算、基因计算、药物计算、容器共享PV、日志数据持久化、CI/CD平台、云桌面数据文件共享等 主要应用于基于对象API开发的互联网应用程序的数据存储。如：互联网业务的音视频存储、数据湖、云相册、个人/企业网盘类应用 适用于OLTP...
区域下钻热力层（v1.x版本）
发布area_json数据文件，并获取URL。通过在线静态数据服务，将area_json发布成相应的文件，并获取URL，推荐您使用阿里云的OSS在线静态数据服务。关于文件URL的介绍请参见 上传Object后如何获取访问URL。重要 通过该服务发布的 URL 链接，...
安全白皮书
TDE功能将在RDB数据文件写入磁盘之前进行加密，从磁盘读入内存时进行解密，确保该实例在所有需要生成RDB文件的场景中（备份及主备数据全量同步等），RDB文件均已被加密，从而提高数据的安全性。TDE功能具有不额外占用存储空间、无需更改...
安全白皮书
TDE功能将在RDB数据文件写入磁盘之前进行加密，从磁盘读入内存时进行解密，确保该实例在所有需生成RDB文件的场景中（备份及主备数据全量同步等），RDB文件均已被加密，从而提高数据的安全性。TDE功能具有不额外占用存储空间、无需更改客户...
备份恢复概览
基线数据代表了已整合并持久化到硬盘的全部数据总和，它被智能地分割为多个分片，并制作成多个副本，均衡且分散地储存在各 OBServer 的数据文件中，这一过程即我们所称的“数据备份”。增量数据则涵盖了自最新合并时间点以来的所有实时更新...
计费常见问题
本地数据迁移至 文件存储 HDFS 版 本地数据迁移至 文件存储 HDFS 版 时，需要配置ECS作为中转节点从公网访问阿里云 文件存储 HDFS 版。弹性公网IP对入方向流量不收费，仅对出方向流量收费。即从公网上传数据到 文件存储 HDFS 版 不会收取...
管理健康报告
Top导入热表潜在小文件分析 针对表级别的数据导入情况，系统将会对每个表的所有导入任务生成的数据文件进行深入分析，以评估其潜在的小文件问题严重程度，并据此计算出一个影响得分。根据该得分从高至低排序，选出Top 20个受小文件问题影响...
使用MaxCompute控制台（离线）
仅支持上传一个CSV文件或XLSX文件：CSV文件：最大支持上传5 GB数据，文件里的数据以半角逗号（,）分隔。XLSX文件：最大支持上传100 MB数据。默认仅上传XLSX文件中首个Sheet页的数据，如果有多个Sheet，则其他Sheet的数据将被忽略。阿里云...
使用OSS外表高速导入OSS数据
说明 AnalyticDB PostgreSQL 的每个数据分区（Segment节点）将按轮询方式并行对OSS上的数据文件进行读取，文件的数目建议为数据节点数（Segment个数）的整数倍，从而提升读取效率。在 AnalyticDB PostgreSQL 中，创建READABLE外部表。创建...
版本发布记录
深度集成的生态 接入融合分析和数据回流能力 目前支持如下数据源的接入融合分析和数据回流能力，包括对象存储OSS上7种以上结构化、半结构化、以及多种压缩格式的数据文件，表格存储，AnalyticDB，云数据库版或自建数据库（MySQL、...
DLF数据探索快速入门-淘宝用户行为分析
解压后得到文件夹：user_behavior_data，包含item和user个文件夹，里面分别包含了各自的csv数据文件。本次分析主要集中在user文件中，数据内容如下。2.2 将文件上传至OSS。进入 OSS控制台，上传文件使用已有的Bucket，或创建新的Bucket。...
什么是云原生多模数据库Lindorm
文件引擎 负责 目录文件数据的管理和服务，并提供宽表、时序、搜索引擎底层 共享存储的服务化访问能力，从而加速多模引擎底层数据文件的导入导出及计算分析效率，兼容开源HDFS标准接口。计算引擎 计算引擎与Lindorm存储引擎深度融合，基于...
冷数据归档常见问题
冷数据文件的格式是什么？目前支持CSV、IBD 和ORC格式。如何判断当前表或分区是否归档成功？归档完成后，您可以通过以下两种方式来查看表或分区是否归档成功：执行 SHOW CREATE TABLE table_name;命令查看表结构信息，以此来确认表或者分区...
修饰词
在 数据导入 页签上传并预览数据文件。您可选择仅预览DataWorks中已存在的同名字段，根据需要进行同名字段的删除、修改等处理。说明 导入模式 及 导入状态 根据所选导入类型确定。导入模式：当DataWorks中已存在导入文件的同名对象，则导入...
MaxCompute数据迁移至OSS
选择本地数据文件，配置导入信息。示例数据如下。qwe,145,F asd,256,F xzc,345,M rgth,234,F ert,456,F dfg,12,M tyj,4,M bfg,245,M nrtjeryj,15,F rwh,2344,M trh,387,F srjeyj,67,M saerh,567,M 单击 下一步。选择目标表字段与源字段的...
2021年
OSS分区表下推，如果遇到分区字段出现在parquet数据文件中，可能导致数据查询异常。访问OSS偶发报错 Premature end of Content-Length。执行ADD KEY 报错 ...
区域下钻热力层（v2.x版本）
发布area_json数据文件，并获取URL。通过在线静态数据服务，将area_json发布成相应的文件，并获取URL，推荐您使用阿里云的OSS在线静态数据服务。关于文件URL的介绍请参见 上传Object后如何获取访问URL。注意 通过该服务发布的 URL 链接必须...
功能特性
分区表 外部表 OSS外部表 可以通过OSS外部表访问OSS目录下的数据文件中的非结构化数据，或将MaxCompute项目中的数据写入OSS目录。OSS外部表 Tablestore外部表 将Tablestore的数据纳入MaxCompute上的计算生态，实现多种数据源之间的无缝连接...
区域热力层（v1.x版本）
使用 DataV.GeoAtlas边界生成器 工具，上传 肇庆市 的区县级GeoJSON数据文件，在 属性表面板 中添加 customLabelPosition 属性参数。在 属性表面板 找到 高要区 的参数，编辑并新增一列 customLabelPosition 属性列，添加自定义...
SQL命令管理数据库
您可以执行以下命令，查询SQL Server实例的所有数据库的数据文件和日志文件的路径信息：SELECT db_name(database_id),physical_name FROM sys.master_files;删除数据库 执行如下命令，删除数据库：DROP DATABASE[TestDb]需注意，若您在删除...
通过缓存优化性能
Delta 缓存一致性 Delta缓存会自动检测何时创建或删除数据文件，并相应地更新其内容。您可以写入，修改和删除表数据，而无需显示的使缓存数据无效。Delta缓存会自动检测缓存后已被修改或覆盖的文件。所有陈旧的条目都会自动失效并从缓存中...
备份PostgreSQL数据
备份功能说明 数据备份 日志备份 数据库的数据文件备份，支持物理备份和快照备份。可用于 恢复数据。实例默认会自动进行物理备份或快照备份，支持情况如下：本地SSD盘支持全量物理备份。云盘支持快照备份，可恢复至新建实例。说明 全量物理...
- 产品推荐
- 这些文档可能帮助您