快速入门
数据湖构建（Data Lake Formation，DLF）产品主要使用流程如下。...创建数据源 创建数据湖的入湖来源，当前支持阿里云RDS MySQL...创建数据湖的元数据 添加元数据库 创建元数据表，指定表中数据的存储位置和存储格式 详细操作请参见 元数据管理。
数据导出到OSS概述
实现原理 DataWorks数据集成的离线同步功能将不同数据源的同步抽象为从来源数据源读取数据的Reader插件以及向目标数据源写入数据的Writer插件，方便您通过定义来源与去向数据源并结合DataWorks调度参数使用，将来源数据源中的全量或增量...
物联网存储介绍
在物联网场景中根据数据特点进行分类，数据主要包括设备元数据、设备消息数据和设备时序数据三种类型，不同类型数据的存储需求不同。物联网场景中不同类型数据的存储核心需求如下：设备元数据：主要数据为设备的标识、属性和状态数据，具有...
方案背景
介绍表格存储结合Spark流批处理实现一体化存储和计算的背景、适用场景、样例场景和架构设计。背景 电子商务模式是指在网络环境和大数据环境下基于一定技术基础的商务运作方式和盈利模式。在电商运营中数据的分析和可视化是最重要的部分之一...
入门概述
迁移数据至NAS文件系统 非阿里云数据迁移至云上NAS OSS和NAS之间的数据迁移 NAS文件系统之间的数据迁移 将NAS文件系统中的数据迁移至本地 将NAS数据迁移至本地 在服务器中卸载挂载的文件系统 卸载挂载目录 删除文件系统 释放文件系统实例...
通过控制台使用分析存储
生命周期 分析存储中数据的过期时间，单位为秒。当系统判断当前时间减去用户传入数据列的时间已经超过设置的数据生命周期时，系统会自动清理超过数据生命周期的数据。重要 在分析存储中，系统判断数据产生时间以用户传入的时间列为准，并非...
计算与分析概述
通过SQL查询功能，您可以对 表格存储 中数据进行复杂的查询和高效的分析。计费说明 按量模式下，各个计算引擎访问表格存储，会根据具体的读写请求按照读写吞吐量计量计费。预留模式下，读写请求会消耗VCU的计算资源。更多信息，请参见 计费...
数据导入方式介绍
为满足多样化的数据导入需求，云原生数据仓库AnalyticDB MySQL版 提供了多种数据导入方式，包括：通过外表导入数据、使用DataWorks导入数据和利用JDBC通过程序导入数据等。本文介绍各导入方式的特性及适用场景，帮助您选择正确的数据导入...
设置数据冷热存储策略
冷热分离可以有效提高热数据的查询效率，减少冷数据的存储成本。本文介绍通过开源HDFS客户端设置冷热数据存储策略的方法。前提条件 已开通冷存储功能。具体操作，请参见 开通冷存储。操作步骤 通过开源HDFS客户端访问文件引擎，具体操作，...
Napatech案例
基于Lindorm的解决方案，用户在采用到100Gbps+流量产生的大量数据包元数据直接通过Lindorm存储，在数据的存储和索引性能方面得到极大的提升，同时也极大地降低整个系统的运维成本。客户价值 支持多个100G数据流量采集点的数据包元数据存储...
应用场景
设备通过工业接口协议将自身状态数据和生产业务数据接入工业设备网关，然后通过 MQTT 协议发送到物联网平台，继而传输到云上的消息服务系统并经过流计算系统处理后写入 TSDB，完成时序数据的存储和分析。系统运维和业务实时监控 通过对大...
SQL概述
使用表格存储您可以方便的存储和查询海量数据。为了满足用户业务平滑迁移到表格存储以及使用SQL方式访问表格存储的需求，表格存储在传统的NoSQL结构化存储之上，提供云原生的SQL引擎能力，SQL查询兼容MySQL的查询语法，同时提供基础的SQL ...
产品优势
消息模型：表格存储 自研模型，主要用于消息数据，适用于IM、Feed和物联网设备消息下推等消息系统中消息的存储和同步。多元化数据索引 除了支持主键查询，表格存储 还支持二级索引和多元索引的索引方式，提供强大的数据查询能力。二级索引...
整体架构
Transaction Table2.0的增量存储和处理架构的特殊设计主要集中在五个模块：数据接入、计算引擎、数据优化服务、元数据管理、数据文件组织，其他部分与MaxCompute通用的架构一致。本文为您介绍Transaction Table2.0的核心架构要点。...
数据存储冷热分离
如果加载数据之后 hot_total_size 和 cold_total_size 都为0，则表示数据还在实时中，rt_total_size 为实时数据的存储，可以通过执行build语句，将实时数据转换为分区数据，待build完成后可以查到 hot_total_size 和 cold_total_size。...
应用场景
云数据库Redis版 适用于多种场景，尤其是请求并发量大场景中的数据存储。游戏行业应用 游戏行业通常将云数据库Redis版作为重要的部署架构组件，用于缓存或数据持久化。场景一：Redis作为缓存加速应用访问 Redis作为缓存层，加速应用访问。...
背景
存储水平扩展，查询能力强 表格存储可实现PB级数据的存储和查询，同时提供全局二级索引、多元索引等功能扩充查询能力，满足多种业务的负载和查询需求。如果采用组合使用MySQL、HBase、Elasticsearch等多款产品的方式实现不同业务的查询需求...
JindoFS实战演示
本视频为您介绍如何使用Jindo DistCp将HDFS文件归档到OSS中，以及如何查看OSS数据的存储类型。如何将Hive数据按照分区归档到OSS 如何将Hive数据按照分区归档到OSS 2021-05-18 传统集群架构存在很多问题，例如存储量与计算量无法一直匹配、...
自建MySQL应急恢复
背景信息 DBS沙箱功能，尝试引入数据重删技术（重复数据删除技术）和虚拟化存储技术，来解决传统数据库备份服务中的存储成本和使用成本问题。通过重删和增量合并技术，使得备份数据在服务端持续保持可用的全量状态。通过虚拟化存储技术，...
容量中心
展开后可以查看对应数据库中，数据和索引的磁盘占用量。单击 详情 或者数据库名称，可进一步查看不同数据库的表数据信息分布详情。可查看每个表的 表名、行数、磁盘使用大小、数据大小、宏块使用率、分区数量 和 自增列使用率。查看集群...
功能特性
监控告警 数仓和数据湖 功能集 功能 功能描述 参考文档 数据存储 数据缓存 云数据库SelectDB支持数据缓存功能，当您需要管理缓存数据并提升云数据库 SelectDB 版的访问速度时，可以根据该文档对缓存进行有效管理，并利用LRU和TTL管理策略，...
概述
数据建模的必要性 海量数据的标准化管理 企业业务越庞大数据结构就越复杂，企业数据量会随着企业业务的快速发展而迅速增长，如何结构化有序地管理和存储数据是每个企业都将面临的一个挑战。业务数据互联互通，打破信息壁垒 公司内部各业务...
telnet 访问操作指南
保存数据的 key 是一个 16 位的无符号的整数（以十进制的方式表示）。该标志将和需要存储的数据一起存储，并在客户端 get 数据时返回。您可以将此标志用做特殊用途，此标志对服务器来说是透明的。过期的时间。0 表示存储的数据永远不过时...
计费模式
本文介绍数据湖构建中各资源的计费规格，包括入湖作业资源用量、数据存储对象和元数据请求三部分。计量计费项 重要 DLF产品目前所有功能为 0折扣活动阶段，即使超过免费阶梯限定后，目前也均不会产生实际计费。元数据对象的存储量 元数据...
生命周期管理概述
全部数据存储在低频存储或归档存储节省的存储费用（费用A）读写低频存储或归档存储中的数据产生的流量费用（费用B）（通用型NAS存储单价-低频存储单价或归档存储）×预估存储容量 文件存储NAS的存储单价，请参见 文件存储NAS产品定价。...
迁移工具
将MySQL数据同步到表格存储 将Oracle数据同步到表格存储 DataWorks/DataX 使用DataWorks/DataX不仅可以将数据库迁移同步到表格存储，也可以实现表格存储表中数据的跨实例或者跨账号的迁移同步。将数据库数据迁移到表格存储 DataWorks/DataX...
时序模型计量计费
时间线数据包括产生数据的时间和对应的数据值，是时序模型中数据存储与读写操作的主要计费部分。其中数据存储支持选择高性能存储或者容量型存储，读写操作按照容量型进行计量计费。时间线元数据也称为时间序列元数据，表示一条时间线的标识...
查询账单
当 产品明细 为 数据库自治服务DAS（按量付费）时，表示使用DAS企业版 V2和DAS企业版 V3：对于使用DAS企业版 V2的数据库实例：在 计费项 为 SQL洞察和审计-热存储 的消费明细中，查看热存储占用的存储空间及计费情况。在 计费项 为 SQL洞察...
宽表模型介绍
预留模式：计费项包括计算能力、数据存储量和外网下行流量，其中数据存储量包括高性能存储、容量型存储和多元索引存储。按量模式：计费项包括读吞吐量、写吞吐量、数据存储量和外网下行流量。常见问题 表格存储和传统关系型数据库（例如...
如何使用OSS更省钱？
如果数据以标准类型已上传至OSS，则建议通过生命周期将Bucket内数据的存储类型由标准转换为低频访问。具体操作，请参见 基于最后一次修改时间的生命周期规则。假设该Bucket内存储了1,000万个文件，则通过生命周期从标准转为低频访问类型时...
聚合支付方案
阿里云从业务扩展性、数据流动性、服务高可用三方面入手，通过多款云数据库产品为利楚扫呗制定聚合支付方案，解决利楚扫呗在业务扩展期遇到的数据存储空间不足、读写性能下降以及大数据分析空缺等问题。业务痛点 武汉利楚商务服务有限公司...
数据归档概述
当线上数据库中的历史数据（访问率很低的数据）越来越多，占用的存储越来越大，以至于会影响数据库的查询性能与业务运转，此时您可以使用 数据管理DMS 的数据归档功能，周期性地将指定表的数据归档至其他数据库或存储服务中。同时，该功能...
时序模型介绍
时序模型在车联网场景中主要用于车辆轨迹数据的存储、查询和分析。说明 关于时序模型的更多信息，请参见 时序模型。模型介绍 在表格存储的时序模型中，采用一张二维的时序表来存储时序数据。每行代表一个时间线在某个时间点的数据，该行的...
离线同步数据质量排查
如果写出数据和目标存储已有数据发生数据约束（主键冲突、唯一键约束、外键约束等），数据库会忽略来源数据不会写入到表中，数据写出动作为成功并且不会产生脏数据。如果写出数据和目标存储已有数据没有发生数据约束，数据库则将来源数据...
冷数据分层存储计费规则
您可以 购买存储包，来抵扣OSS中冷数据的存储容量，以减少存储冷数据的费用。存储包抵扣规则如下：地域类型 抵扣因子 1 GB存储包的OSS存储空间抵扣量 中国内地 0.045 1/0.045=22.22 GB 中国香港及海外 0.045 1/0.045=22.22 GB 例如，您购买...
冷数据分层存储计费规则
您可以 购买存储包，来抵扣OSS中冷数据的存储容量，以减少存储冷数据的费用。存储包抵扣规则如下：地域类型 抵扣因子 1 GB存储包的OSS存储空间抵扣量 中国内地 0.045 1/0.045=22.22 GB 中国香港及海外 0.045 1/0.045=22.22 GB 例如，您购买...
主备方案介绍
云数据库HBase存储海量大数据，在业务场景中往往承载着重要数据，为保障数据的高可用性和安全性，云数据库HBase提供了主备双活和主备容灾特性。本文介绍云数据库HBase的主备双活和主备容灾特性功能。使用场景 主备双活：大数据量随机读响应...
SQL洞察
注意事项 SQL洞察功能中分析和统计数据（不包括SQL明细数据）的存储时长最长为90天：如果对应实例DAS 企业版 设置的存储时长小于等于90天，则SQL洞察功能中分析和统计数据（不包括SQL明细数据）的存储时长以DAS 企业版 设置的存储时长为准...
产品计费
如果您只是要减少存储费用，您可以减少SQL洞察和审计数据的存储时长。经济版 如果您想要退订经济版，请先了解相关注意事项和使用说明，详情请参见 取消使用DAS经济版。重要 取消经济版后会关闭DAS经济版提供的所有增值功能和新功能，并清除...
常见问题
开通不同版本的企业版，SQL洞察和审计功能、数据的存储模式和相应计费也会有所不同。本文介绍开通不同DAS企业版时，SQL洞察和审计功能之间的差异，以及各个版本之间数据迁移的常见问题。不同DAS企业版的SQL洞察和审计功能有什么差异？在 ...
- 产品推荐
- 这些文档可能帮助您