CreateDataFlow-创建数据流动
自动更新 配置自动更新（AutoRefresh）后，当源端存储数据发生变化时，变化的元数据会自动同步到 CPFS 文件系统，变化的数据会在用户访问文件时按需加载，或者启动数据流动任务加载数据。自动更新依赖 EventBridge 收集源端 OSS 存储的对象...
功能特性
宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、宽行、多版本数据以及生命周期管理特点，支持主键列自增、局部事务、原子计数器、过滤器、条件更新等功能。主键列自增 条件更新 局部事务 原子计数器 ...
功能特性
Lindorm SQL语法手册 存储能力 功能集 功能 功能描述 参考文档 数据存储 数据读写 支持多种数据模型和查询语言，支持kv型、文档型、时间序列型等多种数据模型，支持使用SQL语言或开源API进行查询和操作，用户可以根据实际需求选择进行读写...
聚合支付方案
客户价值 业务可线性拓展 依托Redis缓存和DRDS水平或者垂直拆分数据库技术，解决了高并发、存储容量扩展以及在线计算扩展的难题，使系统具备了存储100TB数据的能力，同时也具备10万TPS（Transactions-per-second）、百万QPS（Queries-per-...
使用冷存储
阿里云HBase针对冷数据存储的场景，提供一种新的冷存储介质，其存储成本仅为高效云盘的1/3，写入性能与云盘相当，并能保证数据随时可读。背景信息 用户可以在购买云HBase实例时选择冷存储作为一个附加的存储空间，并通过建表语句指定将冷...
DBS沙箱功能概览
重复数据删除技术：大幅降低用户备份数据的存储成本。存储快照和克隆技术：无数据拷贝，让备份数据快速可用。存储虚拟化技术：不依赖用户生产实例，将直接使用云上资源的沙箱实例，且在沙箱中的读写不会影响到源数据库。典型应用场景 基于...
Redis备份上云
备份目标信息 备份目标存储类型 存储备份数据的存储类型，请选择 DBS内置存储（推荐）。DBS内置存储（推荐）：无需创建存储空间，数据将自动存入DBS内置存储中，会根据存入DBS的数据量产生费用，计费方式请参见 存储费用。推荐您预购存储包...
IoT数据源
读取时序存储表时，支持指定读取数据的时间范围。支持的字段类型 IoT Reader支持物联网企业实例存储表所有的数据类型，如下表所示。类型分类 物联网平台存储表数据类型 数据集成配置类型 整数类 BIGINT BIGINT 布尔类 BOOLEAN BOOLEAN 日期...
API概览
本产品（文件存储（NAS/CPFS）/2017-06-26）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用...
数据集成服务
具体数据源配置如下：源数据源：Tablestore数据源（全量同步）、Tablestore Stream数据源（增量同步）目标数据源：MaxCompute数据源 同步表格存储数据到OSS 同步到OSS中的文件可自由下载，也可作为表格存储数据的备份存储于OSS。...
迁移说明
非阿里云服务存储数据迁移至云上NAS 如果您想将线下数据、IDC数据、本地数据等非阿里云服务存储数据迁移至阿里云文件存储NAS，可参照以下方式进行迁移：配置数据传输中转节点 迁移数据至阿里云NAS OSS和NAS之间的数据迁移 对于NAS与OSS之间...
引擎简介
云原生多模数据库 Lindorm 流引擎面向实时数据处理场景，支持使用标准的SQL及熟悉的数据库概念完成一站式的实时数据处理，适用于车联网、物联网和互联网中常见的ETL、实时异常检测和实时报表统计等场景。本文介绍Lindorm流引擎的应用场景和...
X-Engine性价比优势
简而言之，X-Engine分层存储、分层访问的方式使得业务中绝大部分访问热数据的SQL可以不受冷数据的影响，QPS比均匀访问所有数据高2.7倍。Sysbench测试命令：sysbench/usr/share/sysbench/oltp_point_select.lua\-mysql-host=[RDS实例连接串]...
SDS分布式存储
阿里云将分布式存储技术以及积累的公共云部署、运维的最佳实践融入到分布式存储产品中，从而打造高性能、高可扩展、高可靠的 SDS分布式存储，帮助您降低成本、缩短业务上线时间，轻松构建混合云存储。产品优势 灵活敏捷，弹性扩容 3节点...
迁移工具
使用DataWorks/DataX、表格存储的通道服务等迁移工具，在不影响业务的情况下您可以实现表格存储数据的全量迁移、增量迁移或者实时同步。本文介绍如何选择迁移工具。迁移工具选择 迁移数据时，请根据实际业务选择合适的迁移工具。表格存储...
概述
存储节点（Data Node，DN）负责数据的持久化（面向行存数据），基于多数派Paxos协议提供数据高可靠、强一致保障，同时通过MVCC维护分布式事务的可见性，另外提供计算下推能力，以满足分布式的计算下推要求（例如Project/Filter/Join/Agg等...
列存索引技术架构介绍
在SQL执行器层，重写了一套面向列存的执行器引擎框架（Column-oriented），该执行器框架充分利用列式存储的优势，如以4096行的一个Batch为单位访问存储层的数据，使用SIMD指令提升CPU单核心处理数据的吞吐，所有关键算子均支持并行执行。...
PolarDB HTAP实时数据分析技术解密
该执行器框架充分利用列式存储的优势，例如，以一个4096行的Batch为单位访问存储层的数据，使用SIMD指令提升CPU单核处理数据的吞吐量，所有关键算子均支持并行执行。对比MySQL原有的行存执行器，性能有数量级的提升。支持行列混合执行的...
创建Hudi数据源
背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的插入更新和删除数据的能力。权限说明 仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据...
创建Hudi数据源
背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的插入更新和删除数据的能力。更多信息，请参见 Apache Hudi官网。权限说明 仅支持 超级管理员、数据源管理员、...
环境准备
表格存储通道服务（Tunnel Service）是基于表格存储数据接口上的全增量一体化服务。通道服务提供了增量、全量、增量加全量三种类型的分布式数据实时消费通道。通过为数据表建立数据通道，您可以通过流式计算的方式对表中历史存量和新增数据...
存储类型概述
适用于需要超长时间存放的极冷数据，例如大数据及人工智能领域的原始数据的长期积累留存、媒体数据的长期保留、法规和合规性存档、磁带替换等业务场景。说明 华东1（杭州）、华东2（上海）、华北2（北京）、华北 3（张家口）、华北6...
备份存储空间
本文介绍备份OSS数据的几种主要方式。说明 备份存储空间会产生请求、数据取回等费用，费用详情请以实际备份方式为准。通过定时备份功能进行备份 云备份（Cloud Backup）可创建备份计划，并按计划将您OSS内的数据备份到 云备份（Cloud ...
使用在线迁移服务迁移数据
阿里云在线迁移服务是阿里云提供的存储产品数据通道。使用在线迁移服务，您可以轻松实现文件存储NAS之间的数据迁移。本文介绍如何通过在线迁移服务实现阿里云文件存储NAS之间的数据迁移。使用在线迁移服务，您只需在控制台填写源NAS和目标...
常见问题
A：这是因为主表和索引表的冷数据归档过程是独立的，并且归档主表和索引表冷数据的操作是周期性触发的，导致了主表和索引表滞留在热存储的数据不一致，进而出现查询到的冷数据不一致的现象。您可以在查询条件中添加热数据的时间范围，避免...
常见问题
同时，结合IMM（智能媒体处理产品）可以实现存储+数据智能处理的解决方案。基因行业：基因测序、交付、诊断等基因上下游业务的数据存储需求，结合云上强大的计算能力，可以实现大数据的存储+计算+分析方案。OSS适合存储什么？OSS适合存储...
通道服务概述
通道服务（Tunnel Service）是基于表格存储数据接口上的全增量一体化服务。通道服务提供了增量、全量、增量加全量三种类型的分布式数据实时消费通道。通过为数据表建立数据通道，您可以简单地实现对表中历史存量和新增数据的消费处理。背景...
功能特性
Hudi存储 数据导入与导出 功能集 功能 功能描述 参考文档 大数据数据源 Maxcompute数据源 AnalyticDB for MySQL支持通过外表、DataWorks两种方式将MaxCompute数据导入至数仓版或湖仓版集群，也支持通过外表将AnalyticDB for MySQL数仓版...
对象存储OSS
存储类型 OSS提供标准存储、低频访问存储、归档存储、冷归档存储和深度冷归档存储多种存储类型，全面覆盖从热到冷的各种数据存储场景。存储类型 说明 标准存储 提供高可靠、高可用、高性能的对象存储服务，能够支持频繁的数据访问。适用于...
定价公式及退费说明
按量付费 包年包月 总计算节点价格=目录单价*节点个数/3*时长【存储】数据盘 即：购买页的“存储大小”数据盘是指数据文件、索引文件和临时文件等占用的空间。被占用的存储空间会产生费用。存储空间的费用与集群所在的地域、部署方案、预购...
OSS和NAS之间的数据迁移
本文介绍如何通过ossutil工具或在线迁移服务实现阿里云对象存储OSS和文件存储NAS之间的数据双向迁移。费用说明 使用ossutil工具迁移 ossutil工具本身不收取费用，但是由于迁移数据时涉及到API请求，所以会产生一定的API请求费用。OSS数据...
什么是备份数据量
存储数据量 存储数据量指存放存储介质的实际数据大小。与备份数据量不同，存储数据量取决于备份数据量、备份数据存储格式、压缩算法等因素。空间大小 在单次全量备份情况下，数据库磁盘空间（RDS/ECS）>数据文件空间（实际使用）>备份数据...
背景信息
使用在线迁移服务，您可以将第三方数据轻松迁移至阿里云对象存储OSS，也可以在LocalFS（包括本地文件、CPFS智算版实例等）与OSS之间、LocalFS（包括本地文件、CPFS智算版实例等）之间或对象存储OSS之间进行灵活的数据迁移。使用在线迁移...
基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...
分区信息 设置数据入湖存储时的分区，后续入湖同步写入数据时，根据来源端数据的写入时间落入相应的分区里。分区设置注意事项如下：支持使用${yyyy}（年）、${MM}（月）、${dd}（日）、${HH}（时）这些变量，最小粒度到小时，不支持分钟、...
按时间戳冷热分离
注意事项 若某一行数据同时包含热数据和冷数据，例如更新了部分列导致一行数据中既存在热数据又存在冷数据的场景，开启查询热数据优先功能会导致该行的查询结果分两次返回，即Scanner返回的Result集合中，对于同一个Rowkey会有两个对应的...
计费模式
本文介绍数据湖构建中各资源的计费规格，包括入湖作业资源用量、数据存储对象和元数据请求三部分。计量计费项 重要 DLF产品目前所有功能为 0折扣活动阶段，即使超过免费阶梯限定后，目前也均不会产生实际计费。元数据对象的存储量 元数据...
冷热分离
云数据库HBase增强版支持冷热分离功能，可以将冷热数据存储在不同的介质中，有效提升热数据的查询效率，同时降低数据存储成本。背景信息 在海量大数据场景下，一张表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低，同时这...
CDN加速和OSS传输加速的区别
由CDN全球广泛分布的边缘节点缓存OSS存储的静态数据，从而实现客户端从边缘节点直接获取数据的方式来实现访问的加速。OSS传输加速：利用全球分布的云机房，将全球各地用户对您存储空间（Bucket）的访问，经过智能路由解析至就近的接入点，...
时序模型
说明 表格存储 时序模型是针对时间序列数据的特点进行设计，适用于物联网设备监控、设备采集数据、机器监控数据等场景。关于时序模型的更多信息，请参见 时序模型概述。时序表操作 使用 表格存储 时序模型时，您需要使用 ...
时序模型
说明 表格存储 时序模型是针对时间序列数据的特点进行设计，适用于物联网设备监控、设备采集数据、机器监控数据等场景。关于时序模型的更多信息，请参见 时序模型概述。时序表操作 使用 表格存储 时序模型时，您需要使用 ...
- 产品推荐
- 这些文档可能帮助您