ComputeSplitPointsBySize
调用ComputeSplitPointsBySize接口将全表的数据在逻辑上划分成接近指定大小的若干分片，返回这些分片之间的分割点以及分片所在机器的提示。一般用于计算引擎规划并发度等执行计划。请求消息结构 message ComputeSplitPointsBySizeRequest {...
统一存储简介
统一存储按存储空间划分为：与用户无关的空间，当前用户的存储空间。业务层无需关注用户切换，并且不需要使用 userId 来获取当前用户数据。基于 sqlite，提供 DAO（Data Access Objects）支持，相比 CoreData 更加灵活。通过配置文件将数据...
数据存储需求评估
您在每个业务负载中划分数据并确定存储需求时，需要考虑以下几点：数据量 了解数据量的总大小有助于您估算存储容量和成本。数据访问的频率和响应时间要求 阿里云针对不同的访问频率和响应时间要求提供不同的存储方案，对应不同的存储价格。...
CPFS并行文件存储
CPFS并行文件存储 提供高性能计算文件存储，支持标准的POSIX和MPI...CPFS并行文件存储 提供PB级单一命名空间，支持空间配额灵活管理，资源划分给不同的计算任务，满足业务随时扩展的需要。产品规格 详细产品规格，请参见以下链接：E36 H12 H36
操作汇总
本文介绍 表格存储 的调用说明以及提供的宽表模型和时序模型相关API接口。如需了解 表格存储 各场景的应用案例，请参见 快速玩转Tablestore入门与实战。调用说明 表格存储 API只能通过 表格存储 提供的各语言SDK进行调用，不能直接使用HTTP...
如何选用NAS、OSS和EBS？
数GB/s 容量 GiB~PiB 无限制 GiB~TiB 文件级别的授权 支持 支持 不支持 数据存储方式 目录树的组织形式 扁平的文件组织形式 需拆分数据到任意划分且大小相同的卷中 协议 NFS和SMB协议 HTTP/HTTPS协议 标准虚拟块设备协议接口或NVMe协议接口...
产品计费
本文主要介绍云存储网关计费相关内容，包括计费项、计费方式和欠费说明等，您可以通过本文了解云存储网关服务费用收取详情。计费项 云存储网关包括线上网关和线下网关，其计费项不相同。云存储网关资源的价格，请参见 云存储网关产品定价。...
宽表模型介绍
表格存储按照分区键对数据表的数据进行分区，拥有相同分区键的行会被划分到同一个分区，实现数据访问负载均衡。属性列（Attribute Column）一行中除主键列外，其余都是属性列。属性列会对应多个值，不同值对应不同的版本，每行的属性列个数...
规划工作空间
资源倾斜：中晚期（例如5点~7点）的调度资源组、引擎计算资源、存储空间（应对数据膨胀）应用数据层（ADS）：按业务划分，针对各专项业务，建立独立工作空间。任务节点：SQL任务、数据集成任务。数据表：以满足业务场景为优先。空间成员：...
划分主题域
数据仓库模型设计除横向的分层外，通常还需要根据业务情况纵向划分主题域。主题域是联系较为紧密的数据主题的集合，是业务对象高度概括的概念层次归类，目的是便于数据的管理和应用。划分流程 通常您需要阅读各源系统的设计文档、数据字典...
宽表模型介绍
表格存储 按照分区键对数据表的数据进行分区，具有相同分区键的行会被划分到同一个分区，实现数据访问负载均衡。属性列（Attribute Column）一行中除主键列外，其余都是属性列。属性列会对应多个值，不同值对应不同的版本，每行的属性列...
如何理解主键、数据分区和数据分区键
主键 表中的每一行由主键（PK）唯一确定。您在创建表的时候必须指定组成主键的列，这些列称为主键列。...图中表格存储把UserID为U0001和U0002的用户信息划在一个数据分区中，而把UserID为U0003和U0004的用户信息划分在另一个数据分区中。
为什么使用表格存储过程中会有少量的500错误
如下图所示，表格存储会按照第一个主键的顺序，将实际数据划分到不同的数据分区中，不同的数据分区会调度到不同的服务节点提供读写服务。当某个数据分区的数据量过大，或者访问过热，如下图的数据分区P1，表格存储的动态负载均衡机制能够...
划分数据域
数据仓库模型设计除横向的分层外，通常也需要根据业务情况进行纵向划分数据域。数据域是联系较为紧密的数据主题的集合，是业务对象高度概括的概念层次归类，目的是便于数据的管理和应用。划分数据域 通常，您需要阅读各源系统的设计文档、...
概述
使用Spark计算引擎访问表格存储时，您可以通过E-MapReduce SQL或者DataFrame编程方式对表格存储中数据进行复杂的计算和高效的分析。应用场景 功能特性 对于批计算，除了基础功能外，Tablestore On Spark提供了如下核心优化功能：索引选择：...
划分数据域
数据仓库模型设计除横向的分层外，通常也需要根据业务情况纵向划分数据域。数据域是联系较为紧密的数据主题的集合，是业务对象高度概括的概念，目的是便于管理和应用数据。通常，您需要阅读各源系统的设计文档、数据字典和数据模型，研究...
指定大小计算分片
使用ComputeSplitsBySize接口可以将全表数据逻辑上划分成若干接近指定大小的分片，并返回这些分片之间的分割点以及分片所在机器的提示。一般用于计算引擎规划并发度等执行计划。说明 API说明请参见 ComputeSplitPointsBySize。前提条件 已...
什么是子分区
子分区（SUBPARTITION）用于把分区表划分为更小的子集，这些子集会存储在相同或不同的服务器上。如果对一个分区划分了子分区，那么每个分区都至少有一个子分区。如果对一个表划分了子分区，那么数据不会存储在在任何分区表中，而是会存储于...
通道服务概述
通道服务（Tunnel Service）是基于表格存储数据接口上的全增量一体化服务。通道服务提供了增量、全量、增量加全量三种类型的分布式数据实时消费通道。通过为数据表建立数据通道，您可以简单地实现对表中历史存量和新增数据的消费处理。背景...
转换文件存储类型
OSS提供标准、低频访问、归档、冷归档和深度冷归档多种存储类型，全面覆盖从热到冷的各种数据存储场景。本文主要介绍如何转换文件（Object）的存储类型。注意事项 当您使用webpack或browserify等打包工具时，请通过 npm install ali-oss 的...
数据模型架构规范
按业务划分：命名时按主要的业务划分，以指导物理模型的划分原则、命名原则及使用的ODS project。例如，按业务定义英文缩写，阿里的“淘宝”英文缩写可以定义为“tb”。按数据域划分：命名时按照CDM层的数据进行数据域划分，以便有效地对...
核心概念
数据板块 数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。当数据的业务含义存在较大差异时，您可以创建不同的数据板块，独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至...
表操作
表格存储Java SDK提供了多种表级别的功能。使用表格存储时，您需要创建数据表用于数据存储。一般情况下，创建不带二级索引的数据表即可。您也可以根据实际场景创建所需数据表。如果要使用二级索引加快数据查询效率，请创建带二级索引的数据...
多租户和资源划分
该方案主要分为两部分，一是集群内节点级别的资源组划分，二是针对单个查询的资源限制。本文介绍节点与资源划分。Doris中的节点 Doris集群中有两类节点：Frontend（FE）和Backend（BE）。FE主要负责元数据管理、集群管理、用户请求的接入和...
调用方式
云储存网关接口调用是通过向云存储网关API的服务端地址发送HTTP(s)GET请求。您需要并按照接口说明在请求中加入相应请求参数，调用后系统会返回处理结果。请求及返回结果都使用UTF-8字符集进行编码。服务地址 SGW API的服务接入地址请参见下...
关于新等级的内容和划分
新等级按近3个月的累积云气值，简化为4级，依次划分为：[0，10万）弟子级，[10万，100万）香主级，[10万，1000万）舵主级，（1000万，+∞）掌门级。
指定大小计算分片
使用ComputeSplitsBySize接口可以将全表数据逻辑上划分成若干接近指定大小的分片，并返回这些分片之间的分割点以及分片所在机器的提示。一般用于计算引擎规划并发度等执行计划。说明 API说明请参见 ComputeSplitPointsBySize。前提条件 已...
数仓规划概述
功能介绍 数仓规划包括逻辑空间与物理空间的全局架构，以实现业务划分、资源管控、项目管理等目的：逻辑空间：基于业务特征划分命名空间及其核心对象，包括数据板块、数据域和公共定义模块。说明 如果您购买的Dataphin实例为基础研发版，则...
分区表命令列表
ALTER TABLE…ADD SUBPARTITION 添加子分区到现有的分区中，且这个分区必须已经进行了子分区的划分。ALTER TABLE…EXCHANGE PARTITION 用一个分区或子分区交换现有的表。ALTER TABLE…MOVE PARTITION 将分区或子分区移动到不同的表空间中。...
企业版实例（包年包月）
定价说明：地域 计费（单位：元/1000 IOPS/月）华东2（上海）、华北2（北京）、华南1（深圳）55 日本（东京）、新加坡、德国（法兰克福）、美国（硅谷）、美国（弗吉尼亚）110 时序数据存储空间 数据服务使用时序存储空间，备份存储设备...
什么是GPU容器共享技术cGPU
例如，GPU显存动态划分，支持M级划分、GPU利用率动态划分，算力支持最小2%粒度的划分。GPU实例规格无限制 适用于GPU裸金属实例，虚拟化实例，vGPU实例等各种GPU实例。应用场景丰富 支持在离线混部业务（即在线业务和离线业务）、支持CUDA ...
点云压缩
点云是海量点的集合，存储点云不仅会消耗大量的存储空间，而且传输不经过压缩的点云文件需要消耗大量的带宽，传输成本很高，因此需要对点云进行压缩。使用场景 自动驾驶：压缩自动驾驶场景中雷达扫描产生的点云数据。数字文博：为文物数字...
设置数据冷热存储策略
如果您想要以指定规则对文件引擎中存储的数据进行归档，将冷热数据分开存储，可以通过命令设置冷热存储策略，按照目录级别对数据进行划分。冷热分离可以有效提高热数据的查询效率，减少冷数据的存储成本。本文介绍通过开源HDFS客户端设置...
数据存储
本文介绍 云数据库 SelectDB 版 在数据存储方面的关键设计和特性，帮助客户充分发挥SelectDB的潜力。表 在云数据库SelectDB中，表（Table）是存储结构化数据的一种特殊形式。一张表由行（Row）和列（Column）组成，其中行表示一行数据，列...
资源组设计最佳实践
全面原则：划分资源组的时候，一方面，需要考虑划分出来的资源组能够从业务上覆盖当下所有使用的资源，另一方面，还需要考虑未来业务的发展变化，减少因划分资源组的维度不合适，导致后续调整资源组带来的成本和风险。强烈建议不要使用默认...
公共规范
空值处理原则 汇总类指标的空值：空值处理，填充为零，当前MaxCompute基于列存储的压缩技术不会由于填充大量空值导致存储成本上升。维度属性值为空：在汇总到对应维度上时，对于无法对应的统计事实，记录行会填充为-99（未知），对应维表会...
查看选项
将全表数据在逻辑上划分成接近指定大小的若干分片 getts Get data from timeseries table 查询时序数据 help Display help 查看帮助信息 import Load the data into table,only WideColumn table is supported.导入数据到数据表中。只有...
时序数据存储概述
您可使用物联网平台中数据服务提供的数据存储功能，存储设备时序数据。设备时序数据包括设备上报的物模型（属性、服务和事件）数据和通过时序数据存储规则配置的自定义Topic数据。本文介绍时序数据存储的相关概念和使用。相关概念 名词 ...
数仓规划概述
功能介绍 数仓规划包括逻辑空间与物理空间的全局架构，以实现业务划分、资源管控、项目管理等目的：逻辑空间：基于业务特征划分命名空间及其核心对象，包括数据板块、数据域和公共定义模块。说明 如果您购买的Dataphin实例为基础研发版，则...
基本概念
地域 地域指数据中心所在的地理区域，通常按照数据中心所在的城市划分。例如，华北2（北京）地域表示数据中心所在的城市是北京。可用区 可用区是指在同一地域内，电力和网络互相独立的物理区域。例如，华北2（北京）地域支持12个可用区，...
- 产品推荐
- 这些文档可能帮助您