快速入门
维度包含维度值、节点两层结构，类似于文件夹和文件的结构，只有维度可以标记资源实例，节点用来构建树结构，最多支持5层结构。可以依据组织、部门、项目、成本中心等业务树创建维度树，当业务调整时，不需要更改维度和资源实例的关联关系...
核心概念的层次结构
MaxCompute具有层次结构，您可以通过了解其结构，为后期项目规划、安全管理等提供思路。本文为您介绍MaxCompute中核心概念的层次结构及简要含义。MaxCompute核心概念的层次结构如下。核心概念 说明 Project（项目）项目是MaxCompute的基本...
块关系
术语 块是基本 SPL 结构，该结构由可选的声明部分、必需的可执行部分和可选的异常部分组成。块实现独立的存储过程和函数程序、匿名块、触发器、包、子存储过程和子函数。标识符（变量、游标、类型或子程序）是块本地的，意味着它在给定块的...
PolarDB并行查询
挑战 从上图基本架构中可以看到，存储层将允许远大于单机的数据容量（目前是128 TB），甚至线上会出现一些用户，单表容量达到xx TB级别，这在基于MySQL主从复制的传统部署中是难以想象的。同时大量用户会有对业务数据的实时分析诉求，如...
概述
从层次结构方面来看，列存引擎节点采用Delta+Main（类LSM结构）二层模型，采用了标记删除的技术，确保了行存和列存之间实现低延时的数据同步，可以保证秒级的实时更新。数据实时写入到MemTable，在一个group commit的周期内，会将数据存储...
函数存储选型
为了满足业务存储和访问文件的诉求，函数计算 提供丰富的存储类型，包括文件存储NAS、对象存储OSS、临时硬盘和层。本文介绍 函数计算 支持的存储类型的适用场景及差异，供您进行技术选型。选型分析 对比项 文件存储NAS 对象存储OSS 临时...
函数存储选型
为了满足业务存储和访问文件的诉求，函数计算 提供丰富的存储类型，包括文件存储NAS、对象存储OSS、临时硬盘和层。本文介绍 函数计算 支持的存储类型的适用场景及差异，供您进行技术选型。选型分析 对比项 文件存储NAS 对象存储OSS 临时...
质检
一个原子可以依赖多个原子；原子间不能存在循环依赖。不是所有原子 ID 都必须出现在逻辑表达式里，但逻辑表达式里的原子 ID 必须存在。只有 ID 包含在逻辑表达式里的原子和它们依赖的原子（在高级配置里设置）才会影响规则命中情况，并显示...
Layer
官方公共层默认为公有，自定义层可以设置为私有或者公有。0 code OutputCodeLocation 层的代码包信息 codeChecksum string 层代码包的 crc64 校验码，根据 ECMA-182 标准计算得出。2825179536350*codeSize long 层的代码包大小，单位为 ...
即席分析中的交互式分析
比如下图中的地理层级结构，可以从原来的区域下钻到省份，从省份下钻到城市。右键子层级的维值，可以上卷到上一层。即席分析中的列维度也支持进行下钻或者上卷的操作。比如此处对表头的日期维度进行下钻，从年维度下钻到季度，再下钻到月。...
在函数中配置自定义层
通过控制台配置 前提条件 创建函数 创建自定义层 操作步骤 为函数配置层时，如果层有多个版本，将按照具体的层版本与函数进行绑定。登录 函数计算控制台，在左侧导航栏，单击 服务及函数。在顶部菜单栏，选择地域，然后在 服务列表 页面，...
Native 框架简介
统一组件库架构 AntUI 的整体架构类似于积木搭建，由下至上构建出 AntUI 统一控件体系：由下而上的构架层级及其描述如下表所示：构架层级 描述 基础层（Foundation）视觉规范单元化的体现，构建 AntUI 体系的基础，主要包含原子资源、原子...
玄武分析型存储
高吞吐实时写入 AnalyticDB通过三层并行架构实现了极强的吞吐能力，从接入层、到存储节点层再到持久分布式存储层，都可以并行扩展，再结合行列混合存储引擎，增量和全量的异步转换实现了高吞吐高并发实时写入。在实时可见性方面，...
逻辑结构说明
Dataphin业务模型的核心概念具有一定的逻辑结构，您可以通过了解其结构，为后期项目规划、建模等提供思路。本文为您介绍Dataphin中核心概念的逻辑结构及简要含义。Dataphin核心概念的逻辑结构如下图所示。由上图可见，Dataphin的架构包括...
CreateLayerVersion-创建层版本
发布层版本。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 POST/2021-04-06/layers/{layerName}/...
在函数中配置官方公共层
函数计算 提供了常用的公共层，您无需自定义层即可为您的函数配置层功能。本文介绍如何在函数中配置官方公共层。函数计算支持的官方公共层 函数计算 支持以下几类官方公共层。以下列出部分常用的官方公共层，关于 函数计算 支持的所有官方...
模式匹配
replacement 串可以包含 \``n，其中 \``n 是 1 到 9，表明源串里匹配模式里第 n 个圆括号子表达式的子串应该被插入，并且它可以包含 \&表示应该插入匹配整个模式的子串。如果你需要放一个文字形式的反斜线在替换文本里，那么写 \\。flags ...
电商业务多活实践
对于 unitType，接入层会在用户请求Header加上，所以服务层可以直接从Header中获取；对于 routerId，则需要服务层按照自己的配置进行解析（自然的前端在发起请求的时候必须在Header或Cookie中带上 routerId 参数），按照在全局配置引导中的...
教育场景识别
试卷切题 读光试卷切题可支持各学科的教辅试卷的结构化电子录入，将试卷中的题目进行自动化切分和结构化打标，并进行对应题目、题干、选项、答案等内容的结构化输出，能够大大释放手工录题成本，在教辅数字化、试卷批改有广泛应用。...
钻取
如果有层级钻取结构，可以进行本操作。在维度列表中找到目标地理信息字段，按照下图指引，新建层次结构。在 新建/编辑层级结构 页面，自定义层级结构名称后，单击 确定。单击目标字段右侧的 图标，选择 移动到area_层级结构，依次将其他...
MySQL InnoDB空间文件
inno_space Inno_space是一个可以直接访问InnoDB内部文件的命令行工具，可以打印出文件的内部结构。它不依赖任何外部文件，只需要执行 make 命令就可以得到可执行文件，做到了开箱即用。Inno_space除支持打印出文件的具体结构之外，同时还...
X-Engine简介
假设选取两个相邻层次（Level1,Level2）中的交叉的Key Range所涵盖的Extents进行合并，合并算法会逐行进行扫描，只要发现任意的物理结构（包括Data Block和Extent）与其他层中的数据没有交叠，则可以进行复用。只不过Extent的复用可以修改...
如何将一棵LSM-Tree塞进NVM
我们以X-Engine为基础结合非易失内存的优势与限制，重新设计并实现了存储引擎的主要内存数据结构、事务处理和持久化内存分配器等基础组件，最终实现了不需要记录预写式日志的高性能事务处理，降低了整体系统的写入放大并提高了存储引擎的...
维度建模
步骤三：数据指标 概览 原子指标和派生指标可以被汇总层或应用层表模型关联。在后续建表模型时，我们可以快速勾选派生指标，构建模型，模型中的字段也可以和指标构建关联关系。例如：原子指标 mbr_cnt 被汇总表模型“dws_ec_mbr_cnt_std”...
概述
数据分层 您可以结合业务场景、数据场景综合考虑设计数仓的数据分层，DataWorks为您默认创建业界通用的五层数仓分层：数据引入层 ODS（Operational Data Store）明细数据层 DWD（Data Warehouse Detail）汇总数据层 DWS（Data Warehouse ...
云市场API概览
可以在文档卡证中自动检测定位到表格区域，并将表格以结构化的方式提取出来。文档小说图片文字识别 文档小说图片文字识别适用于处理网络上海量的用户原生UGC图片中的文字识别 社区贴吧图片文字识别 社区贴吧图片文字识别适 用于各类社区...
低代码音视频工厂迁移方案
低代码2.0根据集成方实际使用的原子能力独立计费，您可以购买视频直播资源包享受优惠。迁移方案 接入新方案 目前阿里云提供2种迁移方案，您可以结合实际业务场景按需选用：低代码（含UI）集成：对标低代码1.0的 样板间集成方案，针对电商...
常见问题（FAQ）
是的，您可以使用结构化流直接将数据写入Delta表并从Delta表中读取。Delta Lake是否支持使用Spark Streaming DStream API进行写入或读取？Delta不支持DStream API。我们建议进行表流读取和写入。使用Delta Lake时，是否可以轻松地将代码...
零售电商数据建模
层级 描述 数据引入层 ODS（Operational Data Store）ODS层用于存放 未经过处理的原始数据 至数据仓库系统，其数据表的结构与原始数据所在的数据系统中的表结构一致，是数据仓库的数据准备区。公共维度层 DIM（Dimension）DIM层使用维度...
如何基于LSM-tree架构实现一写多读
整个数据库分为3层，一层计算服务，一层page server服务和一层日志服务，这样设计的好处是可以分层进行优化，提供更灵活和细粒度的控制。虽然Aurora，PolarDB和Socrates在设计上各有特点，但它们都共同践行了存储计算分离思想，数据库层面...
识别任务说明
文件或表扫描限制 为了避免数据源中文件或表过大影响整体扫描进度，数据安全中心对可以扫描的文件大小或表的字段大小做了限制，请您在进行敏感数据扫描前了解以下规则：结构化数据（RDS MySQL、RDS PostgreSQL、PolarDB等）、大数据...
物联网存储介绍
模型 描述 宽表模型 类Bigtable/HBase模型，可应用于元数据、大数据等多种场景，支持数据版本、生命周期、主键列自增、条件更新、局部事务、原子计数器、过滤器等功能。更多信息，请参见 宽表模型。时序模型 针对时间序列数据的特点进行...
迁移HBase至Hologres
本文为您介绍如何迁移HBase的语法和数据至Hologres上进行数据开发。...OLAP Hologres不仅支持行存主键点查，也支持OLAP场景，在存储上，可以设计为行列共存模式，在查询时，查询引擎根据查询特征，选择最佳的存储结构，详情请参见 建表概述。
常见问题
表格存储 面向海量结构化数据提供Serverless表存储服务，可以提供超大规模的存储容量，支撑超大规模的并发访问和低延迟的性能，能够轻松解决科学大数据的海量存储规模和查询性能问题。互联网大数据 热点新闻及娱乐八卦可以在短短数分钟内...
规划工作空间
按照数仓的层级结构划分工作空间，每一层可以有独立的一个或多个工作空间。例如：“统一数据接入”、“ODS层”、“数仓汇总层”等。适用场景 部门业务单一，部门内部人员具备开发能力，数据共享场景较少，单一部门即可完成端到端业务开发。...
基于TairString实现高性能乐观锁
要解决Last-Writer-Win问题，就需要保证访问并更新string数据这个操作的原子性，或者说，将作为共享资源的string数据转变为具有原子性的变量。您可以使用 TairString 数据结构，构建高性能的乐观锁来达成这个效果。使用TairString实现乐观...
数据库事务
如果原子操作和嵌入式结构设计无法满足您的需求，您可以使用事务相关API来实现多Document事务。云数据库事务说明 事务要么完全执行，要么不执行，不会存在部分成功的现象。在事务提交之前，事务中的数据更新在事务外完全不可见。在提交事务...
基本概念
DNS概念 DNS 是域名系统(Domain Name System)的缩写，是因特网的一项核心服务，它作为可以将域名和IP地址相互映射的一个分布式数据库，能够使人更方便的访问互联网，而不用去记住能够被机器直接读取的IP数串。域名的分层结构 由于因特网的...
原子计数器
如果要在某些在线应用中快速进行计数操作，您可以使用原子计数器实现。使用原子计数器时，您需要将表中的某一列当成一个原子计数器，然后对该列进行原子计数操作。场景 原子计数器适用于需要快速进行计数操作的场景，例如在某些在线应用中...
告警监控规则及资源数据相关操作
您可以通过Java、Python以及Go SDK操作告警监控规则及...使用Java SDK管理告警 通过Python SDK管理告警 通过Go SDK管理告警 数据结构 您可以参考以下数据结构，了解告警监控规则和告警资源的数据结构。告警监控规则数据结构 告警资源数据结构
- 产品推荐
- 这些文档可能帮助您