核心概念的层次结构
MaxCompute具有层次结构，您可以通过了解其结构，为后期项目规划、安全管理等提供思路。本文为您介绍MaxCompute中核心概念的层次结构及简要含义。MaxCompute核心概念的层次结构如下。核心概念 说明 Project（项目）项目是MaxCompute的基本...
X-Engine简介
在持久化层如何实现高效，就需要讨论每层的细微结构。数据组织 X-Engine的每层都划分成固定大小的Extent，存放每个层次中的数据的一个连续片段（Key Range）。为了快速定位Extent，为每层Extents建立了一套索引（Meta Index），所有这些...
概述
在存储引擎层面，列存索引的构建保证了事务提交的原子性，确保查询上可以查询到事务级别一致性的数据。产品形态 在引入了列存引擎后，PolarDB分布式版在原有的主实例和只读实例产品规格之外，增加了列存只读实例产品规格。主实例：默认只能...
创建自定义层
层可以为您提供公共依赖库、运行时环境及函数扩展等发布与部署能力。您可以将函数依赖的公共库提炼到层或者使用 函数计算 官方公共层，以减少部署或更新函数时的代码包体积。本文介绍层的功能原理、各运行时使用层说明、如何构建层的ZIP包...
创建自定义层
层可以为您提供公共依赖库、运行时环境及函数扩展等发布与部署能力。您可以将函数依赖的公共库提炼到层或者使用 函数计算 官方公共层，以减少部署或更新函数时的代码包体积。本文介绍层的注意事项、各运行时使用层说明、如何构建层的ZIP包...
通用数据结构
Layer Layer返回结构体 参数名称 类型 示例值 描述 layerName String Layer-name 层的名称。version Integer 1 层的版本。description String Layer-description 层的描述。code LayerCode 指定Code ZIP包。codeSize Long 421 系统返回的...
依赖跟踪
之所以在这里会停下，是因为没有什么依赖着外键约束（如果希望检查 DROP.CASCADE 会干什么，运行不带 CASCADE 的 DROP 并阅读 DETAIL 输出）。本数据库中的几乎所有 DROP 命令都支持 CASCADE。当然，其本质的区别随着对象的类型而不同。...
Native 框架简介
原子控件 将平台框架自带控件进行包装，构建一套基本的原子控件库。Iconfont 图标 收集常用场景的图标，并构建 Iconfont 格式，提供一套可用的控件图标库。通用层（Common）通用层是 AntUI 的核心统一模块，即业务方最常用的统一控件模块，...
PolarDB并行查询
refix 原始的串行计划需要转换为leader计划，因此要替掉不必要的执行结构并调整一些引用关系，如上图右上部分，由于t1 join t2和部分聚集操作已经下推，leader上需要去掉不必要的结构，并替换为从一个collector table中读取worker传递上来...
如何定义Manifest
什么是Manifest Manifest的概念来源于gpt plugin，gpt plugin中Manifest是一个文件，文件存储对于一个插件的所有描述，包括插件相关的API出入参、插件作用等关键信息，大模型会根据Manifest的信息知晓当前的插件可以完成什么（What），什么...
什么是WebIDE
开发者可以开箱即用使用通义灵码的智能编码能力，提高编码效率。通义灵码能够实时进行代码审查，检测潜在的逻辑错误，且当函数运行异常时，能快速定位问题然后提供修复指导，实现开发效率和代码质量的双重提升。说明 为了获得更好的WebIDE...
向量介绍
将物理世界产生的非结构化数据，转化为结构化的多维向量，用这些向量标识实体和实体间的关系。再计算向量之间距离，通常情况下，距离越近、相似度越高，召回相似度最高的TOP结果，完成检索。向量检索算法 linear linear算法会线性计算所有...
概述
数据分层 您可以结合业务场景、数据场景综合考虑设计数仓的数据分层，DataWorks为您默认创建业界通用的五层数仓分层：数据引入层 ODS（Operational Data Store）明细数据层 DWD（Data Warehouse Detail）汇总数据层 DWS（Data Warehouse ...
背景
为什么选择表格存储 如上图所示，表格存储提供了丰富、通用的功能，并具有如下优势：零运维，即开即用，按量付费 表格存储是阿里云上唯一一个Serverless的数据库，无需预定任何资源搭建服务，只需按使用量付费，简单易用，满足不同行业的大...
概述
核心优势 数据库与缓存一致性 提供开箱即用的一站式能力，替换传统的MySQL+缓存+MQ的方案，成本更低 提供了数据强一致性，业务无需额外开发，即可解决一致性问题；同时无需自行运维额外的一致性组件，节约了MQ、同步组件等的购买和运维成本...
如何将一棵LSM-Tree塞进NVM
我们以X-Engine为基础结合非易失内存的优势与限制，重新设计并实现了存储引擎的主要内存数据结构、事务处理和持久化内存分配器等基础组件，最终实现了不需要记录预写式日志的高性能事务处理，降低了整体系统的写入放大并提高了存储引擎的...
如何基于LSM-tree架构实现一写多读
wal日志保证了前台事务的原子性和持久性，Slog则保证了X-Engine内部LSM-tree形状变化的原子性和持久性，这两个日志缺一不可，都需要复制同步。共享存储下的物理复制 图 3.Primary-Replica物理复制架构 LSM-tree引擎一写多读的能力是对...
识别任务说明
识别任务用来扫描资产中的敏感数据，对数据进行分类分级。数据安全中心提供两种识别任务模式：系统默认任务和自定义...相关文档 查看敏感数据识别结果 配置识别模板 支持的数据库类型 支持识别的原子模型 数据扫描会影响我的数据库性能吗？
数据建模：智能数据建模
适用场景 DataWorks智能建模可助力企业构建自身建模能力，挖掘企业的数据资产价值，例如：海量数据的标准化管理 企业业务越庞大数据结构就越复杂，企业数据量会随着企业业务的快速发展而迅速增长，如何结构化有序地管理和存储数据是每个...
维度建模
步骤三：数据指标 概览 原子指标和派生指标可以被汇总层或应用层表模型关联。在后续建表模型时，我们可以快速勾选派生指标，构建模型，模型中的字段也可以和指标构建关联关系。例如：原子指标 mbr_cnt 被汇总表模型“dws_ec_mbr_cnt_std”...
地球球体层
贴图类型：贴图类型决定了球体层呈现什么样的样式，类型包括 地形、卫星、粒子、行政区 和 自定义贴图，每种贴图类型下都可以设置贴图的 缩放、凹凸度、贴图色、泛光色 和 高亮色。大气层：大气层的样式。参数 说明 显示 打开开关，显示...
零售电商数据建模
层级 描述 数据引入层 ODS（Operational Data Store）ODS层用于存放 未经过处理的原始数据 至数据仓库系统，其数据表的结构与原始数据所在的数据系统中的表结构一致，是数据仓库的数据准备区。公共维度层 DIM（Dimension）DIM层使用维度...
MySQL InnoDB空间文件
本文介绍了MySQL InnoDB空间文件的概念及其基本结构。简介 InnoDB除重做日志外均使用统一的结构进行管理，包括系统表空间、用户表空间、撤销日志以及临时表空间。这个结构统称空间文件。inno_space Inno_space是一个可以直接访问InnoDB内部...
云市场API概览
电商图片文字识别 电商图文识别是专门针对电商商品宣传图片、社区贴吧图片、网络UGC图片等网络场景下图片字符快速精准识别的原子能力产品，在违规广告识别、信息审核管理和网络安全治理等场景下具有极大应用价值。表格识别 表格识别可支持...
常见问题（FAQ）
说明 详情请参考Databricks官网文章：常见问题 什么是 Delta Lake?Delta Lake是一个开源存储层，可为数据湖带来可靠性。Delta Lake提供ACID事务，可伸缩的元数据处理，并统一流处理和批数据处理。Delta Lake在您现有的数据湖之上运行，并且...
CreateFunction-创建函数
说明 多个层会按照数组下标从大到小的顺序进行合并，下标小的层的内容会覆盖下标大的层的同名文件。string 否 层资源的名称。格式为 acs:fc:{region}:{accountID}:layers/{layerName}/versions/{layerVersion}。layerName description ...
RDS术语
数据结构多样时，可以选择将结构化数据存储在RDS，将非结构化数据存储在MongoDB，满足业务的多样化存储需求。更多信息，请参见 什么是云数据库MongoDB版。慢SQL 执行时间很长的SQL语句。更多信息，请参见 慢日志分析。O OSS Object Storage...
RDS术语
适合短期需求，用完可立即释放实例，节省费用。更多信息，请参见 计费项。B 半同步 应用发起的更新在主实例执行完成后，会将日志同步传输到备实例，备实例收到日志，表示事务完成提交，不需要等待备实例执行日志内容。当备实例不可用或者主...
RDS术语
数据结构多样时，可以选择将结构化数据存储在RDS，将非结构化数据存储在MongoDB，满足业务的多样化存储需求。更多信息，请参见 什么是云数据库MongoDB版。慢SQL 执行时间很长的SQL语句。更多信息，请参见 慢日志分析。O OSS Object Storage...
常见问题
模型 描述 宽表模型 类Bigtable/HBase模型，可应用于元数据、大数据等多种场景，支持数据版本、生命周期、主键列自增、条件更新、局部事务、原子计数器、过滤器等功能。更多信息，请参见 宽表模型。时序模型 针对时间序列数据的特点进行...
低代码音视频工厂迁移方案
低代码2.0根据集成方实际使用的原子能力独立计费，您可以购买视频直播资源包享受优惠。迁移方案 接入新方案 目前阿里云提供2种迁移方案，您可以结合实际业务场景按需选用：低代码（含UI）集成：对标低代码1.0的 样板间集成方案，针对电商...
什么是实时数仓Hologres
本文为您介绍什么是实时数仓Hologres以及Hologres的功能。Hologres是阿里巴巴自主研发的一站式实时数仓引擎（Real-Time Data Warehouse），支持海量数据实时写入、实时更新、实时加工、实时分析，支持标准SQL（兼容PostgreSQL协议和语法，...
概述
通过将SPL代码组织为子存储过程和子函数，可以有利地运用SPL存储过程和函数程序的能力和功能来构建结构良好且易于维护的程序。通过在SPL程序中声明子存储过程和子函数，可从相对较大的SPL程序中的不同位置多次调用相同的SPL代码。子存储...
块关系
术语 块是基本 SPL 结构，该结构由可选的声明部分、必需的可执行部分和可选的异常部分组成。块实现独立的存储过程和函数程序、匿名块、触发器、包、子存储过程和子函数。标识符（变量、游标、类型或子程序）是块本地的，意味着它在给定块的...
缓存分析
A：该报错表示Redis实例里面存在非标准的Bloom结构，您可以把这些Bloom结构的Key删掉，或者将Redis实例升级到Redis企业版（Tair），并将非标准的Bloom结构修改为TairBloom结构。Q：如何处理报错 decode rdbfile error:rdb:invalid file ...
基础概念
怎么理解模板管理 在模板管理功能中，用户可以看到版本、硬件类型、模板三个关键字，系统提供了三层结构管理结构，为用户在不同场景下做内容差异显示提供帮助。模板版本，来区分不同门店或不同营销活动显示内容的一套模板集合，通过版本化...
基本概念
域名的分层结构 由于因特网的用户数量较多，所以因特网在命名时采用的是层次树状结构的命名方法。任何一个连接在因特网上的主机或路由器，都有一个唯一的层次结构的名字，即域名（domain name）。这里，“域”（domain）是名字空间中一个可...
即席分析中的交互式分析
下钻/上卷 所有在数据集中配置了层级结构的维度字段，只要不是层级结构中的最后一层，都可以在即席分析中的表格进行下钻的操作。通过下钻去进行更细粒度的数据查询。比如下图中的地理层级结构，可以从原来的区域下钻到省份，从省份下钻到...
管理类型
结构树 如下图所示，在类型列表中单击目标类型名前的下弹标志会在弹出的下拉列表中展示其结构树，对象类型的结构树最深有五层，右键结构树中不同层级中的项会提供对该项的一些操作键，操作键的具体信息请查看管理操作中的 管理操作键表：...
如何在Custom Runtime中引用层中的依赖
否则，请先确认您构建层ZIP包的目录结构，然后将/opt/python 替换为实际的目录。例如，您的层ZIP包内的目录名为 my-layer-code，那么层会部署到/opt/my-layer-code 目录下。您需要在函数配置中设置环境变量时，或者代码中增加依赖库搜索...
- 产品推荐
- 这些文档可能帮助您