基本概念
域名的分层结构 由于因特网的用户数量较多，所以因特网在命名时采用的是层次树状结构的命名方法。任何一个连接在因特网上的主机或路由器，都有一个唯一的层次结构的名字，即域名（domain name）。这里，“域”（domain）是名字空间中一个可...
在函数中配置自定义层
通过控制台配置 前提条件 创建函数 创建自定义层 操作步骤 为函数配置层时，如果层有多个版本，将按照具体的层版本与函数进行绑定。登录 函数计算控制台，在左侧导航栏，单击 服务及函数。在顶部菜单栏，选择地域，然后在 服务列表 页面，...
GetLayerVersion
调用GetLayerVersion接口获取层版本信息。请求头 该接口无特殊请求头，关于公共请求头信息，请参见 公共参数。请求语法 GET/layers/{layerName}/versions/{version} HTTP/1.1 请求参数 名称 类型 位置 是否必选 示例值 描述 layerName ...
PublishLayerVersion
调用PublishLayerVersion接口发布层版本。请求头 该接口无特殊请求头，关于公共请求头信息，请参见 公共参数。请求语法 POST/layers/{layerName}/versions/HTTP/1.1 请求参数 名称 类型 位置 是否必选 示例值 描述 layerName String Path ...
在函数中配置官方公共层
函数计算 提供了常用的公共层，您无需自定义层即可为您的函数配置层功能。本文介绍如何在函数中配置官方公共层。函数计算支持的官方公共层 函数计算 支持以下几类官方公共层。以下列出部分常用的官方公共层，关于 函数计算 支持的所有官方...
模板结构说明
ROS模板结构 ROSTemplateFormatVersion:'2015-09-01' Description:模板描述信息，可用于说明模板的适用场景、架构说明等。关于模板的元数据信息，例如存放用于可视化的布局信息。Metadata:#定义创建资源栈时，用户可以定制化的参数。...
CreateLayerVersion-创建层版本
发布层版本。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 POST/2021-04-06/layers/{layerName}/...
DeleteLayerVersion-删除层配置
删除层版本。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 DELETE/2021-04-06/layers/{layerName}/...
GetLayerVersion-获取层配置
获取层的版本信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 GET/2021-04-06/layers/{layerName}/...
PutLayerACL-设置层的权限
修改层的权限。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 PUT/2021-04-06/layers/{layerName}/acl ...
MySQL InnoDB空间文件
本文介绍了MySQL InnoDB空间文件的概念及其基本结构。简介 InnoDB除重做日志外均使用统一的结构进行管理，包括系统表空间、用户表空间、撤销日志以及临时表空间。这个结构统称空间文件。inno_space Inno_space是一个可以直接访问InnoDB内部...
产品架构介绍
架构上通常将业务系统自上而下分为接入层、应用层和数据层三层。配合产品提供的管控和数据面组件，实现多活架构的创建和管控。MSHA产品架构图 控制台 控制台是用户侧控制台入口，提供MSFE、HSF、Dubbo、MQ、RDS和DRDS等各类技术架构下的容...
高级模板支持的AE功能及插件
调节层 VE Exporter中的调节层对应的是AE中的调节层，调节层本身不具备任何像素内容，但是可以通过添加特效插件对叠在其下面的所有图层产生调节效果，可以用来配合调色插件制作复杂的调色滤镜效果。摄像机层 VE Exporter支持AE中的单节点和...
如何将一棵LSM-Tree塞进NVM
我们以X-Engine为基础结合非易失内存的优势与限制，重新设计并实现了存储引擎的主要内存数据结构、事务处理和持久化内存分配器等基础组件，最终实现了不需要记录预写式日志的高性能事务处理，降低了整体系统的写入放大并提高了存储引擎的...
创建和管理结构对象
本文的结构对象指的是在限界上下文中的应用服务中定义的结构对象，用于作为应用服务方法的出入参。本文为您介绍如何新建、编辑及删除结构对象。新建结构对象 登录BizWorks，在 选择平台 下拉列表中选中 建模平台。单击页面右上角 图标或其...
核心概念的层次结构
MaxCompute具有层次结构，您可以通过了解其结构，为后期项目规划、安全管理等提供思路。本文为您介绍MaxCompute中核心概念的层次结构及简要含义。MaxCompute核心概念的层次结构如下。核心概念 说明 Project（项目）项目是MaxCompute的基本...
块关系
术语 块是基本 SPL 结构，该结构由可选的声明部分、必需的可执行部分和可选的异常部分组成。块实现独立的存储过程和函数程序、匿名块、触发器、包、子存储过程和子函数。标识符（变量、游标、类型或子程序）是块本地的，意味着它在给定块的...
模式匹配
本文介绍了 PolarDB PostgreSQL版（兼容Oracle）支持的模式匹配。说明 如果你的模式匹配的要求超出了这些，请考虑用 Perl 或 Tcl 写一个用户定义的函数。虽然大部分的正则表达式搜索都能被很快地执行，但是正则表达式仍可能被人为地弄成...
教育场景识别
试卷切题 读光试卷切题可支持各学科的教辅试卷的结构化电子录入，将试卷中的题目进行自动化切分和结构化打标，并进行对应题目、题干、选项、答案等内容的结构化输出，能够大大释放手工录题成本，在教辅数字化、试卷批改有广泛应用。...
管理备份策略
归档层保留时间 仅当 标准层保留时间 配置为 指定时间 时，需要设置归档层保留时长。对于需要长期保存的备份数据，可以通过该参数将备份恢复点自动从标准层转移到归档层，降低数据保护成本。不使用：不启动归档层保留，标准层保留到期后...
Native 框架简介
原子控件 将平台框架自带控件进行包装，构建一套基本的原子控件库。Iconfont 图标 收集常用场景的图标，并构建 Iconfont 格式，提供一套可用的控件图标库。通用层（Common）通用层是 AntUI 的核心统一模块，即业务方最常用的统一控件模块，...
概述
在存储引擎层面，列存索引的构建保证了事务提交的原子性，确保查询上可以查询到事务级别一致性的数据。产品形态 在引入了列存引擎后，PolarDB分布式版在原有的主实例和只读实例产品规格之外，增加了列存只读实例产品规格。主实例：默认只能...
玄武分析型存储
多种索引类型多路归并查找的过程如下所示：结构化与非结构化融合 玄武存储层索引管理器实现结构化索引与非结构化索引的统一管理，如数值类的BKD索引、字符串类的倒排索引、非结构化的JSON索引及向量索引，还有文本数据的全文索引。对计算层...
概述
数据分层 您可以结合业务场景、数据场景综合考虑设计数仓的数据分层，DataWorks为您默认创建业界通用的五层数仓分层：数据引入层 ODS（Operational Data Store）明细数据层 DWD（Data Warehouse Detail）汇总数据层 DWS（Data Warehouse ...
逻辑结构说明
Dataphin业务模型的核心概念具有一定的逻辑结构，您可以通过了解其结构，为后期项目规划、建模等提供思路。本文为您介绍Dataphin中核心概念的逻辑结构及简要含义。Dataphin核心概念的逻辑结构如下图所示。由上图可见，Dataphin的架构包括...
X-Engine简介
在持久化层如何实现高效，就需要讨论每层的细微结构。数据组织 X-Engine的每层都划分成固定大小的Extent，存放每个层次中的数据的一个连续片段（Key Range）。为了快速定位Extent，为每层Extents建立了一套索引（Meta Index），所有这些...
创建数仓分层
DataWorks的数仓分层功能，默认为您创建了 数据引入层ODS（Operational Data Store）、公共维度层DIM（Dimension）、明细数据层DWD（Data Warehouse Detail）、汇总数据层DWS（Data Warehouse Summary）及 应用数据层ADS（Application Data...
数据建模：智能数据建模
适用场景 DataWorks智能建模可助力企业构建自身建模能力，挖掘企业的数据资产价值，例如：海量数据的标准化管理 企业业务越庞大数据结构就越复杂，企业数据量会随着企业业务的快速发展而迅速增长，如何结构化有序地管理和存储数据是每个...
客户标签
客户身上一个或多个客户特征的集合，构成集合的特征也称为业务特征规则，是表达客户标签规则的原子组成。客户标签的应用：客户标签应用层是利用客户标签实现客户画像、客户群细分、精准营销、客户价值提升、分析挖掘和信息快速推送。客户...
查看代码结构
DataWorks的代码结构功能，帮助您根据当前节点编写的SQL代码，解析出SQL代码运行的流程结构图。您可以通过代码结构快速定位、查看及修改SQL代码。查看代码结构 进入DataStudio。登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>...
如何基于LSM-tree架构实现一写多读
wal日志保证了前台事务的原子性和持久性，Slog则保证了X-Engine内部LSM-tree形状变化的原子性和持久性，这两个日志缺一不可，都需要复制同步。共享存储下的物理复制 图 3.Primary-Replica物理复制架构 LSM-tree引擎一写多读的能力是对...
明确统计指标
需求调研输出的文档中，含有原子指标与派生指标，此时我们需要在设计汇总层表模型前完成指标的设计。指标定义注意事项 原子指标是明确的统计口径、计算逻辑：原子指标=业务过程+度量。派生指标即常见的统计指标：派生指标=时间周期+修饰词+...
明确统计指标
需求调研输出的文档中，含有原子指标与派生指标，此时我们需要在设计汇总层表模型前完成指标的设计。指标定义注意事项 原子指标是明确的统计口径、计算逻辑：原子指标=业务过程+度量。派生指标即常见的统计指标：派生指标=时间周期+修饰词+...
识别任务说明
识别任务用来扫描资产中的敏感数据，对数据进行分类分级。数据安全中心提供两种识别任务模式：系统默认任务和自定义...相关文档 查看敏感数据识别结果 配置识别模板 支持的数据库类型 支持识别的原子模型 数据扫描会影响我的数据库性能吗？
零售电商数据建模
层级 描述 数据引入层 ODS（Operational Data Store）ODS层用于存放 未经过处理的原始数据 至数据仓库系统，其数据表的结构与原始数据所在的数据系统中的表结构一致，是数据仓库的数据准备区。公共维度层 DIM（Dimension）DIM层使用维度...
迁移HBase至Hologres
开发方式 应用开发复杂，需要将业务分析的指标、维度、表、聚合等概念，转化为存储的KeyValue概念，将应用层查询过滤场景翻译为对Key的字节过滤操作，系统效率严重依赖Key设计的质量。整个系统从数据录入到数据分析查询等复杂多样的场景，...
概述
Cache Aside模式下，持久化层和缓存层的一致性问题主要是“双写”，即数据既在数据库中保存一份，又在缓存中保存一份，通过应用侧来维护两份数据的一致性。这种情况下会遇到很多数据一致性的问题，比如数据库和缓存的操作先后顺序、缓存是...
云市场API概览
电商图片文字识别 电商图文识别是专门针对电商商品宣传图片、社区贴吧图片、网络UGC图片等网络场景下图片字符快速精准识别的原子能力产品，在违规广告识别、信息审核管理和网络安全治理等场景下具有极大应用价值。表格识别 表格识别可支持...
维度建模
步骤三：数据指标 概览 原子指标和派生指标可以被汇总层或应用层表模型关联。在后续建表模型时，我们可以快速勾选派生指标，构建模型，模型中的字段也可以和指标构建关联关系。例如：原子指标 mbr_cnt 被汇总表模型“dws_ec_mbr_cnt_std”...
常见问题（FAQ）
是的，您可以使用结构化流直接将数据写入Delta表并从Delta表中读取。Delta Lake是否支持使用Spark Streaming DStream API进行写入或读取？Delta不支持DStream API。我们建议进行表流读取和写入。使用Delta Lake时，是否可以轻松地将代码...
- 产品推荐
- 这些文档可能帮助您