数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
数仓分层
基于阿里巴巴OneData方法论最佳实践，在阿里巴巴的数据体系中，建议将数据仓库分为三层：数据引入层（ODS，Operational Data Store）、数据公共层（CDM，Common Dimensions Model）和数据应用层（ADS，Application Data Store）。...
从自建HDFS迁移数据
本章介绍如何将在开源HDFS的数据平滑地迁移到Lindorm的文件引擎...如果只能在指定时间段内迁移数据，可以将目录切分为几个小目录，依次迁移。一般全量数据同步时，需要一个短暂的业务停写过程，用来启用双写双算或直接将业务切换到新集群上。
常见问题
答：在同一个项目下，有几层空间就创建几个对应数量的主场景，分别上传对应的子场景进行标注，每个主场景完成发布后，点击模型后处理，在楼梯处添加去往另一层的热点链接。问题9：如何进行模型发布？答：确定预览效果没问题后，回到控制台...
分箱
分箱个数 具体将连续数据分为几个区间，取值为[1,1000]的正整数值。分箱区间 自定义分箱专有，用于确定分箱的切分点。左开右闭，‘,’分割，如 5,12,34,39。注意：分割符为半角的逗号",。数据转换方式 可选woe值或者索引值。索引值即为分箱...
横向分箱
分箱个数 具体将连续数据分为几个区间，取值为[1,1000]的正整数值。分箱区间 自定义分箱专有，用于确定分箱的切分点。左开右闭，‘,’分割，如 5,12,34,39。注意：分割符为半角的逗号",。数据转换方式 可选woe值或者索引值。索引值即为分箱...
术语解释
分位数 指将一个随机变量的概率分布范围分为几个等份的数值点，常用的有中位数（即二分位数）、四分位数、百分位数等。例如，正态分布的百分位数情况如下图所示：中位数 指将样本数据按大小顺序排列起来，形成一个数列，居于数列中间位置的...
网商银行
解决方案 网商银行云架构体系主要分为四层：IAAS（Infrastructure as a Service）层提供低成本的服务器、网络设备、存储等物理设施，通过虚拟化和云计算技术使得基础资源具备成本低廉、安全、可伸缩的特性。PAAS（Platform as a Service）...
XGBOOST多分类
分类数量 num_class 样本将分为几个类。模型的训练进程数 nthread 控制模型训练的进程数，默认20，取决于本地计算环境的CPU资源。正负权重平衡 scale_pos_weight 正负样本的权重比例，用于解决类别不平衡的问题。隐私开销 epsilon 联邦学习...
组复制简介
组复制 的架构 如上图所示，在MySQL的Server层和Replica层之下，组复制的架构分为三层：组复制层（Group Replication Logic Layer）：在单机MySQL的Server层之下，组复制增加了组复制层，该层通过钩子（HOOK）与Server层相连，负责向组通讯...
业产技融合分层协作方案
建议：业产技协作模式默认分为三层，用户也可以根据团队的实际情况进行调整，比如产品主导的企业，可以分为产技两层，业务主导的企业可以分为业技两层；工作空间 工作事项 参与团队及职责 关键词 业务空间 客户诉求 用户反馈 业务团队：·...
HAL说明
第一层 Link Kit Interface Layer 称为 SDK接口声明层。是C函数的原型声明，SDK跨平台移植完成之后，可以用于编写业务逻辑和阿里云服务器通信API。在 examples 目录提供了丰富的示例程序使用API做业务逻辑。只要填入设备信息，即可以在...
产品架构
如同大多数传统单机关系型数据库，PolarDB-X 1.0 分为网络层、协议层、SQL解析层、优化层和执行层，其中优化层包含逻辑优化和物理优化，执行层包含单机两阶段执行、单机并行执行和多机并行执行，应用了多种传统单机数据库优化和执行技术。...
BITMAP精准去重
说明 hid列和BUCKETS要设置合理，hid列的基数至少是BUCKETS的5倍以上，以使数据Hash分桶后尽量均衡。数据导入。LOAD LABEL user_tag_Bitmap_test(DATA INFILE('hdfs:/abc')INTO TABLE user_tag_Bitmap COLUMNS TERMINATED BY ','(tmp_tag,...
getCurrentPages 方法
getCurrentPages()方法用于获取当前页面...5 层页面深度。if(getCurrentPages().length=5){ my.redirectTo('/pages/logs/logs');} else { my.navigateTo('/pages/index/index');} 说明：不要尝试修改页面栈，否则会导致路由以及页面状态错误。
App内H5数据上报
场景举例：App业务、运营和PD等不希望在App中看到H5的数据 操作说明：创建两个应用：一个App应用，该App有自己的Appkey_app 一个Web/H5应用，该Web/H5有自己的Appkey_h5 不进行任何API的调用 上报日志：仅H5报一条日志：Appkey是H5的...
架构模块介绍
工程架构 SOFARPC 架构如下所示：SOFARPC 从下到上分为两层：核心层：包含了 RPC 的核心组件（例如各种接口、API、公共包）以及一些通用的实现（例如随机等负载均衡算法）。功能实现层：所有的功能实现层的用户都是平等的，都是基于扩展...
产品架构
如上图所示，PAI的业务架构分为以下四层：基础资源层（计算资源&基础设施）：基础设施包括CPU、GPU、高速RDMA网络以及容器服务ACK等。计算资源包括云原生资源（灵骏计算资源和通用计算资源）和大数据引擎资源（MaxCompute和Flink）。平台...
隐私条款管理
功能架构 统一条款管理功能分为 管理层、集成层、核心层、用户层 四大架构层，其中 管理层主要面向企业管理者，用来对整个条款系统的监管，当遇到法律风险的时候，可以充分通过条款同意状态全生命周期分析，追溯风险源，实现证据举证、固证...
技术架构
如同大多数传统单机关系型数据库，PolarDB-X 1.0 分为网络层、协议层、SQL解析层、优化层和执行层，其中优化层包含逻辑优化和物理优化，执行层包含单机两阶段执行、单机并行执行和多机并行执行，应用了多种传统单机数据库优化和执行技术。...
存储库类型
备份库 用于存放您的备份数据，分为标准层和归档层。数据备份完成后，备份数据将首先存储在标准层内；如果您启用了自动归档功能，备份数据将按照设定的归档策略流转到归档层，用于长时间低成本的保存。为了最大程度地保障您备份数据的冗余...
使用执行计划分析查询
执行计划树分为两层：第一层是Stage层，第二层是算子（Operator）层。本文介绍如何使用Stage层和算子层执行计划树来分析查询。Stage层执行计划树 Stage层执行计划树由多个Stage节点组成，数据流向自下而上，先由具有扫描算子的Stage进行...
服务端集成加密概述
通常，存储加密中密钥层次结构会至少分为两层，并通过信封加密的机制实现对数据的加密。第一层为KMS中的用户主密钥（CMK），第二层为数据密钥（DK）。CMK对DK进行加解密操作和保护，DK对业务数据进行加解密操作和保护。在业务数据落盘存储...
技术架构
核心模块 如同大多数传统单机关系型数据库，PolarDB-X 分为网络层、SQL解析层、优化层、执行层、存储层，其中优化层包含逻辑优化和物理优化，执行层包含单机两阶段执行、单机并行执行和多机并行执行，存储层包含应用了多种传统单机数据库...
X-Engine引擎常见问题
主索引LSM-Tree分为3层，大部分数据集中在第1层和第2层，其中第0层是从内存直接转储的数据，不进行数据压缩。因此，查询压缩率的SQL语句中使用 LEVEL in(1,2)来计算这两层压缩比的加权平均值，从而得到X-Engine中的表数据的压缩比。如果要...
基本概念
备份库 用于存放您的备份数据，分为标准层和归档层。数据备份完成后，备份数据将首先存储在标准层内；如果您启用了自动归档功能，备份数据将按照设定的归档策略流转到归档层，用于长时间低成本的保存。为了最大程度地保障您备份数据的冗余...
个人设置
主要分为下述几个部分：编辑 基础设置 报警渠道 代理 编辑 编辑 按钮位于个人设置右上方，通过该按钮可以实现对个人设置的编辑。基础设置 主要包括下述内容：产品时区：监控系统显示的时间和指标项所用时区。产品语言：监控系统使用的语言...
收藏夹
在收藏夹中所提供的信息分为下述几类：大盘 应用 监控项 大盘 进入自定义监控后，对于 大盘 类型的监控产品，单击产品右侧 操作>加入收藏 可以添加到收藏夹中的 大盘。示例如下：添加收藏示例 收藏夹大盘界面示例 应用 这部分功能是对 应用...
应用开通说明
IDaaS 中将应用分为如下几个类型：优先顺序 接入类型 类型说明 1 1.应用市场 IDaaS 预集成的应用模板，快速开通使用，省时省事。会不断补充。2 2.标准协议 不在应用市场中，但支持标准 SAML、OIDC 等协议的三方应用。通过标准化配置即可...
收藏夹
在收藏夹中所提供的信息分为下述几类：大盘 应用 监控项 大盘 进入自定义监控后，在监控产品 大盘 上，点击 操作>加入收藏 可以添加到收藏夹。添加收藏，示例如下：大盘界面示例 应用 应用界面示例 有下述 2 种添加收藏方式：进入应用监控...
逻辑结构说明
由上图可见，Dataphin的架构包括以下几个层次：业务模型层和计算引擎层：业务模型层从业务视角对数据进行重新定义组织，分类打标；计算引擎层承载数据的实际计算与存储。业务模型层按照不同的业务形态，划分出业务板块，一种业务形态对应...
步骤六：调拨应用流量
通过调整并下发接入层和应用层的分片规则，验证流量路由和 RPC 路由的准确性。说明 该教程一般适用于灰度测试场景。前提条件 已配置应用层的分片规则如下：RZ01A：00-49 RZ02A：50-99 账号准备：账号 A：UID 分片位为 08（属于 RZ01A 分片...
Native 框架简介
应用层（Application）应用层提供平台差异化处理和 H5 容器支持等能力，解决了统一和平台个性化之间的矛盾点。原子、组合和场景成为 AntUI 构建的基础，但在实际应用中，需要同时兼顾到 Android、iOS 和 H5 三个方面的需求。因此，统一组件...
营销活动组件介绍
简单条件判断：单击 简单条件判断，判断方式分为以下几种类型：事件判断：客户在指定时间内容的行为判断，包含微信事件、订单相关事件等。系统为每个默认事件定义不同的事件属性，以更精准地描述该事件，丰富客户的行为数据。也支持自定义...
项目分配与安全
在为企业级大数据平台创建项目时，建议您对ODS层、DWD及DWS层的数据按照业务板块的粒度建立项目，对于ADS层的数据，按照应用的粒度建立项目。项目分配 在本教程中，建议参考下图建立您的MaxCompute项目，图中的每一个方块代表一个项目。...
项目分配与安全
在为企业级大数据平台创建项目时，建议您对ODS层、DWD及DWS层的数据按照业务板块的粒度建立项目，对于ADS层的数据，按照应用的粒度建立项目。项目分配 在本教程中，建议参考下图建立您的MaxCompute项目，图中的每一个方块代表一个项目。...
概述
本指南基于金融行业常见的转账和积分场景，指导您从单元化的技术架构和应用架构的规划，到环境搭建和...流量调拨：使用单元化应用服务（LHC）做应用层流量的调拨，通过调整并下发接入层和应用层的分片规则，验证流量路由和 RPC 路由的准确性。
应用场景
异地多活（Multi-region active-active）数据层做分片（Sharding），不同的 AZ 可以划分为更多的逻辑单元（Logic Data Center），处理不同的数据分片。尽量保证数据访问的链路从接入层到应用层再到数据层不会出现跨可用区的调用。这种架构...
基本概念（V3）
标签 标签分为以下几类：导入的标签：用户标签数据集 记录用户的一系列维度特征。新建数据集时，通过为字段配置标签别名的方式给用户打标签，后续使用标签时，实质上是在使用对应的字段。自定义标签：基于各类数据集和模型，将指定的筛选...
- 产品推荐
- 这些文档可能帮助您