质量规则模板类型
本文为您介绍数据质量对象的...对于多链路之间的数据计算进度监控则可以发现一些数据滞留、统计偏差问题，提升实时数据质量。稳定性 实时统计值检测 实时数据为指标值或可统计数据时，用于判断数据是否正确 可选择和固定值或者历史进行对比。
质量规则模板类型
本文为您介绍数据质量对象的...对于多链路之间的数据计算进度监控则可以发现一些数据滞留、统计偏差问题，提升实时数据质量。稳定性 实时统计值检测 实时数据为指标值或可统计数据时，用于判断数据是否正确 可选择和固定值或者历史进行对比。
表设计规范
表数据存储规范 按数据层规划数据的生命周期：源表ODS层：每天从业务系统同步过来的数据，全部保留，生命周期定义永久保存。当下游数据受损时，可以从ODS恢复数据。若ODS每天同步过来的是全量表，则可以通过全表拉链的方式来压缩存储。数据...
层次调用规范
CDM中间层应该积极了解应用层数据的建设需求，将公用的数据沉淀到公共层，为其他数据层次提供数据服务。同时，ADS应用层也需积极配合CDM中间层进行持续的数据公共建设的改造。避免出现过度的ODS层引用、不合理的数据复制和子集合冗余。总体...
层次调用规范
CDM中间层应该积极了解应用层数据的建设需求，将公用的数据沉淀到公共层，为其他数据层次提供数据服务。同时，ADS应用层也需积极配合CDM中间层进行持续的数据公共建设的改造。避免出现过度的ODS层引用、不合理的数据复制和子集合冗余。总体...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
01新建模型目录
DWD：全称Data Warehouse Detail，明细数据层，该层数据和源数据基本保持一致，保存着最细粒度的数据，一般存放所有的明细数据，是所有后期分析的数据基础。具有数据量大，查询计算较慢的特点。DWS：全称Data Warehouse Summary，汇总数据...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
API概览
QueryBlockchainData 使用IoT设备端生成的数据唯一标识查询上链的数据。QueryBlockchainMetadata 使用IoT设备端生成的数据唯一标识查询上链数据的区块链元信息。ListDIDByDataDIDPrefix 使用数据唯一标识前缀进行溯源查询上链数据列表。...
某历史养成类游戏开发公司实时计算和数据仓库方案
3）数据汇总层：数据明细层的数据可以定期（按天或者按小时）ETL（比如关联维表、过滤、聚合）后写入到数据汇总层。数据汇总层的数据供后续的复杂分析；4）应用数据层：直接对外提供数据查询服务（基于Lindorm SQL服务）支撑上层大数据风控...
公共规范
中间层CDM需要积极了解应用层数据的建设需求，将公用的数据沉淀到公共层，为其他层提供数据服务。应用层需要积极配合中间层CDM持续改造公共层。必须避免出现过度的引用ODS层、不合理的数据复制以及子集合冗余。ODS层数据不能被应用层任务...
添加区块链服务数据源
本文档为您介绍在DataV中添加区块链服务数据源的方法，以及相关参数配置说明。使用阿里云区块链服务（Blockchain as a Service，简称BaaS），您可以通过REST API调用智能合约，查询链上信息，也可以查询区块及交易信息。前提条件 已准备好...
添加区块链服务数据源
本文档为您介绍在DataV中添加区块链服务数据源的方法，以及相关参数配置说明。使用阿里云区块链服务（Blockchain as a Service，简称BaaS），您可以通过REST API调用智能合约，查询链上信息，也可以查询区块及交易信息。前提条件 已准备好...
数字农业可信上链最佳实践
success":true } 3.IoT设备数据上链成功之后，为了获取该次上链的数据证书信息，以对该次上链数据进行证明，您可以调用IoT区块链Hub云端 API查询上链数据元信息 进行查证。API名称：QueryBlockchainMetadata 请求示例：...
内容安全
由于区块链的不可篡改特性，如果上链的数据存在违法违规信息则难以单独清除。为防范此类问题，您可以将区块链和阿里云内容安全服务集成。在通过REST API调用智能合约时，指定特定参数，阿里云内容安全服务会自动审查调用参数信息，避免违法...
成员接入
本文介绍了成员接入流程，管理方可以邀请其它成员共同使用IoT区块链Hub，成员接受邀请之后，管理方可以授予该成员相应的区块链访问权限，以使成员可以在被授权的业务链上进行数据上链。进入成员接入授权页 1.登录 IoT安全中心控制台。2.在...
创建数据脱敏场景
脱敏场景介绍 DataWorks提供的 数据开发/数据地图展示脱敏、数据分析展示脱敏、MaxCompute引擎层脱敏、Hologres引擎层脱敏 等动态脱敏，及 数据集成静态脱敏 等一级脱敏场景为固定场景，不支持执行新增、编辑、删除等操作。同时，DataWorks...
创建数仓分层
各个分层的功能介绍如下：数据引入层 ODS（Operational Data Store）ODS层用于接收并处理需要存储至数据仓库系统的原始数据，其数据表的结构与原始数据所在的数据系统中的表结构一致，是数据仓库的数据准备区。ODS层对原始数据的操作具体...
申请区块链
您可以申请创建联盟链部署属于您自己的区块链，成为区块链的 管理员，管理员可以 邀请用户 成为区块链的联盟方，还可以通过 配置数据分类 约定联盟内上链数据的格式。如果您是受邀请加入区块链的 联盟方，可以跳过上述步骤，直接 申请加入...
数仓规划概述
数仓分层 您可以结合业务场景、数据场景综合考虑设计数仓的数据分层，DataWorks为您默认创建业界通用的五层数仓分层：数据引入层 ODS（Operational Data Store）明细数据层 DWD（Data Warehouse Detail）汇总数据层 DWS（Data Warehouse ...
存证数据写入
数据格式规范 为维护数据的可读性，区块链预先配置了不同业务场景下对应的数据格式规范，以约定统一的存证数据格式。上链数据必须满足规范要求，您可以在 client-sdk.zip 包内的 schema.txt 中查看区块链的数据格式规范。数据格式规范由多...
产品功能发布记录
2020.02.27 相关文档 Hyperledger Fabric【云服务集成】数据库 如果您希望区块链上的数据能导出到关系型数据库，您可以将区块链数据和数据库表做映射配置。云服务集成会根据配置，将区块中的指定数据导出至目标数据库的表中，您可以使用SQL...
数据模型架构规范
按数据域划分：命名时按照CDM层的数据进行数据域划分，以便有效地对数据进行管理，以及指导数据表的命名。例如，“交易”数据的英文缩写可定义为“trd”。按业务过程划分：当一个数据域由多个业务过程组成时，命名时可以按业务流程划分。...
汇总数据层（DWS）
汇总数据层以分析的主题对象作为建模驱动，基于上层的应用和产品的指标需求构建公共粒度的汇总表。汇总数据层的一个表通常会对应一个统计粒度（维度或维度组合）及该粒度下若干派生指标。汇总表设计原则 聚集是指针对原始明细粒度的数据...
数据质量风险监控
ODS层表中的数据来源于OSS上的日志文件，作为源头表，您需要尽早判断此表分区中是否有数据。如果这张表中没有数据，则后续任务运行无意义，需要阻止后续任务运行。进入 数据质量 页面。在 数据开发 页面，单击左上角图标，选择 数据质量。...
前言
既解决了传统数据库容量有限、扩缩容时间长等问题，又提供了分钟级扩容、弹性变配、超高并发等能力，同时提供企业级的高可用及安全特性，HA切换正常切换小于10S，提供数据存储和数据链路加密，满足企业客户的需求。2020年，PolarDB荣获国家...
数据质量风险监控
ODS层表中的数据来源于OSS上的日志文件，作为源头表，您需要尽早判断此表分区中是否有数据。如果这张表中没有数据，则后续任务运行无意义，需要阻止后续任务运行。进入 数据质量 页面。在 数据开发 页面，单击左上角图标，选择 数据质量。...
单点柱状层
在场景编辑器内配置单点柱状层的数据面板时，您还可以使用 空间构建数据源 获取空间地图上单点柱状层数据，具体步骤如下：在图层配置面板中选择 数据 页签，单击面板下方的 数据源类型 下拉框，选择 空间构建数据源。在面板下方的 数据项目...
单点柱状层
在场景编辑器内配置单点柱状层的数据面板时，您还可以使用 空间构建数据源 获取空间地图上单点柱状层数据，具体步骤如下：在图层配置面板中选择 数据 页签，单击面板下方的 数据源类型 下拉框，选择 空间构建数据源。在面板下方的 数据项目...
派生指标
通常，企业的业务活动是复杂多样的，在确定的数据域及业务活动下，我们需要分析多个业务活动在不同时间，不同限定范围的业务状况，因此，建议您使用批量功能，快速生成某类业务活动的多个派生指标。批量创建派生指标，详情请参见 批量创建...
路况层
在场景编辑器内配置路况层的数据面板时，您还可以使用 空间构建数据源 获取空间地图上路况层数据，具体步骤如下：在图层配置面板中选择 数据 页签，单击面板下方的 数据源类型 下拉框，选择 空间构建数据源。在面板下方的 数据项目 下拉...
数据存储
数据分区 云数据库SelectDB所有的数据模型都支持两层的数据分区：第一层是Partition分区，支持Range和List的划分方式，典型场景下按照时间进行Range分区，方便数据查询裁剪和过期清理等。SelectDB支持简单易用的动态分区方式，简化分区管理...
创建逻辑模型：汇总表
数据分层是将相同功能作用的表挂载至统一的数据层，方便您查找使用。汇总表通常挂载于汇总数据层，用于将一个统计粒度（维度或维度组合）及该粒度下的多个派生指标汇总输出，为后续的业务查询，数据分发等提供基础。您也可以根据业务需求，...
引擎功能
数据库内机器学习 Lindorm时序引擎提供开箱即用的数据库内机器学习服务。您可以通过SQL语句直接在数据库内完成整个机器学习流程，挖掘更深的数据价值。使用数据库内机器学习服务的优势主要体现在以下几个方面：简单易用：无需掌握专业的...
IoT区块链Hub 的使用限制
IoT区块链Hub 相关限制 限制项 限制说明 支持的区块链类型 阿里云BaaS-Fabric区块链，Version:1.4。阿里云BaaS-蚂蚁区块链，Version:2.19。BSN-Fabric链，Version：1.4.3。业务链数量限制，管理方创建的业务链最大数量限制为20个。成员数量...
配置学区地图单选框交互
切换散点层内的数据 data/[]，比较复杂，不建议使用此方案。操作步骤 在画布编辑器图层栏内，选中左侧 地图&固定内容 组中的 单选框 组件，右键单击选择 导出到蓝图编辑器。在蓝图编辑器页面，将左侧的 单选框 节点拖至画布中。按照以下...
配置学区地图单选框交互
切换散点层内的数据 data/[]，比较复杂，不建议使用此方案。操作步骤 在画布编辑器图层栏内，选中左侧 地图&固定内容 组中的 单选框 组件，右键单击选择 导出到蓝图编辑器。在蓝图编辑器页面，将左侧的 单选框 节点拖至画布中。按照以下...
创建逻辑模型：应用表
数据分层是将相同功能作用的表挂载至统一的数据层，方便您查找使用。应用表通常挂载于应用数据层，用于将一个统计粒度（维度或维度组合）及该粒度下的多个指标汇总输出，为后续的业务查询，数据分发等提供基础。您也可以根据业务需求，选择...
全增量数据同步
文件层的数据拷贝比通常API层的数据迁移通常能节省50%以上的流量高效性。单个节点迁移速度可达到150MB/s，节点数支持水平扩展，能够满足支持TB、PB级别的数据迁移稳定性。有完善的错误重试机制，实时监控任务速度和进度，支持任务失败报警...
案例演示
单击选择 自定义区域下钻层 子组件，切换到组件的 数据 面板，单击打开 自定义topojson数据接口。登录 DataV.GeoAtlas，选择 层级生成器。在根区域处单击 图标，绑定数据。在弹窗中输入 中国，不勾选 同时添加所有下游节点，单击 确认。...
- 产品推荐
- 这些文档可能帮助您