数据分析整体趋势
这些云原生数据仓库技术分别起源于数据库和大数据，提供标准SQL接口和ACID保证，底层存储通过Share Everything或Share Nothing实现资源池化和横向扩展能力。资源隔离，数据共享是目前业务应用对云原生数据仓库的普遍需求。综上所述，数据...
功能特性
EMR on ECS 功能集 功能 功能描述 参考文档 集群管理 创建集群 您可以轻松构建和运行Hadoop、Spark、Hive、Presto等开源大数据框架，以进行大规模数据处理和分析等操作。创建集群 释放集群 在完成EMR集群任务后及时释放集群，可以释放资源...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、...，帮助用户构建和持续优化的大数据体系架构...
基本概念
数据集可以直接定义，也可以通过交互大盘控件和报警通知间接定义。数据集维度 数据集在创建时用于聚合的键（Key），类似于数据库中GroupBy的列名，或者多维联机分析处理中的属性。数据集将根据设置的维度对实时数据进行相应聚合操作。数据...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
关系型数据库系统权限策略参考
本策略由关系型数据库定义和使用，您不能修改或删除，请勿将其授权给服务关联角色之外的RAM身份。查看策略详情 AliyunServiceRolePolicyForRDSProxyOnEcs 关系型数据库使用服务关联角色 AliyunServiceRoleForRDSProxyOnEcs 来访问您在其他...
关系型数据库系统权限策略参考
本策略由关系型数据库定义和使用，您不能修改或删除，请勿将其授权给服务关联角色之外的RAM身份。查看策略详情 AliyunServiceRolePolicyForRDSProxyOnEcs 关系型数据库使用服务关联角色 AliyunServiceRoleForRDSProxyOnEcs 来访问您在其他...
关系型数据库系统权限策略参考
本策略由关系型数据库定义和使用，您不能修改或删除，请勿将其授权给服务关联角色之外的RAM身份。查看策略详情 AliyunServiceRolePolicyForRDSProxyOnEcs 关系型数据库使用服务关联角色 AliyunServiceRoleForRDSProxyOnEcs 来访问您在其他...
关系型数据库系统权限策略参考
本策略由关系型数据库定义和使用，您不能修改或删除，请勿将其授权给服务关联角色之外的RAM身份。查看策略详情 AliyunServiceRolePolicyForRDSProxyOnEcs 关系型数据库使用服务关联角色 AliyunServiceRoleForRDSProxyOnEcs 来访问您在其他...
关系型数据库系统权限策略参考
本策略由关系型数据库定义和使用，您不能修改或删除，请勿将其授权给服务关联角色之外的RAM身份。查看策略详情 AliyunServiceRolePolicyForRDSProxyOnEcs 关系型数据库使用服务关联角色 AliyunServiceRoleForRDSProxyOnEcs 来访问您在其他...
关系型数据库系统权限策略参考
本策略由关系型数据库定义和使用，您不能修改或删除，请勿将其授权给服务关联角色之外的RAM身份。查看策略详情 AliyunServiceRolePolicyForRDSProxyOnEcs 关系型数据库使用服务关联角色 AliyunServiceRoleForRDSProxyOnEcs 来访问您在其他...
ClickHouse数据源
是 无 fetchSize 该配置项定义了插件和数据库服务器端每次批量数据获取条数，该值决定了数据同步系统和服务器端的网络交互次数，能够提升数据抽取性能。说明 fetchSize值过大会造成数据同步进程OOM，需要根据ClickHouse负载情况递增。否 1,...
概述
当您使用 PolarDB MySQL版 或社区MySQL标准存储引擎创建表时，该表由表定义和相关数据组成。创建Federated表时，表定义是相同的，但是数据的物理存储是在远程服务器上处理的。Federated表由两个元素组成：具有数据库表的远程 PolarDB ...
数据开发概述
数据开发包括编码研发和规范建模。编码研发用于构建计算任务，例如创建SQL代码任务、Shell任务、Python任务、MR任务和Spark任务；规范建模用于构建逻辑化的数据模型。前提条件 若需进行实时开发，需已购买实时研发增值服务。详情请参见 ...
存储空间分析
您可以在 AnalyticDB for MySQL 空间总览页面查看集群和表的总数据量、冷数据量、热数据量、索引数据量、分区数量、节点的磁盘使用率等指标。查看集群级别的数据量 通过 空间总览 可以查看当前集群的 总数据量、热数据量、冷数据量、以及 ...
数据开发概述
数据开发包括编码研发和规范建模。编码研发用于构建计算任务，例如创建SQL代码任务、Shell任务、Python任务、MR任务和Spark任务；规范建模用于构建逻辑化的数据模型。前提条件 若需进行实时开发，需已购买实时研发增值服务并且当前租户已...
A100使用指南
通过系统监控引擎可以定制不同的审计规则，例如：定义敏感数据和不审计语句等规则。A100实例可以有效的评估数据库潜在风险，实时监控数据库用户的访问操作行为。支持审计的数据库类型 数据库分类 数据库 版本 阿里云原生数据库 RDS MySQL 5...
规范定义最佳实践
基于Dataphin建模理论和业务需求，明确并规范定义统计指标，以便设计出易于业务使用的数据仓库。背景信息 规范定义是指以维度建模作为理论基础，构建总线矩阵，划分并定义主题域、业务过程、维度、原子指标、统计周期和派生指标。在您开始...
规范定义最佳实践
基于Dataphin建模理论和业务需求，明确并规范定义统计指标，以便设计出易于业务使用的数据仓库。背景信息 规范定义是指以维度建模作为理论基础，构建总线矩阵，划分并定义主题域、业务过程、维度、原子指标、统计周期和派生指标。在您开始...
逻辑结构说明
业务对象 人们观察事物的角度，是指一种视角，是确定事物的多方位、多角度、多层次的条件和概念。业务活动 业务过程即企业的业务活动事件，通常为不可拆分的事件，是一个或者多个业务对象在某个时间或时间段，为了达成某种目的所进行的活动...
功能简介
字段标准设计 数据元管理：提供对数据元的标准定义和统一管理，通过分析业务流程，抽象关键业务对象、业务对象属性，配置数据元的类型、长度、质量校验函数和引用数据字典，为逻辑表标准化设计及数据治理过程中的质量监控提供规则依据；...
功能简介
字段标准设计 数据元管理：提供对数据元的标准定义和统一管理，通过分析业务流程，抽象关键业务对象、业务对象属性，配置数据元的类型、长度、质量校验函数和引用数据字典，为逻辑表标准化设计及数据治理过程中的质量监控提供规则依据；...
管理数据定义资源
本文介绍在选择数据定义资源后，对应窗口的功能。前提条件 已登录DataV-TwinFabric控制台。已进入精修模式下的场景编辑器页面。上传数据定义 在 资源管理 窗口右上角，单击 导入>数据定义。在资源管理窗口，查看已导入的资源。搜索数据定义...
数据标准
字段标准设计 数据元管理：提供对数据元的标准定义和统一管理，通过分析业务流程，抽象关键业务对象、业务对象属性，配置数据元的类型、长度、质量校验函数和引用数据字典，为逻辑表标准化设计及数据治理过程中的质量监控提供规则依据；...
数据治理中心概述
在数据治理中，健康分体系依托不同元数据，建设了“存储、计算、研发、质量和安全”等五大健康度领域，并构建“存储健康分、计算健康分、研发健康分、质量健康分和安全健康分”五大健康分指标。健康分的取值范围为0至100，分值越大表示数据...
常见问题
项目（Project）是MaxCompute的基本组织单元，类似于传统数据库的Database或Schema的概念，是进行多用户隔离和访问控制的主要边界。项目中包含多个对象，例如表（Table）、资源（Resource）、函数（Function）和实例（Instance）等。一个...
概述
本文介绍DMS数据分析的基本概念、设计理念和主要应用场景。背景信息 DMS数据分析提供典型的数据集、仪表盘和大屏模型，在仪表盘或大屏中提供丰富的可视化图表和组件来展示数据。您可以将数据库中的表或单条SQL查询结果作为数据集，在仪表盘...
使用ETL分析实时订单
说明 时态表，也称动态表，是指基于表的（参数化）视图概念，根据时间记录数据变更历史，分为版本表（可显示数据的历史版本）和普通表（仅显示数据的最新版本）。时态JOIN要求流表定义时间属性，右表要有主键；如右表是维表，则您所设置的 ...
基本概念
栅格数据通常有两种类型的栅格数据：专题数据和影像数据。专题数据：每个栅格像元的值可以是一个测量值或分类值，如污染物浓度、降雨量、土地的权属类型或植被类型等。影像数据：又称遥感影像或遥感图像（Remote Sensing Image），是通过...
创建数仓分层
或存放概念模型的维度定义，通过定义维度，确定维度主键，添加维度属性，关联不同维度等操作，构建整个企业的一致性数据分析维表，帮助您降低数据计算口径和算法不统一的风险。对于创建的分层，您可以选择 平铺展示 或 层级结构展示，如下...
数仓构建流程
基本概念 在正式学习本教程之前，您需要了解以下基本概念：数据板块：数据板块定义了数据仓库的多种命名空间，是一种系统级的概念对象，是比主题域更高维度的业务划分方法，适用于庞大的业务系统。当数据的业务含义存在较大差异时，您可以...
术语表
DDL Data Definition Language，数据定义语言。例如创建表、创建视图等操作。更多DDL语法信息，请参见 DDL语句。DML Data Manipulation Language，数据操作语言。例如INSERT、UPDATE、DELETE操作。更多DML语法信息，请参见 DML操作。F ...
基本概念
本文为您介绍DataV-TwinFabric孪生仿真平台文档中涉及的一些基本名词概念。运行模式 在TwinFabric数字孪生构建工具中，包括 编辑态 和 运行态两 种运行模式。编辑态对应TwinFabric编辑器，该模式用于数字孪生应用的开发、编辑和构建过程，...
落标监控概述
本文为您介绍落标监控的基本概念和监控逻辑。背景信息 标准创建完成后，需要指定其关联的资产对象才能被应用。Dataphin通过定义标准属性和资产对象元数据字段的匹配关系，实现标准和资产对象的映射关联。落标映射是对资产对象进行落标监控...
数据开发概述
DataWorks数据开发（DataStudio）模块用于定义周期调度任务的开发及调度属性，与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您...
基本概念
本文介绍在开发过程中涉及到的一些概念。时空几何 HBase Ganos中所称的时空几何，其范畴包含以下几方面：时空几何对象。矢量数据，如点、线、面状要素。在矢量数据基础上结合时间属性，组成的时空数据或时空轨迹数据。针对时空几何对象的...
落标监控概述
本文为您介绍落标监控的基本概念和监控逻辑。背景信息 标准创建完成后，需要指定其关联的资产对象才能被应用。Dataphin通过定义标准属性和资产对象元数据字段的匹配关系，实现标准和资产对象的映射关联。落标映射是对资产对象进行落标监控...
基本概念
Lindorm Ganos中所称的时空几何，其范畴包含以下几方面：时空几何对象 矢量数据，如点、线、面状要素 在矢量数据基础上结合时间属性，组成的时空数据（或时空轨迹数据）针对时空几何对象的相关操作，如时空关系判断 时空索引 Lindorm Ganos...
基本概念
本文主要介绍时空几何的一些基本概念。时空几何 DLA Ganos中所称的时空几何，其范畴包含以下几方面：时空几何对象。矢量数据，如点、线、面状要素。在矢量数据基础上结合时间属性，组成的时空数据（或时空轨迹数据）。针对时空几何对象的...
数据库管理
每个Database都有若干时序数据表，结合 名词解释 的描述，我们可以对时序引擎的数据层级归纳为下图所示：如果一个Lindorm时序引擎实例计划包含不相关的项目数据，在很大程度上，彼此之间是隔离的。那么在这种情况下，建议将它们放到单独的...
- 产品推荐
- 这些文档可能帮助您