产品架构
数据管理DMS的产品架构分为三层：数据源、数据运营与管理和商业应用。数据源 关系型数据库：MySQL、SQL Server、PostgreSQL、PolarDB MySQL版...商业应用：数据化运维DataOps 容灾多活 T+1全量数据快照 数据集中处理 可视化报表 数据多维分析
数据查询
数据预览 支持不同云计算资源数据的快速预览，可为开发人员和数据应用人员提供全面直观的数据呈现。支持MaxCompute、RDS MySQL、PostgreSQL、AnalyticDB PostgreSQL、Hologres多种云计算资源进行物理表数据预览，可快速对各类数据资源下的...
数据服务：低成本快速发布API
功能概述 作为数据仓库与上层应用系统间的“桥梁”，DataWorks数据服务为企业搭建统一的服务总线，帮助企业统一创建及管理对内、对外的API服务，解决数仓、数据库与数据应用间的“最后一公里”，加速数据的流动和共享。数据服务支持通过零...
添加宜搭数据源
宜搭是阿里巴巴自研的低代码应用构建平台，您可以通过可视化拖拽的方式，快速完成数据应用的搭建。本文为您介绍在DataV中添加和使用宜搭数据源的方法，以及相关参数配置说明。前提条件 已通过钉钉登录 宜搭控制台 创建一个宜搭应用数据表单...
功能简介
数据预览 支持不同云计算资源数据的快速预览，可为开发人员和数据应用人员提供全面直观的数据呈现。支持MaxCompute、RDS MySQL、PostgreSQL、AnalyticDB PostgreSQL、Hologres 多种云计算资源进行物理表数据预览，可快速对各类数据资源下的...
快速体验
说明 本次实验数据仅作为阿里云大数据开发治理平台DataWorks数据应用实操使用，所有数据均为人工Mock数据。技术选型 数据建模：大数据开发治理平台 DataWorks数据建模（可选），标准版及以上版本可使用，需要单独购买。原始数据存储：云...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
应用场景
大数据场景：海量数据存储与分析 Lindorm支持海量数据的低成本存储、快速批量导入和实时访问，具备高效的增量及全量数据通道，可轻松与Spark、MaxCompute等大数据平台集成，完成数据的大规模离线分析。优势 低成本：高压缩比，数据冷热分离...
什么是EMR on ACK
您需要将其大数据任务提交至EMR集群。EMR on ACK 您需要先完成ACK集群的安装部署。当ACK集群准备就绪后，EMR将基于ACK的资源安装部署大数据服务组件，并在容器内运行。EMR on ACK优势 优势 描述 节省成本 您无需为大数据服务单独购买ACK...
数据迁移
本文为您介绍数据迁移的最佳实践，包含将其他业务平台的业务数据或日志数据迁移至MaxCompute，或将...MaxCompute处理业务数据和日志数据后，可以通过Quick BI快速地以可视化方式展现数据处理结果，详情请参见 基于MaxCompute的大数据BI分析。
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
应用防护页面看不到应用或资源？
AHAS刚接入应用之后，应用防护页面各个应用数据显示为空，这是因为应用没有实时流量就不会有数据。此时您可以通过PTS发起少量压测流量或手动访问，例如通过浏览器访问应用即可看到请求，控制台中将显示对应的流量数据。在应用防护页面中，...
互联网、电商行业离线大数据分析
概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标、销售排名和订单地区分布等业务指标数据。DataV大屏支持可视化动态展示销售数据，触控大屏支持您自助查询数据，极大地提高数据的可读性。应用场景 电商...
架构
订阅者按照数据在发布者上被提交的顺序应用数据，这样任意单一订阅中的发布的事务一致性才能得到保证。逻辑复制被构建在一种类似于物理流复制的架构上。它由“walsender”和“apply”进程实现。walsender 进程开始对 WAL 的逻辑解码并且...
数据库分析
将应用数据上报至 可观测链路 OpenTelemetry 版 后，可观测链路 OpenTelemetry 版 即可开始监控应用，您可以在 数据库分析 页面查看数据库分析数据，从而了解数据库的调用详情。前提条件 已将应用数据上报至 可观测链路 OpenTelemetry 版，...
导出应用
应用信息 当前导入、导出应用数据时，包含的应用信息如下所示：应用名、应用描述信息、应用所处集群信息、应用实例数 应用程序包、应用镜像 CPU、内存请求与限制值 启动命令、启动参数、环境变量配置 就绪探针、存活探针、启动后脚本、停止...
设置启动命令
应用托管概述 设置镜像部署应用的启动命令 设置JAR包部署应用的启动命令 设置WAR包部署应用的启动命令 设置ZIP包部署应用的启动命令 设置镜像部署应用的启动命令 以创建Java应用为例，在 应用部署配置 配置向导页面选择 应用部署方式 为 ...
资产质量概述
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
透明数据加密概述
经过数据库身份验证的应用和用户可以继续透明地访问应用数据（不需要更改应用代码或配置），而尝试读取表空间文件中的敏感数据的OS用户以及尝试读取磁盘或备份信息的未知用户将不允许访问明文数据。透明：数据在使用过程中无感知，数据在...
应用拓扑
将应用数据上报至 可观测链路 OpenTelemetry 版 后，可观测链路 OpenTelemetry 版 即可开始监控应用，您可以在 应用拓扑 页面了解应用内部服务的调用关系。前提条件 已将应用数据上报至 可观测链路 OpenTelemetry 版，具体操作，请参见 接...
Spark应用性能诊断
应用场景 Spark应用性能诊断主要适用于以下场景：数据集性能分析：使用Spark处理大规模数据时，需要对数据集进行性能分析。使用性能诊断工具可以快速定位性能瓶颈（例如：内存峰值、Spill等），提高数据处理效率。大规模应用负载均衡：...
远程调试
开启应用内存优化（G1）：默认开启，开启后可以针对多CPU与大容量内存场景，降低GC时间，适用于GC需要优化、大数据等场景。开启应用启动加速（Quickstart）：只有 Java环境 为 Dragonwell 11 时可以设置。选中 开启应用启动加速...
数据标准概述
Dataphin支持创建并管理数据标准，以保障数据的标准化生产与管理，节约数据应用和处理的成本。背景信息 数据标准目标是为 业务、技术 和 管理 提供服务和支持。数据标准管理的过程就是对数据以及数据的属性信息的标准化定义和应用的过程。...
轨迹层
数据分级：根据数据中的 value 字段值大小划分（自然分割）成2~7个数据大小级别，解决 value 值相差太大导致的渲染问题。轨迹粗细（从细到粗）：单击右侧的 或 图标，添加或删除一个类型。单击 或 图标配置多个轨迹粗细类型的排列样式。...
通过DataV展示数据
通过DataV的SQL语句功能，处理数据，并将结果展示在大屏上。添加DataV数据源。参考 配置数据库白名单，根据您数据库的网络类型，将DataV的白名单添加到您的RDS数据库中。登录 DataV控制台。选择 我的数据>添加数据。填写RDS实例的相关信息...
数据标准概述
Dataphin支持创建并管理数据标准，以保障数据的标准化生产与管理，节约数据应用和处理的成本。背景信息 数据标准目标是为 业务、技术 和 管理 提供服务和支持。数据标准管理的过程就是对数据以及数据的属性信息的标准化定义和应用的过程。...
创建逻辑模型：应用表
应用表通常挂载于应用数据层，用于将一个统计粒度（维度或维度组合）及该粒度下的多个指标汇总输出，为后续的业务查询，数据分发等提供基础。您也可以根据业务需求，选择将应用表挂载至其他数据层。创建数据分层，详情请参见 创建数仓分层...
功能特性
创建二级索引 时序引擎 降采样查询 降采样查询是在时间维度的聚合查询，是时序数据应用场景常用的降低采样率的查询。降采样查询 连续查询 在时序应用的场景下，对于依照时间推进顺序写入的实时数据每隔一段固定时间，就能够按照一定的查询...
水波图
使用示例 将 水波图 组件拖入编排页面画布中时，其数据源分为 固定值 和 动态值。当数据源为 固定值 时，您可以参考以下示例添加或删除数据源。{"min":0,"max":10000,"value":5639 } 当数据源为 动态值 时，需要绑定一个类型为Structure...
创建轻量数据库服务
轻量应用数据库服务和轻量应用服务器需在同一地域，才能通过内网访问。操作步骤 登录 轻量应用服务器管理控制台。在左侧导航栏，单击 数据库服务。在页面左上角，单击 创建数据库服务。在 轻量应用服务器 页面，完成数据库服务的配置。具体...
创建和管理轻应用
④ 应用数据 用于统计当前版本轻应用的页面编排、服务编排、结构对象、依赖数据源的数量。单击数字跳转到对应的列表页。⑤ Serverless资源用量 显示当前版本轻应用的Serverless资源用量，包括：本月CPU资源使用量、本月Memory资源使用量、...
划分数据域
数据域是联系较为紧密的数据主题的集合，是业务对象高度概括的概念，目的是便于管理和应用数据。通常，您需要阅读各源系统的设计文档、数据字典和数据模型，研究逆向导出的物理数据模型。进而，可以进行跨源的主题域合并，跨源梳理出整个...
依赖服务
将应用数据上报至 可观测链路 OpenTelemetry 版 后，可观测链路 OpenTelemetry 版 即可开始监控应用，您可以在 依赖服务 页面了解应用依赖服务的详情，包括外部调用、数据库调用和消息队列的详细信息。前提条件 已将应用数据上报至 可观测...
仪表盘
使用示例 将 仪表盘 组件拖入编排页面画布中时，其数据源分为 固定值 和 动态值。当数据源为 固定值 时，您可以参考以下示例添加或删除数据源。{"value":64,"range":[0,25,50,75,100]} 当数据源为 动态值 时，需要绑定一个类型为Structure...
饼图
使用示例 将 饼图 组件拖入编排页面画布中时，其数据源分为 固定值 和 动态值。当数据源为 固定值 时，您可以参考以下示例添加或删除数据源。当数据源为 动态值 时，需要绑定一个类型为List类型的变量，其中Structure为 饼图 组件中每项...
词云
使用示例 将 词云 组件拖入编排页面画布中时，其数据源分为 固定值 和 动态值。当数据源为 固定值 时，您可以参考以下示例添加或删除数据源。当数据源为 动态值 时，需要绑定一个类型为List类型的变量，其中Structure为 词云 组件中每项...
漏斗图
使用示例 将 漏斗图 组件拖入编排页面画布中时，其数据源分为 固定值 和 动态值 当数据源为 固定值 时，您可以参考以下示例添加或删除数据源。当数据源为 动态值 时，需要绑定一个类型为List类型的变量，其中Structure为组件中每项数据对应...
时间轴
使用示例 将 时间轴 组件拖入编排页面画布中时，其数据源分为 固定值 和 动态值。当数据源为 固定值 时，可以进行添加、编辑和删除操作。当数据源为 动态值 时，需要绑定一个类型为List类型的变量，其中Structure为时间轴组件中每项数据...
环形图
使用示例 将 环形图 组件拖入编排页面画布中时，其数据源分为 固定值 和 动态值。当数据源为 固定值 时，您可以参考以下示例添加或删除数据源。[{"type":"睡觉","value":30 },{"type":"晨练","value":10 },{"type":"上班","value":60 }]当...
- 产品推荐
- 这些文档可能帮助您