功能简介
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”地传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
DataWorks模块使用说明
使用流程概览：参考文档：数据集成概述 数据建模与开发 子模块：数据建模 功能说明：数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行...
客户案例
MaxCompute已被广泛应用于各大领域处理云上大数据，帮助众多企业解决了海量数据分析问题，同时降低企业运维成本，企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息，请参见 行业客户案例...
受众与核心能力
产品定位 DataWorks致力于为数据开发者、数据分析师、数据资产管理者，打造一个具备开放自主开发与全栈数据研发能力的一站式、标准化、可视化、透明化的智能大数据全生命周期云研发平台。DataWorks赋予用户仅通过单一平台，即可实现数据...
资源消耗统计
可观测监控 Prometheus 版 提供了资源消耗统计的功能，便于您快速了解Prometheus实例各自的指标数据上报分布情况，本文介绍如何查看资源消耗统计。功能入口 登录 Prometheus控制台。在左侧导航栏单击 监控列表，进入可观测监控 Prometheus ...
资源消耗统计
可观测监控 Prometheus 版 提供了资源消耗统计的功能，便于您快速了解Prometheus实例各自的指标数据上报分布情况，本文介绍如何查看资源消耗统计。功能入口 登录 ARMS控制台。在左侧导航栏选择 Prometheus监控>资源消耗。在资源消耗统计...
探查数据集
本文为您介绍可视分析创作间中数据集的探查过程。前提条件 已通过上传或者连接数据库完成数据集的创建。操作步骤 输入账户和密码，登录 可视分析创作间。在左侧导航栏，单击分析图标，进入 分析 页面。选择需要探查的数据集，单击 探索，...
JindoFS介绍和使用
JindoFS是基于阿里云对象存储OSS，为开源大数据生态构建的Hadoop兼容文件系统（Hadoop Compatible File System，HCFS）。JindoFS提供兼容对象存储的纯客户端模式（SDK）和缓存模式（Cache），以支持与优化Hadoop和Spark生态大数据计算对OSS...
用户访问
用户访问展示用户使用用户洞察和用户营销模块的关键指标统计数据，以及用户下载受众的明细记录。用户访问统计 单击页面右上角，选择工作空间>工作空间>用户访问>用户访问统计，页面如下图所示。页面展示空间成员使用用户洞察和用户营销模块...
使用AWR
通过AWR工具，您可以从数据库的动态视图等统计信息中生成某个时间段的统计分析报告以及数据库性能报告。PolarDB除了提供 查看视图 中的实时视图和函数外，还提供对这些实时视图采集后保存的历史数据，通过这些数据可以生成类似Oracle的AWR...
增强分析（卡片和报告）
数据分析提供卡片和报告功能，您无需下载数据，即可快速完成数据可视化分析与报告创作，轻松打造个性化可视化作品，讲述数据故事、表达数据观点。本文为您介绍如何生成卡片并创作报告。计费说明 卡片及报告自2023年12月13日开始收费，收费...
数据仓库研发规范概述
在大数据时代，规范地进行数据资产管理已成为推动互联网、大数据、人工智能和实体经济深度融合的必要条件。贴近业务属性、兼顾研发各阶段要点的研发规范，可以切实提高研发效率，保障数据研发工作有条不紊地运作。而不完善的研发流程，会...
全景视角
背景信息 为提高不同使用场景下的数据治理效率和质量，DataWorks为您提供以下视角：数据管理视角：在数据资产管理、数据安全加固、数据权限管理等数据管理场景下，建议您使用数据管理视角，关注查看数据管理过程中，表的统计数据、安全权限...
计费数据
HTTPDNS服务会保留您的历史解析量统计数据，供您查阅和对账。操作步骤 登录 EMAS管理控制台。查找您的项目，单击项目，进入EMAS 概览 页。在顶部导航栏，选择 平台服务。在左侧导航栏选择 HTTPDNS>计费相关。查看总解析量统计数据及占比图...
实验介绍
数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品：一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集，...
概述
数据内容安全管理 安全中心提供的数据分级分类、敏感数据识别、数据访问审计、数据源可追溯等功能，在处理业务流程的过程中，能够快速及时识别存在安全隐患的数据，保障了数据内容的安全可靠，详情请参见 数据保护伞。安全诊断的最佳实践 ...
MaxFrame概述
您可以用更熟悉、高效、便捷的方式利用MaxCompute的海量计算资源及数据进行大规模数据处理、可视化数据探索分析以及科学计算、ML/AI开发等工作。本文为您介绍MaxFrame背景信息、功能介绍及使用场景。版本说明 当前MaxCompute MaxFrame功能...
快速体验
数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品：一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集、...
冷热分层
背景信息 在海量大数据场景下，随着业务和数据量的不断增长，性能和成本的权衡成为大数据系统设计面临的关键挑战。Delta Lake是新型数据湖方案，推出了数据流入、数据组织管理、数据查询和数据流出等特性，同时提供了数据的ACID和CRUD操作...
创建逻辑模型：汇总表
汇总表用于组织一个数据域下相同时间周期、相同维度的多个派生指标的统计数据，为后续的业务查询，OLAP分析，数据分发等提供基础。本文为您介绍如何创建汇总表。前提条件 已创建数据分层。数据分层是将相同功能作用的表挂载至统一的数据层...
Delta Lake概述
Delta Lake以数据为中心，围绕数据流走向（数据从流入数据湖、数据组织管理和数据查询到流出数据湖）推出了一系列功能特性，协助您搭配第三方上下游工具，搭建快捷、易用和安全的数据湖。背景信息 通常的数据湖方案是选取大数据存储引擎...
推送记录
单击日推送统计数据右侧的 通道统计数据，查看各通道统计数据详情。说明 通道统计分为推送自有通道和厂商通道。阿里云在线通道：设备在线时优先走自有在线通道。阿里云离线通道：设备不在线，且不满足厂商通道的条件时，则尝试走移动推送离...
创建逻辑模型：应用表
应用表是面向具体业务场景时，用于组织相同时间周期、相同维度的多个原子指标、派生指标或统计粒度的统计数据，为后续的业务查询，OLAP分析，数据分发等提供基础。本文为您介绍如何创建应用表。前提条件 已创建数据分层。数据分层是将相同...
添加图表
PCT50：升序排列后排在50%位置的数据 PCT75：升序排列后排在75%位置的数据 PCT90：升序排列后排在90%位置的数据 PCT99：升序排列后排在99%位置的数据 统计维度 支持为指标配置统计维度，允许添加多个，选择后将按照所选维度对趋势图分组...
新建统计周期
统计周期即统计数据的时间范围，例如最近7天、最近30天等。本文为您介绍如何新建统计周期。前提条件 仅支持 智能研发版。若需使用，请升级当前版本。升级版本，请参见 升级。完成计算引擎类型设置，详情请参见 设置Dataphin实例的计算引擎...
数据概览
概览页面从推送数、推送成功数、到达数、打开数和忽略数五个维度对消息推送情况进行统计分析，并支持通过平台、版本、推送渠道、推送类型等条件筛选生成多种形式的统计报表，统计结果数据支持导出。前置条件 已基于 mPaaS 框架完成消息推送...
新建统计周期
统计周期即统计数据的时间范围，例如最近7天、最近30天等。本文为您介绍如何新建统计周期。前提条件 仅支持 智能研发版。若需使用，当前租户还需开通智能研发模块。完成计算引擎类型设置，详情请参见 设置计算引擎为Hadoop 设置Dataphin...
数据迁移
本文为您介绍数据迁移的最佳实践，包含将其他业务平台的业务数据或日志数据迁移至MaxCompute，或将MaxCompute的数据迁移至其它业务平台。背景信息 传统关系型数据库不适合处理海量数据，如果您的数据存放在传统的关系型数据库且数据量庞大...
事件中心
在数据库日常运维中，您可以通过查看数据库实例中计划执行、正在执行和已执行完成的性能事件（例如异常事件、优化事件、弹性伸缩事件等），及时且全面地了解数据库的性能问题及相关的运维操作。本文介绍如何通过数据库自治服务DAS的性能...
仪表盘
借助于阿里云ARMS Prometheus监控服务和Grafana的指标存储和展示能力，云消息队列 RocketMQ 版 提供可实时进行数据统计的仪表盘功能。该功能可帮助您一站式、全方位、多维度地统计和观测指标，进而快速了解业务的运行状态。本文介绍仪表盘...
自定义统计
在上述两类自定义统计功能中，ARMS都提供了以下几个维度的统计数据（以均值统计为例）：统计详情 在统计详情折线图中可以看到指定时间段内该事件的均值数据及样本量趋势。假设统计的是某个模块的耗时数据，那么在统计详情中，可以看到对应...
什么是MaxCompute
MaxCompute是适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效...
外部表概述
但这两种方法都有不足之处：第一种方法需要在MaxCompute系统外部做一次中转，如果OSS数据量太大，还需要考虑如何并发来加速，无法充分利用MaxCompute的大规模计算能力。第二种方法通常需要申请UDF网络访问权限，还需要开发者自己控制作业...
存储概览
首日开通无统计数据，需要等待第二天数据产出后可查看统计信息。功能说明 元数据分析 Location分析 元数据分析 资源总计 总存储量及月/日变化：元数据管理下的表的总存储量（仅包括OSS类型存储，不包括hdfs存储）。总表数量及月/日变化：...
Sidecar 监控
您可以在 Sidecar 监控页面查看当前环境中所有 Sidecar 状态统计数据和 Sidecar 版本的各项监控指标数据。Sidecar 状态统计 在 Sidecar 监控 页面，您可以在页面的右上角选择或自定义时间范围，默认范围是最近 5 分钟。统计时间范围设置...
数据处理
数据导入后，GDB Automl提供数据解析器对数据进行解析，可以自动配置解析数据源，解析器（支持CSV、ARFF、XLS、XLSX、ORC等多种数据格式的解析）。在 数据解析器 页面，选择导入数据对应的 解析器、分离、列标题 和 选项。单击 解析 以生成...
推送概览
查看 推送统计 数据 说明 推送统计数据包含控制台推送及API推送的所有数据。参数 说明 发送数 推送被服务端正常受理并下发推送的数量。到达数 手机收到消息或通知ack总数。打开数 打开数 删除数 用户成功接收通知并已经手动清除的数量。...
数据洞察
DataWorks数据洞察是指通过深度数据分析和解读来获取深刻的数据理解和发现，它支持数据探索和可视化。您可以通过数据洞察了解数据分布，创建数据卡片，并组合成数据报告。此外，数据洞察结果能够通过长图形式的报告进一步分享。该功能利用...
快速开始
DataV-Card可视分析创作间是一款面向高频数据处理的业务人员、零代码的数据可视分析产品，提供简单、直观、易于使用的数据准备、洞察发现、可视化分析工具，通过具象、生动、有趣的方式快速理解数据，让更多用户能便捷高效地利用数据可视化...
ANALYZE
ANALYZE命令用于收集表数据统计信息来获取元数据，为优化查询性能提供帮助。命令格式 非分区表。analyze table<table_name>compute statistics for columns[([,<col_name>.])];分区表。analyze table<table_name>partition()compute ...
- 产品推荐
- 这些文档可能帮助您