方案背景
大数据计算场景：推荐系统，订单类业务等 实时数据计算场景：监控系统，电商数字大屏等 样例场景 某电商公司为了完成电商运营数据的分析和展示，使用表格存储统一存储电商数据，通过Spark的流批处理离线聚合或实时统计电商数据，最终在...
快速体验
首次进入 SQL查询，您可在 欢迎页 单击 前往分析>MaxCompute，即可生成用于统计阿里电商数据集（commerce_ali_e_commerce）。更多公共数据集，您可前往 数据分析>SQL查询，在 公共数据 目录中查看。选择SQL执行 数据源。在临时文件编辑页面...
2022年
新说明 ANALYZE命令用于收集表数据统计信息来获取元数据，为优化查询性能提供帮助。ANALYZE 2022-11-15 新增新版控制台。新说明 MaxCompute新版控制台将提供全新的项目管理、Quota（配额）管理交互，同时集成全新功能：弹性预留CU、自定义...
构建SaaS平台的事件总线
为了帮助商家高效地利用聚石塔电商数据，在聚石塔SaaS平台上孵化出了大量的ISVs，这些ISVs为商家开发了一些应用，帮助商家消化电商数据。如上图所示，链路中引入 事件总线EventBridge 可以加速ISVs创新，ISVs可以通过 事件总线EventBridge ...
DataWorks快速入门指引
DataWorks基于MaxCompute、Hologres、EMR、...60分钟 零售电商数据建模 DataWorks、MaxCompute 以电商场景为例，进行数据建模、分析。60分钟 DataWorks模块使用说明 为您汇总DataWorks核心子模块，便于您了解各个子模块的主要功能。15分钟
准备工作
说明 在表格存储中通过控制台或者SDK创建存储电商数据的原始订单表OrderSource，OrderSource表有两个主键UserId（用户ID）和OrderId（订单ID）和两个属性列price（价格）和timestamp（订单时间）。DataV数据可视化 登录DataV的用户名和密码...
大数据AI公共数据集分析
单击左侧导航栏的 大数据体验>公共数据集，单击 阿里电商数据集，进入 阿里电商数据集 详情页。单击右上角的 开始分析，选择您需要体验的引擎类型。本教程使用的是 MaxCompute。在新打开的 DataWorks SQL查询 页面中，会创建一个新的SQL...
ETL工作流快速体验
案例相关文档：零售电商数据建模。视频个性化推荐（协同过滤）DataWorks MaxCompute PAI 数据开发 以社交平台的”猜你喜欢“和”详情页相关推荐“为例，通过在DataStudio 数据开发 模块中调用 阿里云PAI 中的协同过滤算法 etrec，实现视频...
长周期指标的计算优化方案
实验背景 电子商务公司在电商数据仓库和商业分析场景中，经常需要计算最近N天的访客数、购买用户数、老客数等类似的指标。这些指标需要根据一段时间内的累积数据进行计算。通常，这些指标的计算方式为从日志明细表中查询数据进行计算。例如...
日志报表
1小时（相对）大批量修改SQL的列表，包括：最早执行时间 最近执行时间 PolarDB-X 实例ID 数据库 表格 执行次数 平均更新行数 平均时长（秒）SQL 修改数据统计时间 日志报表页面的所有图表都是基于不同时间段（默认为过去1小时内的）的数据...
查看调度资源大盘
数据统计范围 关于调度资源大盘的数据统计频率和数据统计范围说明如下：数据统计频率：每分钟统计1次。针对分配资源，取当前时间点的快照值；针对消耗资源，取过去1分钟内的峰值（即分钟内峰值）。每次页面刷新触发页面数据更新。数据统计...
归档统计
归档统计只作数据统计，不作预警使用。支持的归档数据源类型有分钟统计/无 Key、分钟统计/多 Key、常用服务指标。常用服务指标目前仅支持总量的归档。操作步骤 登录实时监控产品控制台，从左侧导航栏选择 自定义监控>新建>新建监控产品。在...
报表中心
等保报表：本报表参考《中国国家信息安全保护检验标准》完成设计，针对国家等级保护的检测要求进行审计数据统计梳理。旨在帮助数据库管理人员、审计人员对各种异常行为和违规操作及时发现，快速定位分析，为整体信息安全管理提供决策依据。...
列存索引
列存索引可以增强宽表中海量数据的分析计算能力，主要适用于车联网与物联网的设备信息统计、电商领域的数据分析、物流行业的订单统计等场景。本文介绍列存索引的基础用法和高阶用法，帮助您快速上手并进一步掌握列存索引。前提条件 已开通...
测试数据样例
新闻行业 bhv表：行为数据 item表：物品数据 user表：用户数据 内容行业 bhv表：行为数据 item表：物品数据 user表：用户数据 电商行业 bhv表：行为数据 item表：物品数据 user表：用户数据
时间周期
时间周期是用来明确数据统计的时间范围或者时间窗口，例如近1天，近1自然周。用于在统计派生指标时，限定业务统计的时间范围。本文为您介绍如何创建时间周期。背景信息 时间周期与原子指标、修饰词，共同构成一个派生指标，用于体现企业某...
查看异常统计
如果您需要查看租户粒度下的全局异常数据统计概况，则单击 图标进行切换查看。实时实例页面展示当前时间的异常统计信息排行。离线实例页面默认展示运行日期为当天的统计数据。同时，您可以选择查看最近7天内的统计数据。鼠标悬停至 图标，...
查看异常统计
如果您需要查看租户粒度下的全局异常数据统计概况，则单击 图标进行切换查看。实时实例页面展示当前时间的异常统计信息排行。离线实例页面默认展示运行日期为当天的统计数据。同时，您可以选择查看最近7天内的统计数据。鼠标悬停至 图标，...
功能简介
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。API开发 支持数据服务API。支持创建、编辑和测试API，支持的API类型包括...
功能简介
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。通用资源 提供了自定义函数和函数资源的能力，帮助用户在数据开发等过程中...
应用场景
精准营销 该场景通过实时的数据统计，监测不同渠道用户的增长、活跃、留存状况，让企业快速分析出投资回报率。提高营销效果数据时效性，便于改进产品体验和优化营销方案，提高整体收益。该场景可实现：实时多源数据同步 支持多业务数据源，...
探查数据集
单击 或，查看 高价值数据 和 统计数据。可选，单击复选框，选择不同的字段。可选，单击，选择当前字段的排序方式。可选，单击，在当前字段中筛选出需要探查的具体数据。可以选择多个字段，分别设置筛选条件。可选，单击，修改当前列的名称...
统一服务
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。API开发 支持数据服务API、三方API、数据上报API、和空间服务API。支持创建...
库表结构优化
说明 预期优化收益是基于历史数据统计的预估值，非实时统计的准确值，仅供参考。具体操作指引 当优化类型为冷热数据优化和索引优化时，用户可以对当前优化建议采取 一键应用 操作。说明 一键应用，表示同意采纳该优化建议。一键应用 后相应...
公共规范
公共字段定义规范 数据统计日期的分区字段按以下标准：按天分区：ds(YYYYMMDD)。按小时分区：hh(00~23)。按分钟：mi(00~59)。is_{业务}：表示布尔型数据字段。以 Y 和 N 表示，不允许出现空值域。原则上不需要冗余分区字段。数据冗余 一个...
功能简介
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。API开发 支持数据服务API、三方API、数据上报API、空间服务API。支持创建、...
统计功能介绍
一、功能效果 网站管理者通过统计功能查看了解网站使用期间的数据，更好的进行针对性优化或推广。二、使用教程 统计功能包括：网站概况、渠道统计、栏目统计、产品统计、文章统计。1.网站概况 1.1 点击网站概况可以查看该网站在选择的时间...
pg_statistic
目录 pg_statistic 存储有关数据库内容的统计数据。其中的项由ANALYZE创建，查询规划器会使用这些数据来进行查询规划。所有的统计数据天然就是近似的，即使它刚刚被更新。通常对于数据表中一个已经被 ANALYZE 过的列，在本目录中会存在一个...
支持的云服务
移动数据分析Quick A+Digital Analytics 移动数据分析Quick A+Digital Analytics是阿里云推出的一款移动App数据统计分析产品，为开发者提供一站式数据化运营服务。当移动数据分析自带的基础分析报表不能满足App开发者的个性化需求时，App...
查看资源用量大盘
资源用量大盘为您展示当前租户下已使用的数据处理单元总量和按任务类型分别统计的消耗趋势以及按项目粒度统计的消耗增量排行，帮助您了解数据处理单元的消耗情况以及时调整资源规格配置。本文为您介绍如何查看资源用量大盘。前提条件 需...
质量规则模板类型
本文为您介绍数据质量对象的模板类型。数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是...稳定性 实时统计值检测 实时数据为指标值或可统计数据时，用于判断数据是否正确 可选择和固定值或者历史进行对比。
质量规则模板类型
本文为您介绍数据质量对象的模板类型。数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是...稳定性 实时统计值检测 实时数据为指标值或可统计数据时，用于判断数据是否正确 可选择和固定值或者历史进行对比。
基本概念
数据探查 内置算法：内置多种数据统计分析算法，根据不同字段类型采用不同的计算统计规则。数据标准 数据标准：是对含义相同但字段名称不同的数据进行统一规范管理的数据准则，数据标准可定义逻辑表的命名规范、字段的取值范围、度量单位等...
逆向建模：物理表反向建模
应用层基于实际应用需求，获取公共层加工整合后的数据，面向具体应用场景或指定产品进行的个性化数据统计。创建的模型可归属于 公共层 或 应用层，不同层级归属需单独完成如下准备：公共层：已创建数据域，用于确定模型所统计的业务数据...
修饰词
修饰词是基于选择的数据域创建的，是对数据域中的数据不同维度的修饰，用来限定统计数据的业务范围。例如，统计上海区域生鲜门店的销售金额，上海区域和生鲜门店就是对业务范围的限定修饰。前提条件 已创建数据域，用于确定修饰词所属的...
2022年
2022年3月 修复栅格对部分数据统计时失败的问题。2022年3月 V1.1.20 内核小版本 类别 名称 描述 相关文档 发布时间 新增 支持表的闪回删除 新增闪回删除功能，可以快速恢复已经删除的表，以及查看和清理回收站。闪回删除 2022年1月 PX多级...
全景视角
背景信息 为提高不同使用场景下的数据治理效率和质量，DataWorks为您提供以下视角：数据管理视角：在数据资产管理、数据安全加固、数据权限管理等数据管理场景下，建议您使用数据管理视角，关注查看数据管理过程中，表的统计数据、安全权限...
功能特性
数据安全中心 功能集 功能 功能描述 参考文档 数据分类分级 数据资产接入 支持自动发现并接入阿里云上的数据资产。支持通过一键连接或账密连接方式连接数据库，一键接入支持：RDS、PolarDB、PolarDB-X（原DRDS）、Redis、OSS、TableStore、...
事件中心
在数据库日常运维中，您可以通过查看数据库实例中计划执行、正在执行和已执行完成的性能事件（例如异常事件、优化事件、弹性伸缩事件等），及时且全面地了解数据库的性能问题及相关的运维操作。本文介绍如何通过数据库自治服务DAS的性能...
数据服务系统配置
运维监控统计数据可帮助您查看最近某段时间的API运维数据，以便您更好的调整API，合理优化资源。本文为您介绍如何自定义运维监控配置。权限说明 超级管理员支持修改系统配置。数据服务系统配置入口 在Dataphin首页，单击顶部菜单栏 服务。...
- 产品推荐
- 这些文档可能帮助您