通过 HyperLoglog 实现高性能多维数据透视
按天统计数据 历史统计数据无更新，只有增量。需要定时将统计结果写入并合并至 t_result 结果表中。insert into t_result select t1.day,t2.brand,t1.groupid,t3.tag1,t3.tag2,t3.tag3,.count(1)as cnt,array_agg(uid)as uids,hll_add_agg...
2020年
2020年8月 修复具有NaN数值的栅格数据在计算统计信息时会导致结果不正确的问题。2020年8月 V1.1.2 内核小版本 类别 名称 描述 相关文档 发布时间 新增 临时表 支持临时表文件写本地存储，大幅提升临时表操作的性能。无 2020年7月 触发事件 ...
数据总览
为实时统计的数据 总表数 为当前租户本地域下，所有MaxCompute表总个数。此数据为离线统计，有T+1的延迟。存储量 为当前租户本地域下，所有表的逻辑存储大小总和，包含调度任务的临时文件、删除表后尚未释放的存储空间。此数据为离线统计，...
计费说明-全托管
敏捷研发版定价 数据处理单元规格 调度资源 定价（CNY/月）200 8C32G 4,000 数据处理单元统计规则如下，仅统计已发布、周期调度的任务或表，不统计手动任务。数据处理单元总量=数据同步任务数+计算任务（离线）数+数据集成任务数 各版本...
请求分析
数据库自治服务DAS（Database Autonomy Service）提供请求分析功能，包括查看全局慢日志和SQL全量请求分析。前提条件 数据库实例需要满足以下...您可 导出 全量请求统计 的数据，单次最多可 导出 1000万行数据。相关文档 慢日志分析 全量请求
2022年
本文介绍 PolarDB PostgreSQL版（兼容Oracle）的产品功能动态，分别为内核小版本、控制台、时空数据库和API的更新说明。说明 您可通过如下语句查看 PolarDB PostgreSQL版（兼容Oracle）的内核小版本的版本号：show polar_version;2022年12...
如何统计HBase的表行数
本文介绍统计云数据库HBase表行数的方法。根据云数据库HBase表的服务类型使用不同的统计方法。如果云数据库HBase表为增强版，统计HBase表行数的方法具体请参见 统计表行数的方法。如果云数据库HBase表为标准版，可以通过两种方式精确的统计...
权限自查建议
数据流动 数据下载统计 统计各个项目的数据下载请求任务，分析规划可下载数据的项目。您可以通过MaxCompute元数据服务 Information_Schema 提供的TUNNELS_HISTORY视图进行分析统计。权限调整建议 权限调整过程中，您可以参考如下建议。调整...
实例画像
说明 数据库自治服务DAS从2022年12月5日开始逐步支持实例画像功能。功能说明 实例画像功能主要从数据库实例的 资源、会话、访问、请求、风险 和 负载 6个维度进行诊断，并结合数据库实例是否开启相关的自治功能给出综合评分与引导建议。...
实例画像
数据库自治服务DAS从2022年12月5日开始逐步支持实例画像功能。功能说明 实例画像功能主要从数据库实例的 资源、会话、访问、请求、风险 和 负载 6个维度进行诊断，并结合数据库实例是否开启相关的自治功能给出综合评分与引导建议。资源：...
数仓分层
基于阿里巴巴OneData方法论最佳实践，在阿里巴巴的数据体系中，建议将数据仓库分为三层：数据引入层（ODS，Operational Data Store）、数据公共层（CDM，Common Dimensions Model）和数据应用层（ADS，Application Data Store）。数据仓库...
实例画像
说明 数据库自治服务DAS从2022年12月5日开始逐步支持实例画像功能。功能说明 实例画像功能主要从数据库实例的 资源、会话、访问、请求、风险 和 负载 6个维度进行诊断，并结合数据库实例是否开启相关的自治功能给出综合评分与引导建议。...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
数据集市
背景信息 数据集市是对某个业务分类制定细化的业务主题，并通过主题域，基于不同分析视角对目标集市中的数据进行主题划分，最终面向业务应用统计分析数据。例如，运营平台数据集市。创建数据集市 进入 数据集市。登录 DataWorks控制台，...
2022年
ST_Contour 2022年12月 支持以MultiPoint的方式对栅格数据进行自定义权重的统计分析操作。ST_Statistics 2022年12月 新增ST_Resample轨迹重采样功能。ST_Resample 2022年12月 新增ST_Density轨迹密度统计功能。ST_Density 2022年12月 新增...
创建行为统计标签
统计方式 统计方式根据统计对象数据类型，支持不同统计方式。包括 计数（count）、取和（sum）、取平均（avg）、取最大值（max）、取最小值（min）。值类型 完成 统计对象 和 统计方式 的配置后，将自动识别标签的值类型。包括 长整型 和 ...
pg_profile
pg_profile 是 PolarDB PostgreSQL版 支持的一款第三方插件，能够统计目标数据库中资源密集型活动，来分析和优化数据库。此扩展基于PostgreSQL的统计视图和部分社区插件，完全由PL/pgSQL编写，无需任何外部库或软件。配合 pg_cron 插件可以...
2022年
实例运行状态概览 数据膨胀、倾斜与索引统计 查询分析 2022年06月 功能 功能描述 相关文档 美国（弗吉尼亚）地域上线Serverless模式 AnalyticDB PostgreSQL版 于2022年6月29日在美国（弗吉尼亚）地域可用区A上线Serverless模式实例。...
概览信息
对数据资产的全局及增量数据进行统计和展示。本文介绍如何查看及搜索数据资产。前提条件 已在运营模块中公开数据表、API和指标等数据资产。背景信息 在运营公开一条数据，资产首页刷新数量实时+1。在运营隐藏一条数据，资产首页刷新数量...
概览信息
对数据资产的全局及增量数据进行统计和展示。本文介绍如何查看及搜索数据资产。前提条件 已在运营模块中公开数据表、API和指标等数据资产。背景信息 在运营公开一条数据，资产首页刷新数量实时+1。在运营隐藏一条数据，资产首页刷新数量...
写入数据
此时TSDB写入成功或失败时会按下述响应内容返回成功的数据点数和失败的数据点数方便业务端进行统计 名称 数据类型 描述 success Integer 写入成功的数据点数 failed Integer 未能成功写入的数据点数 示例如下：{"failed":0,"success":20 } ...
功能更新动态（2022年）
新增数据标准、智能运维的用量统计 2022年10月25日 华北2（北京）查看资源使用情况 2022年10月27日 华东1（杭州）2022年11月01日 华南1（深圳）2022年11月03日 华东2（上海）数据源 新增达梦数据源。新增数据源删除依赖校验。Kafka数据源...
文档更新动态（2022年）
新增说明 数据服务权限说明 2022年03月 数据服务权限说明 更新时间 特性 描述 类别 产品文档 2022年03月03日 Basic项目支持开启机器学习开关 增加开启机器学习开关后的相关描述。更新说明 创建项目 2022年03月03日 Dev-Prod项目支持开启...
创建数仓分层
数仓分层保障了数据在进入数据仓库之前都经过清洗和过滤，使原始数据不再杂乱无章，优化了查询过程，有效的提高了数据获取、统计和分析的效率。同时，数仓分层实现了各种不同维度数据的关联，使多维分析更加方便，为从多角度、多层次地数据...
案例介绍
id,sum(amount)as order_amt_30d from fct_crt_ord_di where ds>='20210901' and ds根据上述代码为您介绍如何定义统计周期、统计粒度、统计时效、原子指标、业务限定和派生指标：统计周期 统计周期用于约束指标的来源数据的时间跨度，即该...
Cost-based SQL诊断引擎
上图是SQL诊断优化引擎的核心架构，它实现一套独立于数据库之外的优化器，包括自适应的统计信息收集以及执行计划的代价计算，以此为基础弥补WHAT-IF内核能力缺失，自适应的统计信息收集弥补统计信息缺失。其具体的工作过程如下：SQL解析与...
数据库高级特性管理
您可以在RDS管理控制台查看或修改数据库中的各类属性，也可以手动收缩数据库事务日志和更新数据库统计信息，以优化数据库性能和提高查询效率。前提条件 已创建数据库。创建方法，请参见 创建数据库。实例所在地域必须在：华东1（杭州）、...
报表中心
报表中心功能支持使用多种报表类型展示数据库审计的分析结果。支持的报表类型包括塞班斯报表、综合分析报告、性能分析报表等，您可以根据业务需要使用对应的报表。本文介绍支持的报表类型，以及如何通过报表中心查看、订阅、导出报表和管理...
数据表-数据概况
功能说明 在数据表详情的数据概况标签页，基于对元数据及存储数据的统计，为您提供了数据表更加详细的指标信息，比如表存储大小、表文件总数、DDL最后更新时间、数据最后更新时间、访问次数、分区存储大小，分区文件数，分区最后更新时间等...
API概览
GetDataArchiveCount 获取数据归档工单量统计 获取数据归档工单量统计，包括：归档成功的工单数目，归档失败的工单数目，正在进行归档的工单数目，归档工单的总数目。SQL任务 API 标题 API概述 ListDBTaskSQLJob 获取SQL任务列表 获取SQL...
数据统计
群数据概览界面包括：群成员总数：累计的群成员总数 群总数：累计的群数量 支持按群主、按群查看统计数据 按群主统计 群关键指标包括：新增人数：筛选条件下新增的群成员人数，该指标未去重（同一个用户加多个群都会统计在内）并且同一个人...
08创建指标
本文介绍如何通过已经设置的指标属性信息来创建指标【指标：按月统计购买基金的消费金额（gmjj_xxje_m）】，数据资源平台自动生成规范的指标命名和指标编码；保证指标的唯一性和命名的可读性。前提条件 已创建工作组“信息中心（xxzx）”。...
名词解释
背景信息 时间序列数据库 TSDB：英文全称为 Time Series Database，提供高效存取时序数据和统计分析功能的数据管理系统。时序数据（Time Series Data）：基于稳定频率持续产生的一系列指标监测数据。例如，监测某城市的空气质量时，每秒...
07创建时间修饰
背景信息 指标=度量+业务修饰+时间修饰，创建指标前，需要拆解业务需求中的度量和修饰，比如指标（按月统计购买基金的消费金额）=度量（消费金额）+业务修饰（购买基金）+时间修饰（按月统计）下面以创建”按月统计（m）“这个时间修饰为例...
OSS Foreign Table使用技巧
收集统计信息 OSS Foreign Table的数据实际存储在OSS上，AnalyticDB PostgreSQL版 默认不会自动收集数据的统计信息。在复杂场景下的查询SQL（例如多张表关联操作），如果不存在统计信息或统计信息过时，优化器可能会生成低效的查询计划。...
文档更新动态（2023年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成配置优化 新增Apache Doris数据源的离线集成。...
2020年
新建或绑定标签 根据标签筛选实例 查看实例绑定的标签 解绑或删除标签 2020年9月 支持从自建TiDB同步到云原生数据仓库AnalyticDB MySQL，帮助您轻松实现数据的流转，将企业数据集中分析。从自建TiDB同步至云原生数据仓库AnalyticDB MySQL ...
会话管理
会话管理为您提供查看租户会话、进行会话统计和死锁检测的服务。应用与数据库的连接被...会话统计：按用户、访问来源、数据库统计会话信息。死锁检测：诊断系统内该集群的租户中死锁信息。相关内容的详细操作，请参见自治服务的 会话管理。
使用SDK示例代码消费PolarDB-X 1.0订阅数据
SDK客户端每隔一定时间会统计并显示消费数据的信息，包括数据发送和接受时数据总数、数据总量、每秒请求数接收RPS等。表 1.消费数据的统计信息 参数 说明 outCounts SDK客户端所消费的数据总数。outBytes SDK客户端所消费的数据总量，单位...
- 产品推荐
- 这些文档可能帮助您