查看调度资源大盘
数据统计范围 关于调度资源大盘的数据统计频率和数据统计范围说明如下：数据统计频率：每分钟统计1次。针对分配资源，取当前时间点的快照值；针对消耗资源，取过去1分钟内的峰值（即分钟内峰值）。每次页面刷新触发页面数据更新。数据统计...
产品优势
支持防护常见的结构化数据、非结构化数据和大数据产品，例如对象存储OSS、云数据库RDS、MaxCompute等。智能化 运用大数据和机器学习能力，通过智能化的算法，对敏感数据和高风险活动，例如数据异常访问和潜在的泄露风险进行有效识别和监控...
IoT数据自动化同步至云端解决方案
物联网专注于物物相连，大数据专注于数据的价值化，云计算则为大数据和物联网提供计算资源等服务支持。大数据是物联网体系的重要组成部分。物联网的体系结构包括设备、网络、平台、分析、应用和安全，其中分析部分的主要内容为大数据分析。...
产品概述
简化运维：一套运维体系，一套集群管理，全面覆盖大数据和在线等多种业务。优化体验：支持ECS和ACK两套IaaS资源模型，您可以无缝切换。深度集成：完全采用云原生数据湖架构，计算使用阿里云ACK，计算资源可以无限扩展。EMR Serverless ...
常见问题
数据湖后端存储使用OSS，用户使用数据湖构建面向大数据分析和机器学习场景可以获得集中式权限管理和统一的元数据视图，更容易对接云上大数据和分析产品。什么情况下我需要使用数据湖构建？在云上有数据分析和机器学习需求，希望构建云上的...
探查数据集
单击 或，查看 高价值数据 和 统计数据。可选，单击复选框，选择不同的字段。可选，单击，选择当前字段的排序方式。可选，单击，在当前字段中筛选出需要探查的具体数据。可以选择多个字段，分别设置筛选条件。可选，单击，修改当前列的名称...
快速开始
浏览数据详情，设置分析范围 序号 参数 说明 1 数据集统计指标 通过查看 高价值数据 和 统计数据，快速定位数据侧重点，快捷分析数据。2 数据详情 通过设置 排序条件 和 筛选条件，查看相关的数据详情。3 智能卡片生成 通过选择 主题字段，...
名词解释
背景信息 时间序列数据库 TSDB：英文全称为 Time Series Database，提供高效存取时序数据和统计分析功能的数据管理系统。时序数据（Time Series Data）：基于稳定频率持续产生的一系列指标监测数据。例如，监测某城市的空气质量时，每秒...
事件中心
在 事件中心 页，单击 事件和建议 页签，查看选定时间范围内各类事件的统计数据和趋势图。说明 选择时间范围时，查询结束时间需晚于查询开始时间，且查询开始时间和查询结束时间的间隔不能超过7天。在 异常事件 页签，查看异常事件的统计...
API概览
Key分析 API 标题 API概述 DescribeHotBigKeys 实时获取当前热Key和大Key 调用DescribeHotBigKeys接口，实时获取当前内存中的热Key和大Key。DescribeTopHotKeys 获取排名前100的热Key 调用DescribeTopHotKeys接口，获取一段时间内排名前100...
获取自动SQL优化事件的统计数据
调用GetInstanceSqlOptimizeStatistic接口，获取指定时间段内自动SQL优化任务的统计数据，包括任务总数和最大收益等。接口说明 使用该接口需满足以下前提条件：使用阿里云或 DAS 的 SDK 时，建议使用最新版本。使用 SDK 调用 DAS 服务时，...
2022年
05-26 DeleteStopGateway 2022年4月 引擎 功能名称 功能描述 发布时间 相关文档 RDS MySQL、RDS PostgreSQL、Redis、PolarDB MySQL版 事件中心 新增事件中心功能，可以查看数据库实例异常事件、优化事件和弹性伸缩事件的明细以及统计信息，...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、...，帮助用户构建和持续优化的大数据体系架构...
互联网、电商行业离线大数据分析
概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标、销售排名和订单地区分布等业务指标数据。DataV大屏支持可视化动态展示销售数据，触控大屏支持您自助查询数据，极大地提高数据的可读性。应用场景 电商...
实时同步任务延迟解决方案
但同步速度可能无法反映当前同步任务消费MySQL源端Binlog的实际速度，因为当事务或者变更涉及的库表没有包含在同步任务的配置中，同步任务会将这部分数据在读取过后过滤掉，也不计入对同步速度和数据量统计。如果确认是大事务或者临时的...
管理预置指标表
本文介绍如何查看预置指标表、开启统计指标数据和实例化API。前提条件 已完成产品数据备份。具体操作，请参见 数据备份。计费说明 开启预置指标表统计相关指标数据，会消耗数据处理单元（CU）。具体内容，请参见 数据服务计费说明。查看...
自媒体：易撰
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，...通过 PolarDB-X 的高并发写能力和PolarDB的高性能读能力，最终完美解决了我们资讯数据入库和大范围查询的业务痛点。—— 长沙营智技术总监刘涛
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
数据标准
数据是由特定的环境产生的，这些环境因素包括生产者、时间、系统等，从而造成了同一个语义的数据，有...说明 目前使用DDM进行数据建模可以进行逻辑建模和物理建模，但物理建模仅支持MaxCompute和Hive两种大数据引擎，不支持自定义数据源类型。
典型场景
大数据分析平台 对于MaxCompute、Hadoop和Spark中保存的海量数据，可通过采用数据集成服务（DataX）或通过对象存储服务（OSS），快速批量导入到 云原生数据仓库AnalyticDB PostgreSQL版，帮助您实现高性能分析处理和在线数据探索。数据湖...
概览信息
对数据资产的全局及增量数据进行统计和展示。本文介绍如何查看及搜索数据资产。前提条件 已在运营模块中公开数据表、API和指标等数据资产。背景信息 在运营公开一条数据，资产首页刷新数量实时+1。在运营隐藏一条数据，资产首页刷新数量...
概览信息
对数据资产的全局及增量数据进行统计和展示。本文介绍如何查看及搜索数据资产。前提条件 已在运营模块中公开数据表、API和指标等数据资产。背景信息 在运营公开一条数据，资产首页刷新数量实时+1。在运营隐藏一条数据，资产首页刷新数量...
标签资产市场概述
标签统计：标签统计支持以条形图或柱状图的方式查看标签的 统计信息 和 数据更新时间。说明 标签数据类型为数值型，同时未配置码表或枚举值，且标签值的个数>10时，系统将通过直方图方式展示标签的统计信息。实时标签不支持查看标签统计。...
MapReduce
海量数据挖掘：非结构化数据、时空数据和图像数据挖掘。机器学习：监督学习、无监督学习和分类算法（例如决策树、SVM）。自然语言处理：基于大数据的训练和预测。基于语料库构建单词同现矩阵，频繁项集数据挖掘、重复文档检测等。广告推荐...
常见Latency（时延）事件的处理建议
本文向您介绍常见Latency事件超过阈值时间的原因及处理建议，您可参考本文了解并处理对应的时延问题。背景信息 原生Redis在2.8.13版引入时延监控（Latency...相关文档 设置实例参数 发现并处理大Key和热Key 实时Top Key统计 清除数据 扩容实例
使用全局临时表
全局临时表支持手动进行vacuum 和analyze，用于清理垃圾数据和收集统计信息。示例 create global temp table gtt1(a int primary key,b text);创建全局临时表gtt1，缺省on commit delete rows，即当前事务提交时删除表中所有数据。create ...
使用全局临时表
全局临时表支持手动进行vacuum 和analyze，用于清理垃圾数据和收集统计信息。示例 create global temp table gtt1(a int primary key,b text);创建全局临时表gtt1，缺省on commit delete rows，即当前事务提交时删除表中所有数据。create ...
Query级别诊断结果
AnalyticDB MySQL版 的SQL诊断功能可以对SQL查询的Query、Stage和算子（Operator）级别的信息分别进行统计，再在统计信息的基础上进行诊断并提供调优建议。本文介绍如何查看和分析Query级别诊断结果。诊断结果类型 说明 查看Query级别诊断...
客户案例
基于金融云计算平台以及 OceanBase 的海量存储，网商银行拥有处理高并发金融交易、海量大数据和弹性扩容的能力，可以利用互联网和大数据的优势，给更多小微企业提供金融服务。唐家才 网商银行 CTO“网商银行选择 OceanBase 三地五中心部署...
字段分析
峰度 统计学概念，表示数据分布的集中程度。偏度 统计学概念，表示数据的倾斜程度。数值分布直方图 将数值分布划分为10个区间，统计其的近似直方图。单击 数值分布直方图 最右侧的，可以将该时序图添加到仪表盘。新建仪表盘请参见 创建仪表...
JindoFS实战演示
视频发布时间 描述 Fluid+JindoFS对OSS上的数据进行训练加速 Fluid+JindoFS对OSS上的数据进行训练加速 2021-07-06 Fluid是一个开源的Kubernetes原生的分布式数据集编排和加速引擎，主要服务于云原生场景下的数据密集型应用，例如大数据应用...
Delta连接器
执行优化后，Delta会按文件粒度统计各个字段的最大和最小值，该统计信息用于直接过滤数据文件。Trino的Delta连接器可以读取到这些统计信息。对于使用OPTIMIZE和ZORDER BY命令优化过的Delta表，在Z-Order列设置合适时，Trino的查询速度最大...
功能简介
添加数据的同时支持各类型空间数据的元信息自动解析，支持按空间对平台所有空间数据进行统一检索、统计和管理。数据管理 支持添加单文件、多文件、数据库等多种形态，矢量、栅格、倾斜摄影等多种类型数据，同时可通过上传文件和基于OSS共享...
空间数据（邀测中）
添加数据的同时支持各类型空间数据的元信息自动解析，支持按空间对平台所有空间数据进行统一检索、统计和管理。数据管理 支持添加单文件、多文件、数据库等多种形态，矢量、栅格、倾斜摄影等多种类型数据，同时可通过上传文件和基于OSS共享...
发展历程
深度参与和推动全球大数据领域标准化建设 MaxCompute代表阿里巴巴计算平台，成为国际TPC（Transaction Processing Performance Council）委员会大数据评测标准BigBench的委员会委员，是中国担任此国际性能标准化测试组织委员的唯一企业。...
概述
在过去几年，数据驱动的智能应用已经逐渐从基于简单的数据分析和统计转型为基于机器学习和深度学习的特征和模型应用。转型的速度远远超出预期，部分原因是机器学习和人工智能方面的技术突破。深度神经网络在图像分析和自然语言处理等学科中...
行为模型学习配置
智能分析是指数据库审计系统可以学习用户的数据库操作习惯，通过对用户操作所涉及的IP、客户端操作工具等信息进行统计分析，实现对异常行为的告警，可以帮助您发现数据库异常行为。本文介绍了在云盾数据库审计系统中，如何添加行为模型学习...
数仓构建流程
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目...
公共规范
将出现大量空值和零值的统计汇总表，依据其空值和零值分布状况可以做适当的水平和垂直切分，以减少存储和下游的扫描数据量。空值处理原则 汇总类指标的空值：空值处理，填充为零，当前MaxCompute基于列存储的压缩技术不会由于填充大量空值...
什么是EMR Serverless StarRocks
无需人工干预，就可以通过统计信息合理估算执行成本，生成更优的执行计划，大大提高了AdHoc和ETL场景的数据分析效率。联邦查询 StarRocks支持使用外表的方式进行联邦查询，当前可以支持Hive、MySQL、Elasticsearch、Iceberg和Hudi类型的...
- 产品推荐
- 这些文档可能帮助您