IoT数据自动化同步至云端解决方案
大数据分析是大数据完成数据价值化的重要手段之一，而进行大数据分析的第一步是让数据成功上云。解决方案 IoT数据自动化同步至云端解决方案主要包括存储原始数据和同步数据至分析系统两部分。IoT设备大量的数据通常以半结构化的形式存储。...
JindoFS实战演示
Flink高效sink写入OSS Flink高效sink写入OSS 2021-06-01 当您需要将流式数据写入OSS，或者需要在线分析数据时，可能会遇到的问题：开源Apache Flink还不支持直接写入OSS、Hadoop OSS SDK写入性能不满足需求。此时您可以使用JindoFS Flink ...
互联网、电商行业离线大数据分析
概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标、销售排名和订单地区分布等业务指标数据。DataV大屏支持可视化动态展示销售数据，触控大屏支持您自助查询数据，极大地提高数据的可读性。应用场景 电商...
创建GreenPlum数据源
背景信息 Greenplum是一款大数据分析引擎，作用于分析、机器学习和AI等领域。其架构主要针对管理大规模分析型数据仓库以及商业智能工作负载而设计。更多详情，请参见 GreenPlum官网。使用限制 Dataphin仅支持超级管理员、数据源管理员、...
基于Delta lake的一站式数据湖构建与分析实战
数据湖作为一个集中化的数据存储仓库，支持的数据类型具有多样性，包括结构化、半结构化以及非结构化的数据，数据来源上包含数据库数据、binglog 增量数据、日志数据以及已有数仓上的存量数据等。数据湖能够将这些不同来源、不同格式的数据...
创建GreenPlum数据源
背景信息 Greenplum是一款大数据分析引擎，作用于分析、机器学习和AI等领域。其架构主要针对管理大规模分析型数据仓库以及商业智能工作负载而设计。更多详情，请参见 GreenPlum官网。使用限制 Dataphin仅支持超级管理员、数据源管理员、...
典型场景
大数据分析平台 对于MaxCompute、Hadoop和Spark中保存的海量数据，可通过采用数据集成服务（DataX）或通过对象存储服务（OSS），快速批量导入到 云原生数据仓库AnalyticDB PostgreSQL版，帮助您实现高性能分析处理和在线数据探索。数据湖...
常见问题
数据湖后端存储使用OSS，用户使用数据湖构建面向大数据分析和机器学习场景可以获得集中式权限管理和统一的元数据视图，更容易对接云上大数据和分析产品。什么情况下我需要使用数据湖构建？在云上有数据分析和机器学习需求，希望构建云上的...
产品优势
协同分析 数据洞察Notebook为大数据分析提供了可视化、交互式的平台。用户可以在Notebook中编辑、执行、查看Spark作业。不同角色的用户可以共享集群资源和Notebook内容，协同合作。数据共享 Databricks数据洞察采用数据湖分析的架构设计，...
通用数据开发
数据分析与处理：完成数据的同步后，可以对MaxCompute中的数据进行加工（MaxCompute SQL、MaxCompute MR）、分析与挖掘（数据分析、数据挖掘）等处理，从而发现其价值。数据提取：分析与处理后的结果数据，需要同步导出至业务系统，以供...
应用场景
阿里云开源大数据平台E-MapReduce（简称EMR）具有广泛的应用场景。本文为您介绍EMR的主要应用场景。数据湖场景 DataLake集群类型提供了数据湖分析场景所需的服务和相关湖格式，包括Hadoop、OSS-HDFS、Hive、Spark、Presto等。通过选择OSS-...
快速接入
通过本文档快速了解如何使用Quick Tracking，让我们动手尝试下吧！业务准备-梳理需求 需求人员需主导整体的需求梳理、指标体系设计和埋点方案设计，此部分建议由Quick Tracking 的分析师团队指导大家进行。...统计 看板概述 分析 分析概述
聚合支付方案
阿里云从业务扩展性、数据流动性、服务高可用三方面入手，通过多款云数据库产品为利楚扫呗制定聚合支付方案，解决利楚扫呗在业务扩展期遇到的数据存储空间不足、读写性能下降以及大数据分析空缺等问题。业务痛点 武汉利楚商务服务有限公司...
即席分析概述
即席分析面向一线业务人员，以表格形式提供拖拽式的表格分析能力，让懂业务的人自助实现数据分析。即席分析只适用于Quick BI专业版的群工作...即席分析中的交互式分析：在即席分析中，可以进行下钻、上卷和展开等操作，进一步查看并分析数据。
我是普通用户
数据导出 进行大量数据分析或提取相关数据时可以使用数据导出功能。数据追踪 由于误操作等原因导致数据不符合预期时，可以通过数据追踪将数据快速恢复到正常状态。测试数据构建 测试数据结构可以在频繁的数据准备过程中确保数据安全、保障...
什么是Quick BI
移动专属和协同 100%组件面向移动端特性定制，和钉钉、企业微信等办公工具全面集成，随时随地的分析数据并和组织成员分享协同。丰富的集成实践 支持嵌入式分析集成、覆盖单租户及多租户模式，拥有生意参谋及钉钉两个千万级用户平台的集成和...
数据指标概述
自定义指标 指标数据管理 指标数据是数据报表分析的数据源，开启产品数据备份后，如果需要进行数据分析，需完成指标数据的统计，更多信息，请参见 什么是指标。您可参考以下步骤，完成指标数据的生产。导入原始定义指标。新增原子词。新增...
2020年
MaxCompute Web控制台支持以STS访问认证，使用RAM角色在Web控制台操作访问MaxCompute项目空间，进行数据分析、数据开发。用户认证 用户规划与管理 2020-11-17 新增Python UDF使用第三方包操作指导。新说明 MaxCompute支持您在Python UDF中...
用户分析
完成以下步骤查看用户分析数据：登录 mPaaS 控制台，选择目标应用后，从左侧导航栏进入 小程序>小程序分析>用户分析 页面。从页面左上方的选择下拉框中，选择目标小程序。选择时间范围，以查看相应时段的统计数据。支持将用户分析数据通过 ...
确定需求
建议您思考下列问题，对后续的数据建模将有巨大的帮助：业务数据是根据什么（维度、统计粒度，简称“粒度”，是维度或维度组合）汇总的，衡量标准是什么？例如，“省份”或者“类目”是维度，订单数是原子指标。基于上个问题，进一步思考...
基于MaxCompute进行大数据BI分析
方案优势 以AnalyticDB MySQL配合Quick BI快速、实时分析数据的核心能力为切入点，引导用户同步业务数据、日志数据至阿里云的分析型数据库。融合阿里云的日志服务的生态，增强用户体验。例如，无缝对接Blink、Elasticsearch、AnalyticDB ...
ANALYZE
不过，数据库所有者可以分析数据库中的所有表，共享目录除外。（对共享目录的限制意味着真正的数据库范围的 ANALYZE 只能由超级用户执行。ANALYZE 将跳过调用用户没有分析权限的任何表。只有被显式选中时才会分析外部表。并非所有外部数据...
多元索引介绍
多元索引（Search Index）基于倒排索引和列式存储，可以解决大数据的多维查询和统计分析难题。当日常业务中有非主键列查询、多列组合查询、模糊查询等多维查询需求以及求最值、统计行数、数据分组等数据分析需求时，您可以将这些属性作为...
应用场景
数据建模：通过数据建模及代码自动化生成功能，以会员为中心，构建完整的会员数据模型，集成会员属性、统计指标等数据。主题服务：通过数仓即席查询功能，面向应用，自动输出会员主题的汇总数据模型，高效完成进一步的会员日报分析、会员...
性能调优
AnalyticDB MySQL版 做为分布式系统，其优势在于利用多机并行的能力，提升海量数据的处理速度，适合大数据量的分析。在某些场景中，查询计算量不是特别大，AnalyticDB MySQL具备分布式开销，反而查询较慢。也有某些场景下，AnalyticDB ...
自治服务（CloudDBA）
详情请参见 什么是数据库自治服务DAS。功能简介 MyBase Redis的自治服务（CloudDBA）主要包含如下功能：实时Top Key统计 实时展示实例中的大Key和热Key信息，同时支持查看4天内的大Key和热Key历史信息。该功能可帮助您掌握Key在内存中的...
常见术语
数据湖分析 数据湖分析就是针对数据湖数据分析的方案。云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、...
性能优化与诊断简介
在RDS SQL Server日常运维中，您可以通过数据库自治服务DAS（Database Autonomy Service）来处理数据库故障、优化性能、提升效率、降低运维成本。DAS是一种基于机器学习和专家经验的云服务，实现数据库自...相关文档 什么是数据库自治服务DAS
可视化概述
您可以根据分析需求选用合适的统计图表类型展示查询和分析结果，并将结果保存到实时刷新的仪表盘中。此外，您还可以将日志服务与第三方可视化工具对接。可视化方式 日志服务支持的可视化方式如下：项目 说明 仪表盘 仪表盘是日志服务提供的...
StarRocks概述
StarRocks兼容MySQL协议，可使用MySQL客户端和常用BI工具对接StarRocks来分析数据。StarRocks采用分布式架构：对数据表进行水平划分并以多副本存储。集群规模可以灵活伸缩，支持10 PB级别的数据分析。支持MPP框架，并行加速计算。支持多...
性能优化与诊断简介
查询治理 通过离线数据分析技术，在每天凌晨1点将全部实例在昨天产生的慢SQL进行统计分析和自动打标，帮助您对慢SQL进行自动分类和划分治理优先级，同时提供治理建议和数据导出功能。SQL洞察和审计 在全量请求和安全审计的基础上，融合了...
缓存分析
说明 缓存分析结果的偏差仅为数据统计偏差，不影响数据库实例的功能。相关文档 当您在Redis控制台使用缓存分析功能时，请参见 离线全量Key分析。相关API API 描述 CreateCacheAnalysisJob 创建缓存分析任务。DescribeCacheAnalysisJob 查询...
慢日志分析
数据库自治服务DAS（Database Autonomy Service）支持慢日志分析功能，会统计并分析数据库中执行时间超过阈值的SQL语句，并提供相应的治理方案，帮助您快速定位并解决数据库性能问题，提高系统的稳定性和可靠性。前提条件 数据库引擎为：...
查看统计图表
SQL任务运行时，日志服务 将执行该查询和分析语句分析数据。源Project/Logstore 显示数据源所在的Project、Logstore。目标 目标Region 目标Project所在地域。目标Project 用于存储SQL分析结果的目标Project名称。目标库 用于存储SQL分析...
高效数据治理实施指南
DataWorks数据治理中心 已根据元数据信息，通过自带的治理经验知识库，对数据平台团队工作空间下的表、任务等资产，按治理维度进行自动化、多维度的统计分析。系统将根据知识库中包含的治理项规则，生成潜在治理问题列表。治理负责人可查看...
什么是Dataphin
资产质量 资源治理 资源治理具备资源统计分析能力，可智能识别当前系统内低价值的数据资产和数据任务，并进行优化提示。您可以在治理工作台中，一站式的进行资源的优化处理，全局把控计算与存储成本，提升系统使用效率。资源治理 资产安全 ...
开发运维建议
PostgreSQL支持的数据类型如下：精确的数字类型、浮点、货币、字符串、字符、字节流、日期、时间、布尔、枚举、几何、网络地址、比特流、文本、UUID、XML、JSON、数组、复合类型、范围类型、对象、行号、大对象、ltree树结构类型、cube多维...
新功能发布记录
管理分类分级模板 管理识别模型 日志导出 新增 DMS支持将操作日志导出至阿里云日志服务（SLS），方便用户在SLS中对DMS的操作日志进行统计分析。导出DMS操作日志到阿里云日志服务 11月 功能名称 变更类型 功能描述 相关文档 数据安全卫士 ...
数据概览
小程序分析功能支持对当前 App 的小程序使用数据进行统计分析。通过数据概览页面，您可以了解单个小程序的历史统计数据（T+1）和实时数据概况。完成以下步骤查看数据概览：登录 mPaaS 控制台，选择目标应用后，从左侧导航栏进入 小程序>小...
成本分析
注意事项 当前仅支持计算和存储的按量付费相关成本分析，且费用数据为用量明细数据（直接按计费公式统计的原价费用），会存在因为精度或者取近似值的缘故使得统计的费用结果和账单真实值有些出入，用量明细获取请参见 用量明细。...
- 产品推荐
- 这些文档可能帮助您