互联网、电商行业离线大数据分析
通过阿里云MaxCompute、云数据库RDS MySQL、DataWorks等产品，可以实现互联网、电商网站的离线数据分析，且支持通过DataV大屏展示分析后的业务指标数据。概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标...
E-MapReduce弹性低成本离线大数据分析
大数据是一项涉及不同业务和技术领域的技术和工具的集合，海量离线数据分析可以应用于多种商业系统环境，例如，电商海量日志分析、用户行为画像分析、科研行业的海量离线计算分析任务等场景。离线大数据分析概述 主流的三大分布式计算框架...
文件元数据离线分析
HDFS支持通过命令行下载整个fsimage文件（xml形式）到本地，以便离线分析元数据信息，而JindoFS无需下载元数据信息至本地。上传文件系统元数据至OSS 使用Jindo命令行工具上传命名空间的元数据至OSS，命令格式如下。jindo jfs-dumpMetadata...
文件元数据离线分析
HDFS支持通过命令行下载整个fsimage文件（xml形式）到本地，以便离线分析元数据信息，而JindoFS无需下载元数据信息至本地。上传文件系统元数据至OSS 使用Jindo命令行工具上传命名空间的元数据至OSS，命令格式如下。jindo jfs-dumpMetadata...
文件元数据离线分析
HDFS支持通过命令行下载整个fsimage文件（xml形式）到本地，以便离线分析元数据信息，而JindoFS无需下载元数据信息至本地。上传文件系统元数据至OSS 使用Jindo命令行工具上传命名空间的元数据至OSS，命令格式如下。jindo jfs-dumpMetadata...
文件元数据离线分析
HDFS支持通过命令行下载整个fsimage文件（xml形式）到本地，以便离线分析元数据信息，而JindoFS无需下载元数据信息至本地。上传文件系统元数据至OSS 使用Jindo命令行工具上传命名空间的元数据至OSS，命令格式如下。jindo jfs-dumpMetadata...
文件元数据离线分析
HDFS支持通过命令行下载整个fsimage文件（xml形式）到本地，以便离线分析元数据信息，而JindoFS无需下载元数据信息至本地。上传文件系统元数据至OSS 使用Jindo命令行工具上传命名空间的元数据至OSS，命令格式如下。jindo jfs-dumpMetadata...
文件元数据离线分析
HDFS支持通过命令行下载整个fsimage文件（xml形式）到本地，以便离线分析元数据信息，而JindoFS无需下载元数据信息至本地。上传文件系统元数据至OSS 使用Jindo命令行工具上传命名空间的元数据至OSS，命令格式如下。jindo jfs-dumpMetadata...
文件元数据离线分析
HDFS支持通过命令行下载整个fsimage文件（xml形式）到本地，以便离线分析元数据信息，而JindoFS无需下载元数据信息至本地。上传文件系统元数据至OSS 使用Jindo命令行工具上传命名空间的元数据至OSS，命令格式如下。jindo jfs-dumpMetadata...
文件元数据离线分析
HDFS支持通过命令行下载整个fsimage文件（xml形式）到本地，以便离线分析元数据信息，而JindoFS无需下载元数据信息至本地。上传文件系统元数据至OSS 使用Jindo命令行工具上传命名空间的元数据至OSS，命令格式如下。jindo jfs-dumpMetadata...
某手游开发公司在离线一体分析方案
方案亮点：PB级数据量、同时支持在线和离线数据分析。业务挑战 通过对游戏服的用户行为日志进行收集、存储和分析，计算玩家留存率、LTV、...通过和数据湖DLA Spark的组合，完美解决了同时支持实时ETL以及离线分析等需求，把各种需求形成闭环。
选型配置说明
集群类型 场景介绍 核心组件 DataLake 云原生数据湖场景，提供Hive和Spark计算引擎，适用于数据湖场景和离线数据分析等情况，支持多种数据湖格式如DeltaLake、Hudi和Iceberg。HDFS、YARN、Hive、Spark、Presto、Impala、JindoData、...
2023年
本文为您介绍公开数据集信息，并指导您如何通过MaxComputeSQL分析连接查询并分析数据。公开数据集概述 2023-08-01 新增作业运行常见问题 新说明 本文为您介绍MaxCompute作业运行过程中的常见问题。作业运行常见问题 2023-08-01 新增Github...
功能特性
查询治理 慢日志分析 统计并分析数据库实例中执行时间超过阈值的SQL语句，并提供相应的治理方案。慢日志 锁分析 查看、分析数据库实例最近一次死锁。锁分析 自动SQL限流 自动提取SQL特征，通过关键词对问题SQL进行限流。自动SQL限流 自动...
基于GitHub公开事件数据集的离线实时一体化实践
本文为您介绍如何基于GitHub实时事件数据通过MaxCompute构建离线数仓、通过Flink和Hologres构建实时数仓，然后通过Hologres和MaxCompute分别进行实时与离线数据分析，从而实现实时离线一体化解决方案。背景信息 随着社会数字化发展，企业对...
性能优化与诊断简介
锁分析 查看和分析数据库最近一次发生的死锁。容量评估 查看容量评估建议、性能容量情况、存储容量的使用情况、剩余可用时间。该功能还能通过机器学习和容量算法，预测未来存储空间的使用情况供您参考。空间分析 查看数据库实例的空间使用...
Github实时数据同步与分析
最终效果如下：（可选）历史离线数据分析 实时数仓Hologres与大数据计算服务MaxCompute深度融合，可以组成一体化的大数据查询与分析架构。在MaxCompute公共数据集中，存储了历史GitHub全量数据。如果想要做更长时间的数据分析，有两种方式...
产品优势
多场景支持：支持离线数仓搭建、数仓提速、离线数据分析、数据中台搭建、大规模数据集成、离线计算、异构数据集成等。低门槛：近乎零代码，简单配置连线后即可满足各项离线数据集成任务，同时任务支持复杂调度。基于资产的虚拟湖：配合数据...
基础线
本文介绍图层线数据选择的基础线符号为基础线时的参数配置。前提条件 已登录DataV-Atlas管理控制台。已进入项目编辑页面。样式 基础 可见缩放等级：级别表示地图的缩放层级，地图的缩放层级在设置范围内线数据将显示，范围外将隐藏。范围为...
纹理填充线
本文介绍图层线数据选择的基础线符号为纹理填充线时的参数配置。前提条件 已登录DataV-Atlas管理控制台。已进入项目编辑页面。样式 基础 可见缩放等级：级别表示地图的缩放层级，地图的缩放层级在设置范围内线数据将显示，范围外将隐藏。...
【通知】云数据库Redis原缓存分析OpenAPI接口下线
为优化用户体验，云数据库Redis对缓存分析功能进行了升级，原先的缓存分析的相关OpenAPI接口将被新接口替换。下线时间 2020年11月7日 下线内容 OpenAPI接口作用 原OpenAPI接口 新OpenAPI接口 创建缓存分析任务 创建离线全量Key分析任务 ...
DBS沙箱功能概览
相比现有基于大数据平台的历史数据离线分析方案，DBS沙箱功能提供原始数据库SQL接口，不需要开发人员编写离线分析脚本，并由于使用快照存储机制，存储成本也更低。费用说明 更多信息，请参见 DBS沙箱费用。后续步骤 自建MySQL应急恢复...
我是安全管理员
数据分析 数据分析提供典型的数据集、仪表盘和大屏模型，在仪表盘或大屏中提供丰富的可视化图表和组件来展示数据。数据服务 数据服务提供最小粒度数据输出、可视化制作、云市场售卖等功能。安全与规范 操作日志 操作日志中保存了数据变更...
我是DBA
数据分析 数据分析提供典型的数据集、仪表盘和大屏模型，在仪表盘或大屏中提供丰富的可视化图表和组件来展示数据。数据服务 数据服务提供最小粒度数据输出、可视化制作、云市场售卖等功能。安全与规范 安全规则 配置安全规则能够让所有SQL...
我是管理员
数据分析 数据分析提供典型的数据集、仪表盘和大屏模型，在仪表盘或大屏中提供丰富的可视化图表和组件来展示数据。数据服务 数据服务提供最小粒度数据输出、可视化制作、云市场售卖等功能。解决方案 一键建仓 一键创建实时同步的数据仓库，...
我是普通用户
SQLConsole SQL窗口 在单库查询中可以手动写SQL进行单库查询，适用于业务代码上线数据验证、产品效果数据分析、线上问题排查定位等场景。跨库查询 跨数据库查询为不同环境下的在线异构数据源，提供及时的关联查询服务。库表结构 结构设计 ...
文档修订记录
规则管理 2023.08.07 新增功能 数据分析 数据分析提供卡片和报告功能，您无需下载数据，即可快速完成数据可视化分析与报告创作，轻松打造个性化可视化作品，讲述数据故事、表达数据观点。增强分析（卡片和报告）2023.08.04 新增功能 数据...
情绪分析
情绪分析数据维度 在情绪分析功能中系统支持以情绪分类、时间维度、数据来源和角色维度进行分析。情绪分类：系统根据情绪将全部通话分为三类，其中负面情绪即在通话过程中表现消极的数据，正面情绪即在通话过程中表现积极的数据，中立情绪...
轮播图
BI分析数据配置面板中的详细操作说明，请参见 BI分析模式数据面板功能介绍。配置字段说明 字段 说明 图片地址 轮播图片的URL地址，与配置面板中 图片 下的 默认图片 配置项功能相同。如果同时配置，则以 图片地址 中的内容为准。说明 此处...
单张图片
BI分析数据配置面板中的详细操作说明，请参见 BI分析模式数据面板功能介绍。配置字段说明 字段 说明 图片路径 设置展示的图片，会覆盖掉 背景图 或 矢量图 中的配置。如果该字段为空，DataV会读取配置中的 背景图 或 矢量图 进行展示。超...
应用场景
适用场景 OLAP多维分析 用户行为分析 用户画像、标签分析、圈人 高维业务指标报表 自助式报表平台 业务问题探查分析 跨主题业务分析 财务报表 系统监控分析 实时数仓 电商大促数据分析 教育行业的直播质量分析 物流行业的运单分析 金融行业...
应用场景
步骤如下：实时摄入：屏蔽了底层数据源的细节，支持异构数据源数据联合分析，同时支持实时和离线数据的联合分析。查询加速：采用了就近计算策略，例如表达式下推和聚合下推，以及分布式读取/数据源针对性优化策略。支持向量化解释ORC、...
支持的云服务
MaxCompute和DataWorks提供完善的ETL、数据分析、数据地图、数据治理和数据仓库管理能力，并支持SQL、MapReduce、Graph等多种经典的分布式计算模型，能够更快速地解决用户海量数据计算问题，有效降低企业成本，保障数据安全。更多DataWorks...
审计日志
自定义数据源（支持新建离线数据源和实时数据源）AddCustomDataSource 创建实时自定义数据源。UpdateCustomDataSource 更新实时自定义数据源。DeleteCustomDataSource 删除实时自定义数据源。我的权限 ApplyPrivilege 申请权限。...
功能特性
实时性能 全量KEY离线分析 支持对全量数据进行离线分析，能够发现所有存在的大Key，分析过程不会对实例带来任何额外负担。离线全量Key分析 大、热Key分析 实时跟踪请求并分析其中涉及的大、热Key，帮助快速定位问题。实时Top Key统计 ...
背景信息以及准备工作
DataWorks是基于MaxCompute作为计算和存储引擎的用于工作流可视化开发和托管调度运维的海量数据离线加工分析平台，支持按照时间和依赖关系的任务全面托管调度。DLA用户可以通过DataWorks强大的任务托管调度功能，调度执行DLA任务，使用...
客户案例
迁移完成后，飞天大数据平台覆盖数据采集>存储&计算>实时/离线分析等游戏数据运营全链路。游戏行业：37手游重构数据体系建设 客户简介 37手游致力于手机游戏发行业务，在中国大陆地区，存在近10%的市场占有率。迄今为止，成功发行二十余款...
数据分析：即时快速分析
数据分析基于“人人都是数据分析师”的产品目标，旨在为更多非专业数据开发人员，如数据分析、产品、运营等工作人员提供更加简洁高效的取数、用数工具，提升大家日常取数分析效率。功能概述 数据分析支持基于个人视角的数据上传、公共数据...
数据分析作业
MaxCompute是适用于数据分析场景的企业级SaaS模式云数据仓库，支持在多种工具上使用MaxCompute运行大数据计算分析作业。如果您需要进行简单的查询等数据分析作业，推荐您使用SQL查询或DataWorks的临时查询等工具，高效便捷地完成数据分析...
数据洞察
DataWorks数据洞察是指通过深度数据分析和解读来获取深刻的数据理解和发现，它支持数据探索和可视化。您可以通过数据洞察了解数据分布，创建数据卡片，并组合成数据报告。此外，数据洞察结果能够通过长图形式的报告进一步分享。该功能利用...
- 产品推荐
- 这些文档可能帮助您