简介
背景信息 Spark Streaming SQL是基于Spark Structured Streaming开发完成的，所有语法功能和使用限制遵循Spark Structured Streaming的标准，因此可以使用SQL语句来开发流式分析作业。注意事项 EMR集群是否支持Spark Streaming SQL功能与...
数据源支持概述
从EMR-3.21.0版本开始支持使用Spark SQL开发流式分析作业。本文介绍Spark SQL支持的数据源类型，以及支持数据源的方式。支持的数据源 数据源 批量读 批量写 流式读 流式写 Kafka 有 无 有 有 Loghub 有 有 有 有 Tablestore 有 有 有 有 ...
应用场景
本章节将为您介绍CDP产品的应用场景。现代数据仓库 运营数据库 准实时分析 流式处理和分析
一站式分析体验
AnalyticDB MySQL 湖仓版（3.0）统一了元数据管理、数据访问、数据管道和计费单位，为您提供一站式分析体验。湖仓版（3.0）数据通过统一的元数据服务进行管理，避免了元数据同步带来的低效、不一致等问题，让湖和仓的联动更加敏捷。而且...
2022年9月13日 V4.11.0产品更新
对话分析体验优化 对于基础分析和重复来电分析，支持对标签内容进行查看详情和下钻，并且支持切换展现模板和全屏展现，以解决某些客户标签内容过于密集的问题。CCS融合二期 在CCS二期项目里，质检和对话分析产品，完成和CCS底座融合。
什么是云原生数据湖分析
DLA Serverless Presto是在开源Apache Presto基础上研发，完全由内存完成计算工作，具备高性能、交互式的分析体验，秒级可返回；DLA Serverless Spark是在开源Apache Spark基础上研发，兼容Apache Spark所有的API。以下场景推荐您使用DLA ...
血缘分析
当上下游节点数量过大时，为保障您的分析体验，推荐您使用列表模式。列表模式 在 报表血缘分析 页面，选择查看报表所在的 工作空间、查询类型、报表类型 和 报表名称，单击 查询。说明 查询类型支持 报表、数据集、数据源&数据表。报表类型...
如何选择产品类型
对比项 基础版 专业版 适用场景 现代数据仓库 准实时分析 流式处理和分析 在存储、计算分离的架构之上支持：现代数据仓库 准实时分析 流式处理和分析 主要功能 Runtime：提供约50个开源组件（包含常见存储、计算组件）。Cloudera Manager：...
通过 HyperLoglog 实现高性能多维数据透视
如果数据需要实时的统计，那么可以使用pipelineDB进行流式分析，实时计算统计结果。与阿里云云端组件结合，使用OSS对象存储过渡数据（原始数据）。使用OSS_FDW外部表对接OSS，因此过渡数据可以不入库，仅仅用于预计算。大幅降低数据库的...
什么是用户体验监控
ARMS 用户体验监控（Real User Monitoring，RUM）专注于对Web场景、App移动应用场景和小程序场景的监控，以用户体验为切入点，完整再现用户操作过程，从页面打开速度（测速）、请求服务调用（API）和故障分析（JS错误、网络错误等）稳定性...
游戏运营融合分析
高效数据融合分析：打通结构化和非结构化数据，支撑产品体验分析；广告买量投放效果实时（分钟级）分析，渠道的评估更准确。降低使用成本：DLA融合冷数据分析+ADB存储密集型温数据分析+ADB计算密集型热数据分析，在满足各种分析场景需求的...
2024年
用户体验监控 App监控 优化 移动端支持卡顿、ANR、JS错误分析。App监控详情 调用链 新增 前端请求端到端打通，支持展示请求调用链与调用拓扑。用户体验监控关联Trace 可观测监控 Prometheus 版 数据投递 新增 Prometheus数据投递服务全球...
什么是MaxCompute
MaxCompute是适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效...
快速体验MaxCompute
体验MaxCompute 本示例会指导您基于MaxCompute提供的 TPC-DS数据 样例数据和GitHub公开事件样例数据，通过 MaxCompute SQL分析 功能，快速体验MaxCompute产品，完成开通、执行SQL语句查询数据。您无需进行数据同步，可直接上手体验数据分析...
分析网站日志
功能体验 通过测试仪表盘体验查询分析功能。试用链接：仪表盘 通过数据实验室功能体验查询分析功能。更多信息，请参见 使用数据实验室。操作步骤 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>日志库 页签中，...
控制台快速开始
本文介绍如何通过产品控制台，在两分钟内快速完成一个基因分析任务，帮助用户熟悉基因平台基本操作。...如果您只是通过该教程体验基因分析平台功能，无须保留结果文件。您可以删除该RunID对应的文件夹目录，清理OSS文件，以避免产生额外费用。
Quick引擎概述
在利用BI产品进行数据分析过程中，数据处理“慢”会为业务带来很多的困扰，可以想象一下：给老板看的报表加载展示非常慢，有的时候还会崩掉，本想做好向上汇报，但却给老板带来了糟糕的体验。分析师或业务同学，做数据探索式分析，拖拽一个...
快速体验
本文使用阿里电商数据集（commerce_ali_e_commerce 表），带您快速体验数据分析的相关功能。阿里电商数据集介绍：统计淘宝不同时间段的订单详情。表中记录了 2017年11月25日 至 2017年12月3日 之间，约100万用户的随机行为（包括点击、购买...
使用DataHub（实时数据传输）
DataHub 是MaxCompute提供的流式数据处理（Streaming Data）服务，它提供流式数据的发布（Publish）和订阅（Subscribe）的功能，让您可以轻松构建基于流式数据的分析和应用。DataHub同样提供流式数据归档的功能，支持流式数据归档至...
云速搭部署 Flink 应用
通过云速搭实现一个 DataHub+Flink 的实时流计算引擎架构，利用 DataHub 收集原始数据，推送到 Flink 进行基于流式数据的分析和应用。产品列表 专有网络VPC 对象存储OSS 实时计算Flink版 DataV数据可视化 数据总线DataHub 云速搭CADT 方案...
产品概述
阿里云流数据处理平台数据总线DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布(Publish)，订阅（Subscribe）和分发功能，让您可以轻松构建基于流式数据的分析和应用。数据总线 DataHub服务可以对各种移动设备，应用...
创建DataHub项目
阿里云流数据处理平台DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布（Publish），订阅（Subscribe）和分发功能，让您可以轻松构建基于流式数据的分析和应用。前提条件 您已经完成了 创建RDS MySQL数据库表。操作...
配置DataHub输出
DataHub是流式数据（Streaming Data）的处理平台，为您提供发布、订阅和分发流式数据的功能，让您可以轻松构建基于流式数据的分析和应用。前提条件 配置DataHub输出节点前，您需要先配置好相应的输入或转换数据源，实时同步支持的数据源。...
事件分析概述
您可以通过简单的引导式交互，即可快速实现基于事件的流式查询与分析，具有无入侵、无需数据上报、低成本、操作快捷等特点。事件总线EventBridge 支持的事件分析类型分为两类：云服务专用总线事件分析：聚焦阿里云官方事件源，无需额外绑定...
功能特性
阿里云Flink（流式）DataHub（实时）DataHub是MaxCompute提供的流式数据处理（Streaming Data）服务，它提供流式数据的发布（Publish）和订阅（Subscribe）的功能构建基于流式数据的分析和应用。DataHub（实时）SLS投递 将日志服务采集的...
DataHub
阿里云流式数据服务DataHub流式数据（Streaming Data）的处理平台，提供对流式数据的发布（Publish），订阅（Subscribe）和分发功能，让您可以轻松构建基于流式数据的分析和应用。本文主要介绍如何通过DLA Serverless Spark访问DataHub。...
概述
大数据分析 如果您的业务采用MySQL数据库，随着业务的发展，大数据分析场景逐渐增多，而MySQL数据库进行大数据分析需要结合流式组件、存储系统、计算组件等工具，操作复杂且难度大，您可以选择将MySQL数据库迁移到表格存储中实现大数据分析...
产品试用
查询与分析 SLS Playground提供了多个场景的演示数据，例如Nginx日志、OSS访问日志、VPC流日志等，便于您体验查询与分析功能。可视化图表 SLS Playground提供了多个可视化图表Demo，您可以在名为charts-demo的Project中进行试用。
Quick BI v4.1.0版本说明
全新推出Quick引擎，引入列式存储计算引擎作为加速方案，亿级数据秒级响应的顺滑体验，让分析查询速度更加高效。安全持续升级，全局管控资源权限。全新推出权限集中管控模块：从资源到人精细化管控门户数据源、仪表板、电子表格等，管理员...
功能简介
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。API开发 支持数据服务API。支持创建、编辑和测试API，支持的API类型包括...
统一服务
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。API开发 支持数据服务API、三方API、数据上报API、和空间服务API。支持创建...
功能简介
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。API开发 支持数据服务API、三方API、数据上报API、空间服务API。支持创建、...
日志分析概述
性能监控与优化：企业可以利用日志实时分析功能来监测网络性能，检测和诊断问题，从而优化用户访问体验，提高业务的在线性能和运营效率。版本限制 目前仅 云防火墙包年包月版（高级版、企业版、旗舰版）支持开通日志分析功能，云防火墙按量...
2023-04-13版本
管理自定义Catalog 智能诊断能力增强 本次提供了对作业开发过程和作业运行过程中产生的错误日志智能分析的能力，在日志界面查看信息时，系统会自动分析日志内容并提供可执行的操作建议。作业智能诊断 SLS连接器客户端升级 优化了SLS连接器...
接入Logstash
数据从源传输到目标存储的过程中，Logstash过滤器能够解析各个事件，识别已命名的字段来构建结构，并将它们转换成通用格式，通过更轻松、快速的方式分析数据来实现商业价值。输出：导出数据。Logstash提供多种数据输出方向，灵活解锁众多...
APM应用性能监控
采集器收集数据后将这些事件流式传输到APM Server，由Server验证并处理事件。事件支持的类型包括Spans、Transaction、Errors和Metrics：Spans：范围事件类型。包含有关已执行的特定代码路径的信息。它们从活动的开始到结束进行度量，可以与...
使用前须知
产品试用 SLS Playground中的全栈可观测Demo，内置了实例、演示数据、可视化图表等资源，提供了完整的演示环境，便于您快速了解及体验功能。您可以单击 全栈可观测，进行试用。重要 SLS Playground中的数据为演示数据，请勿用于生产环境。...
整体架构
同时打通自研和开源引擎之间的互相访问，提供更一体化的体验。存储层：只需一份全量数据，满足离线在线场景。在线分析场景需要数据尽量在高性能存储介质上提高性能，离线场景需要数据尽量在低成本存储介质上降低存储成本。为满足不同场景...
产品优势
智能存储 提供多种数据处理能力，例如图片处理、视频截帧、文档预览、图片场景识别、SQL查询等，并无缝对接Hadoop生态以及阿里云函数计算、EMR、DataLakeAnalytics、BatchCompute、MaxCompute、DBS等产品，满足企业数据分析与管理的需求。...
基于事件流实现MNS消息路由
背景信息 事件流作为更轻量、实时端到端的流式事件通道，提供轻量流式数据的过滤和转换的能力，在不同的数据仓库之间、数据处理程序之间、数据分析和处理系统之间进行数据同步。源端 消息服务MNS 生产的消息可以通过事件流这个通道被路由到...
- 产品推荐
- 这些文档可能帮助您