大数据分析
步骤一：开通大数据分析工具 订阅账单数据前，您需先在用户中心开通大数据分析工具。（工具仅在旧版用户中心提供，目前工具通过白名单开放，如需试用，请联系服务经理）进入大数据分析。进入 用户中心。在左侧导航栏单击 成本管理>成本分析...
账单数据订阅及查询分析
您可在用户中心订阅不同类型的账单数据，例如，计费项明细账单、计费项账单按天汇总等。订阅成功后，账单数据将会定时同步至MaxCompute，您...相关文档 大数据分析工具的常见问题和解决方法，详情请参见 大数据分析工具的常见问题和解决方法。
什么是Quick BI
极易上手完成报表制作 便捷数据准备 ETL引擎0代码完成数据准备，让数据自助分析不再有门槛 全场景 多端数据呈现 适配PC端、移动端和大屏端，实现不同设备上的数据分析与呈现 无缝办公协同 可集成至办公IM应用（钉钉、企业微信、飞书）中，...
简介
DMS数据分析与应用介绍 DMS通过Data Fabric+大模型构建数据管理底座，赋能数据分析与应用。该场景下核心的四个功能如下：安全托管：DMS在阿里集团数据库权限访问控制最佳实践，为企业提供一系列数据库权限管控的集合，可帮助企业实现多云...
产品架构
数据管理DMS的产品架构分为三层：数据源、数据运营与管理和商业...数据应用：提供数据服务、数据分析和数据可视化。更多信息，请参见 功能概览。商业应用：数据化运维DataOps 容灾多活 T+1全量数据快照 数据集中处理 可视化报表 数据多维分析
离线集成概述
解决企业复杂大数据批处理难题，支持企业精细化运营、数据营销、智能推荐等大数据业务场景。离线集成功能底层基于Spark开发，支持提升Hadoop平台运行速度的应用场景。说明 如果您在使用该功能的过程中有任何疑问或问题，请使用钉钉搜索钉钉...
客户案例
打造离线实时一体化数据中台，构建统一、完整的大数据应用链路，服务内部几大核心业务。全链路数据治理提高数据可用性，让数据在中台进行自由流动，保证数据准确、准时、一致，成本削减1亿元。提高业务迭代效率，数据更新频率由1天变成10...
如何优化数据全量抽取
本文介绍了在应用内通过代码高效抽取数据的方法。简介 数据抽取是指通过代码或者数据导出工具，从 PolarDB-X 中批量读取数据的操作。主要包括以下场景：通过数据导出工具将数据全量抽取到下游系统。PolarDB-X 支持多种数据导出工具，更多...
创建CDH Spark节点
Spark是一个通用的大数据分析引擎，具有高性能、易用和普遍性等特点，可用于进行复杂的内存分析，构建大型、低延迟的数据分析应用。DataWorks为您提供CDH Spark节点，便于您在DataWorks上进行Spark任务的开发和周期性调度。本文为您介绍...
使用代码热点诊断慢调用链的问题
当调用链中因为缺失对应用代码非框架层面的方法埋点时，代码热点帮您还原对应缺失埋点的实际方法调用耗时。前提条件 代码热点功能需要使用3.1.4或以上版本的探针。代码热点功能依赖持续剖析能力，对操作系统内核和JDK版本有一定的要求，请...
支持STS的云服务
datav√○实时计算Flink版-×企业数据云平台-cdp√○Elasticsearch-elasticsearch√关系网络分析-iplus×智能用户增长-×○开源大数据平台E-MapReduce E-MapReduce emr√开源大数据平台E-MapReduce EMR Serverless StarRocks sr√开源大...
2023年
支持用户通过SQL、PyODPS、Python等进行数据分析、探索，挖掘数据的价值，完成大数据与AI的融合应用开发。本文为您介绍如何使用Notebook功能。（邀测）MaxCompute Notebook使用说明 2023-09-12 新增在本地环境上使用PyODPS 新说明 PyODPS是...
通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。...数据展现与分享：数据提取成功后，可以通过报表、地理信息系统等多种展现方式，展示与分享大数据分析、处理后的成果。
新功能发布记录
概述 名词解释 访问数据分析功能 管理数据集 仪表盘 08月 功能名称 变更类型 功能描述 相关文档 极简模式 新增 极简模式的控制台界面简洁、易上手、操作空间大，可以随时查找目标数据库实例，无需反复切换到控制台首页标签页。极简模式控制...
连接PostgreSQL实例
Smartbi RDS PostgreSQL支持接入 Smartbi，在Smartbi中对数据进行分析处理，满足您在企业级报表、数据可视化分析、自助探索分析、数据挖掘建模、AI 智能分析等大数据分析需求。下文以 Smartbi V10.5 版本为例，介绍如何连接RDS PostgreSQL...
连接PostgreSQL实例
Smartbi RDS PostgreSQL支持接入 Smartbi，在Smartbi中对数据进行分析处理，满足您在企业级报表、数据可视化分析、自助探索分析、数据挖掘建模、AI 智能分析等大数据分析需求。下文以 Smartbi V10.5 版本为例，介绍如何连接RDS PostgreSQL...
文档检索和LLM集成
集成LangChain LangChain是一套基于大语言模型（LLM）构建应用的开源框架，可实现通过一整套接口和工具将模型和外部数据连接。下文将展示如何将 AnalyticDB PostgreSQL版 的检索能力集成到LangChain中实现一个问答系统。安装模块 pip ...
文档修订记录
订阅成功后，账单数据会定时同步至MaxCompute，您可使用DataWorks的数据分析功能查询并分析账单数据，将分析结果生成可视化图表卡片及报告，同时，也可将您的阿里云消费分析报告分享给其他用户。账单数据订阅及查询分析 2024.2.21 新增功能...
什么是ETL
数据传输服务DTS提供的流式数据ETL（Extract Transform Load）功能是一种高效的实时数据加工工具。ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据...
流式ETL
数据传输服务DTS提供的流式数据ETL（Extract Transform Load）功能是一种高效的实时数据加工工具。ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据...
Spring Boot应用如何快速接入Prometheus监控
数据可视化及分析 在获取应用或基础设施运行状态、资源使用情况，以及服务运行状态等直观信息后，通过查询和分析多类型、多维度信息能够方便地对节点进行跟踪和比较。同时，通过标准易用的可视化大盘去获知当前系统的运行状态。比较常见的...
性能监控最佳实践
但是，绝大部分线上问题无法仅通过链路追踪的基础能力就能够有效定位并解决，线上系统的复杂性决定了一款优秀的 Trace 产品必须提供更加全面、有效的数据诊断能力，比如代码级诊断、内存分析、线程池分析、无损统计等等。充分利用不同语言...
新功能发布记录
新规格 该版本适用于开发具有复杂交互设计需求的监控可视化应用、数据分析可视化应用、可视化分析应用页面的搭建。2019-07-10 规格说明 v5.0 更新DataV编辑器样式。体验优化 重构编辑器布局，组件选择列表从顶部调整至左侧，新增顶部工具栏...
应用场景
包括免运维IaaS、自动弹性伸缩和开箱即用 Web 应用防火墙、CDN全球加速、OSS 持久化存储、日志管理、负载均衡、云数据库 RDS 等能力，同时还提供闲置计费和缩容到0的能力，让流量零星、有突发峰值的Web应用使用成本更低。适用于个人博客/...
2020年
MaxCompute Web控制台支持以STS访问认证，使用RAM角色在Web控制台操作访问MaxCompute项目空间，进行数据分析、数据开发。用户认证 用户规划与管理 2020-11-17 新增Python UDF使用第三方包操作指导。新说明 MaxCompute支持您在Python UDF中...
应用上云方案设计
云原生应用架构 云原生应用架构特点 应用代码按业务域拆分解耦，降低复杂度。开发者只需关注业务逻辑，与业务不相关功能下沉到云基础设施。技术体系走向开放和标准。运维无需关注基础设施稳定性，更多精力专注于自动化。云原生应用架构建议...
典型场景
大数据分析平台 对于MaxCompute、Hadoop和Spark中保存的海量数据，可通过采用数据集成服务（DataX）或通过对象存储服务（OSS），快速批量导入到 云原生数据仓库AnalyticDB PostgreSQL版，帮助您实现高性能分析处理和在线数据探索。...
2023年
如何使用PromQL小工具 2023年09月 模块 功能名称 变更类型 功能描述 相关文档 应用监控 持续剖析 新增 新增代码热点功能，通过持续剖析技术定时采集请求线程堆栈快照，真实还原代码执行第一现场。使用代码热点诊断慢调用链的问题 API 优化 ...
E-MapReduce弹性低成本离线大数据分析
离线大数据分析概述 主流的三大分布式计算框架系统分别为Hadoop、Spark和Storm：Hadoop可以运用在很多商业应用系统，可以轻松集成结构化、半结构化以及非结构化数据集。Spark采用了内存计算，允许数据载入内存作反复查询，融合数据仓库、流...
持续剖析
持续剖析建议JDK版本：JDK类型 版本 OpenJDK OpenJDK 8u352+OpenJDK 11.0.17+OpenJDK 17.0.5+Oracle JDK Oracle JDK 11.0.21+Oracle JDK 17.0.9+开启持续剖析功能 登录 ARMS控制台，在左侧导航栏选择 应用监控>应用列表。在 应用列表 页面...
接入持续剖析功能
持续剖析建议JDK版本：JDK类型 版本 OpenJDK OpenJDK 8u352+OpenJDK 11.0.17+OpenJDK 17.0.5+Oracle JDK Oracle JDK 11.0.21+Oracle JDK 17.0.9+在控制台上开通持续剖析功能 登录 ARMS控制台，在左侧导航栏选择 应用监控>应用列表。在 应用...
基础常问类问题
它不仅是面向业务人员的数据分析工具，也是数据化运营的助推器，更是解决大数据应用“最后一公里”的神器。针对只用过Excel，想要迁移到Quick BI的人群，有哪些入门文档？请参见 入门概述 和 业务背景介绍和快速连接数据源。控制台上案列...
产品概述
DataV-Card 可视分析创作间 DataV-Card可视分析创作间是一款专为高频数据处理的业务人员而设计的零代码数据可视分析产品。它提供简单、直观、易于使用的数据准备、洞察发现和可视化分析工具，让用户可以通过具象、生动、有趣的方式快速理解...
产品更新动态
对业务人员提供真正友好的数据分析工具，经验与AI的碰撞获取分析灵感。创建数据集 探查数据集 管理数据集 数据卡片生成 数据卡片智能一键生成，提供多样化的可视化表现方式，帮助您快速获得数据分析灵感、保存数据见解。生成的卡片支持图表...
Spark概述
Spark是一个通用的大数据分析引擎，具有高性能、易用性和普遍性等特点。架构 Spark架构如下图所示，基于Spark Core构建了Spark SQL、Spark Streaming、MLlib和Graphx四个主要编程库，分别用于离线ETL（Extract-Transform-Load）、在线数据...
什么是EMR Notebook
EMR Notebook是一个Serverless化的交互式数据分析和探索平台，满足大数据和AI融合下的数据处理需求，为数据工程师、数据分析师和数据科学家提供了可视化的应用程序开发环境。通过EMR Notebook可以完成对SQL、Python、Markdown等多种语言...
PyODPS概述
PyODPS提供了 to_pandas 接口，可以直接将MaxCompute数据转化成Pandas DataFrame数据结构，但这个接口只应该被用于获取小规模数据做本地开发调试使用，而不是用来大规模处理数据，因为使用这个接口会触发下载行为，将位于MaxCompute中的...
新手指引
Serverless 应用引擎 SAE（Serverless App Engine）是面向应用的Serverless PaaS平台，能够帮助PaaS层用户免运维IaaS、按需使用、按量计费，做到低门槛微服务、PHP应用上云。本文介绍如何使用 SAE，帮助您快速了解 SAE 以及各方面的实践...
MaxCompute UDF概述
UDF（User-Defined Function）即自定义函数，当MaxCompute提供的内建函数无法支撑您的业务实现时，您可以根据本文中的开发流程及使用示例，自行编写代码逻辑创建自定义函数，以满足多样化业务需求。背景信息 广义的UDF定义是 自定义标量...
仪表盘
仪表盘是 数据管理DMS 数据分析的其中一种可视化应用类型，其提供自动布局和可交互能力，您可以通过使用仪表盘来进行数据分析和制作可视化报表。本文介绍仪表盘的基本概念、功能展示及操作步骤。基本概念 仪表盘集合：仪表盘集合是用户管理...
- 产品推荐
- 这些文档可能帮助您