Hudi概述
近实时数据分析 Hudi支持多种数据分析引擎，包括Hive、Spark、Presto和Impala。Hudi作为一种文件格式，不需要依赖额外的服务进程，在使用上也更加的轻量化。增量数据处理 Hudi支持Incremental Query查询类型，您可以通过Spark Streaming...
什么是Quick BI
极易上手完成报表制作 便捷数据准备 ETL引擎0代码完成数据准备，让数据自助分析不再有门槛 全场景 多端数据呈现 适配PC端、移动端和大屏端，实现不同设备上的数据分析与呈现 无缝办公协同 可集成至办公IM应用（钉钉、企业微信、飞书）中，...
基于Delta lake的一站式数据湖构建与分析实战
2.统一元数据服务 对象存储本身是没有面向大数据分析的语义的，需要结合Hive Metastore Service等元数据服务为上层各种分析引擎提供数据的Meta信息。数据湖计算与分析 相比于数据仓库，数据湖以更开放的方式对接多种不同的计算引擎，如传统...
DBS沙箱功能概览
历史数据即席分析（Ad Hoc Analysis）：许多数据分析场景，需要根据当前需求临时AdHoc查询历史数据，DBS沙箱功能可以快速提供历史全量数据副本用于查询。相比现有基于大数据平台的历史数据离线分析方案，DBS沙箱功能提供原始数据库SQL接口...
数据质量评估标准
不同行业有不同的评估数据质量的标准。对于MaxCompute，数据质量可以从完整性、准确性、一致性和及时性四个角度进行评估。完整性 完整性是指数据的记录和信息是否完整...如果等待时间过长，数据失去了及时性的价值，数据分析工作将失去意义。
计费概述
计费模式 基因数据分析工作通常由一到多个步骤组成。阿里云基因分析平台，使用GA4GH支持的流程描述语言WDL，来定义生信分析应用，标准化、参数化的描述每个步骤所需的计算资源和执行环境，以及步骤之间的相互依赖关系。用户使用这些分析...
应用场景
而智能质检通过对客服的通话记录识别成文本进行大数据分析，可以极大的提高质检覆盖率（达到100%），并减少人工成本。保险行业 在保险行业中，阿里云智能质检凭借强大的技术实力，迅速在行业中树立起标杆客户；例如：平安产险的金牌话术...
应用场景：低成本历史库
能够满足数据分析需求，历史数据访问频度低，但是在某些业务场景下需要对全量数据进行挖掘分析，比如支付宝年账单。云原生多模数据库 Lindorm 能够同时满足存储成本低廉、运维简单、弹性伸缩、性能稳定等需求可以和关系型数据库完美组合，...
低成本历史库
能够满足数据分析需求，历史数据访问频度低，但是在某些业务场景下需要对全量数据进行挖掘分析，比如支付宝年账单。云原生多模数据库Lindorm（HBase增强版）能够同时满足存储成本低廉、运维简单、弹性伸缩、性能稳定等需求可以和关系型数据...
Quick BI v4.0版本说明
面向一线业务人员，以表格形式提供拖拽式的表格分析能力，让懂业务的人自助实现数据分析。移动端应用升级 推出企业微信无缝对接；提升移动端交互体验，类目分类可见范围灵活配置，实现千人千面的移动端看数体验。数据建模配置全面提升 数据...
低成本RDS历史库
能够满足数据分析需求，历史数据访问频度低，但是在某些业务场景下需要对全量数据进行挖掘分析，比如支付宝年账单。云原生多模数据库Lindorm（HBase增强版）能够同时满足存储成本低廉、运维简单、弹性伸缩、性能稳定等需求可以和关系型数据...
公交出行：启迪公交
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务...实时和汇总大数据分析系统，支持公交领导产生更加快速有效的业务决策。
读写RDS MySQL数据
因为RDS本身能承载的数据量有限，不适合大数据分析。更多的场景是在DLA中对存储在OSS、Tablestore中的大数据进行分析，分析完成之后把结果数据回写到RDS中，供前台业务使用。DLA如何读取OSS中的数据，请参见 操作步骤。以 person 表为例，...
移动端概述
Quick BI提供一系列功能，帮助企业完成 查看数据/监控数据分析决策协同落地。移动端仪表板 请登录 Quick BI控制台，在 模板市场 下获取移动端报表示例。丰富的可视化图表 支持30余种可视化图表组件，清晰的表达数据。基于移动端空间展示的...
从资源赋权概述
授权后，权限生效的用户可以协同编辑该数据集，同时也支持使用数据集进行数据分析。使用：用于设置数据集的使用权限。授权后，权限生效的用户可以基于数据集进行数据分析。列级权限：授权后，可以对目标用户隐藏或脱敏目标字段值，从而保证...
受众与核心能力
产品定位 DataWorks致力于为数据开发者、数据分析师、数据资产管理者，打造一个具备开放自主开发与全栈数据研发能力的一站式、标准化、可视化、透明化的智能大数据全生命周期云研发平台。DataWorks赋予用户仅通过单一平台，即可实现数据...
SQL查询
已拥有某数据源在数据分析模块的查询权限：详情请参见 数据查询与分析管控。操作账号已被添加为工作空间的以下角色之一：数据分析师、模型设计师、开发、运维角色、空间管理员或项目所有者，详情请参见 为工作空间添加空间成员。说明 使用...
DataV6.0数据集介绍
本教程主要包括数据集的介绍、数据集的创建、数据集的应用场景以及数据集的组件生成方法，并以柱状图和基础平面地图组件为例介绍数据集的创建步骤。介绍 DataV数据集支持多种数据源的接入，如数据库、Excel表格文件等，通过对数据的结构化...
创建DataHub项目
阿里云流数据处理平台DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布（Publish），订阅（Subscribe）和分发功能，让您可以轻松构建基于流式数据的分析和应用。前提条件 您已经完成了 创建RDS MySQL数据库表。操作...
操作指南
DataV可视分析地图 管理数据树 添加PolarDB PostgreSQL数据库 添加RDS PostgreSQL数据库 管理项目 数据源管理 图层管理 图层交互管理 其他更多操作请参见 操作指南。DataV可视分析创作间 创建数据集 可视分析数据集 自定义编辑卡片 分享...
常见问题
本文汇总了 云数据库 SelectDB 版 的常见问题及解决方案。产品选型 阿里云数据库 SelectDB 版与自建 Apache Doris 数据库对比，有哪些优势？计费 为什么包年包月实例还会产生后付费账单？应用场景 云数据库 SelectDB 版可以...统一数据分析。
如何对JSON类型进行高效分析
本文介绍了PolarDB IMCI为应对海量结构化与半结构化数据分析场景，通过整合列式JSON、虚拟列、秒级加减列、表列数扩展及列存索引等系列功能而构建出的扩展流计算方案，以及该方案的应用案例。背景 随着应用场景多样化与快速迭代，业务系统...
Lindorm实时入湖建仓分析
完全弹性的分析：DLA支持Serverless Presto和Serverless Spark的分析与计算能力，完全按需计费。方案架构如下图所示。使用限制 Lindorm宽表引擎版本必须大于等于2.1.28。Lindorm通道服务版本必须大于等于3.5.0。Lindorm文件引擎版本必须...
互联网、电商及游戏行业实时BI分析
场景描述 本文以电商行业为例，将业务数据和日志数据同步到AnalyticDB，并通过Quick BI实时可视化分析数据。相对于传统的关系型数据库，阿里云分析型数据库MySQL版只需要几毫秒的时间，即可查询PB级数据并从中找到匹配信息。解决问题 ...
准备工作
本文简单介绍分析前的准备工作 第一步：生成数据源 应用诊断分析平台（ATP）只提供 诊断分析 能力，需要您准备数据源以供分析。1.什么是数据源？取决于您想分析的应用问题，数据源有所不同。Q：发现GC频率过快？GC回收效率低下？应用出现...
使用限制
不提供永久文件存储功能，会定期(7+天)清除您的文件，重要转储文件请务必提前使用OSS或其他方式存储 应用诊断分析平台免费提供50GB临时可用空间供您分析 应阿里云安全监管要求，为了最大程度保护用户数据，应用诊断分析平台只能访问以 ...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
非结构化分析
优势 云原生数据仓库AnalyticDB PostgreSQL版 的向量分析特性针对非结构化数据检索分析，与普通的检索系统有较大的差异，主要体现在下面的几点：结构化和非结构化混合分析 例如，可以检索与输入图片中的连衣裙相似度最高、价格在100元到200...
2023年
支持用户通过SQL、PyODPS、Python等进行数据分析、探索，挖掘数据的价值，完成大数据与AI的融合应用开发。本文为您介绍如何使用Notebook功能。（邀测）MaxCompute Notebook使用说明 2023-09-12 新增在本地环境上使用PyODPS 新说明 PyODPS是...
通过DTS实现数据库的垂直拆分
保持源实例数据库B与应用程序的断开状态，验证源和目标实例的数据库B数据一致后，将应用程序的相关数据库服务切换至目标实例的数据库B并恢复业务。登录目标实例数据库B，根据数据库类型选择下述命令查看会话信息，确保有新的会话执行写入...
什么是云数据库SelectDB版
云数据库SelectDB版 是新一代实时数据仓库 SelectDB 在阿里云上的全托管服务，您可以在阿里云上便捷地购买 SelectDB 数仓服务，满足海量数据分析需求。产品优势 高性价比 高性能：支持亚秒级响应海量数据查询、万级高并发点查询以及高吞吐...
SQL查询概述
应用场景 提取并下载数据：通过SQL查询可以对计算源中的数据进行提取、聚合、过滤、排序等操作，并支持下载数据，以满足数据分析和报表生成的需求。数据可视化：通过SQL查询可以对计算源中提取的业务数据以图表的形式展示，可有效的帮助...
SQL查询概述
应用场景 提取并下载数据：通过SQL查询可以对计算源中的数据进行提取、聚合、过滤、排序等操作，并支持下载数据，以满足数据分析和报表生成的需求。数据可视化：通过SQL查询可以对计算源中提取的业务数据以图表的形式展示，可有效的帮助...
增强分析（卡片和报告）
数据分析提供卡片和报告功能，您无需下载数据，即可快速完成数据可视化分析与报告创作，轻松打造个性化可视化作品，讲述数据故事、表达数据观点。本文为您介绍如何生成卡片并创作报告。计费说明 卡片及报告自2023年12月13日开始收费，收费...
基于混合负载的查询优化
传统数仓方案，通过组合多套数据库与大数据产品，利用各自不同的优势来解决不同的分析场景，带来的问题就是整个数据冗余，同时管理多个异构系统的代价。完备数据仓库，首要解决的问题包括：如何更好的支持数据库场景下的交互式分析以及大...
最佳实践概览
ES-Hadoop使用 通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据 通过ES-Hadoop将HDFS中的数据写入Elasticsearch 通过ES-Hadoop实现Spark读写阿里云Elasticsearch数据 日志采集与分析 日志同步分析概述 通过自建Filebeat收集MySQL日志 ...
访问数据分析功能
在顶部菜单栏中，选择 集成与开发（DTS）>数据应用>数据分析。通过数据库的SQL窗口进入数据可视化 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 SQL窗口>SQL窗口。说明 若您搜索不到目标数据库，请检查数据库是否已登录或是否有该数据库的...
计费逻辑说明
软件费用明细：数据建模 增强分析 DataWorks增强分析提供卡片和报告功能，您无需下载数据，即可快速完成数据可视化分析与报告创作，您可以根据需要创建的报告数及使用时长进行购买。软件费用明细：增强分析 资源费用 数据集成 数据集成提供...
访问数据可视化功能
新版数据可视化功能：在顶部菜单栏中，选择 集成与开发（DTS）>数据应用>数据分析。方式二：通过数据库的SQL窗口进入数据可视化 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 SQL窗口>SQL窗口。在 请先选择数据库 对话框中，搜索并选择数据...
仪表盘
仪表盘是 数据管理DMS 数据分析的其中一种可视化应用类型，其提供自动布局和可交互能力，您可以通过使用仪表盘来进行数据分析和制作可视化报表。本文介绍仪表盘的基本概念、功能展示及操作步骤。基本概念 仪表盘集合：仪表盘集合是用户管理...
- 产品推荐
- 这些文档可能帮助您