数据可视化展现
本案例通过数据分析对用户画像数据进行可视化与分析，具体分析场景如下：场景 图示 城市注册人数排行榜分析 注册会员访问次数年龄分布 注册会员访问次数性别分布 男女星座访问次数分析 进入SQL查询页面 本案例通过数据分析中的 SQL查询 ...
汇总数据层（DWS）
您可以思考，基于某个维度的聚集是否经常用于数据分析中。如果答案是肯定的，就有必要把明细数据经过汇总沉淀到聚集表中。汇总表规范 公共汇总表命名规范：dws_统计粒度。举例如下：dws_report（report汇总表）dws_user（user汇总表）创建...
文档修订记录
订阅成功后，账单数据会定时同步至MaxCompute，您可使用DataWorks的数据分析功能查询并分析账单数据，将分析结果生成可视化图表卡片及报告，同时，也可将您的阿里云消费分析报告分享给其他用户。账单数据订阅及查询分析 2024.2.21 新增功能...
同步数据
分析型数据库MySQL版支持多种数据加载方式，包括但不限于：通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版，其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...
确定需求
建议您思考下列问题，对后续的数据建模将有巨大的帮助：业务数据是根据什么（维度、粒度）汇总的，衡量标准是什么？例如，成交量是维度，订单数是成交量的度量。明细数据层和汇总数据层应该如何设计？公共维度层该如何设计？是否有公共的...
确定需求
建议您思考下列问题，对后续的数据建模将有巨大的帮助：业务数据是根据什么（维度、粒度）汇总的，衡量标准是什么？例如，成交量是维度，订单数是成交量的度量。明细数据层和汇总数据层应该如何设计？公共维度层该如何设计？是否有公共的...
ActionTrail日志清洗
DLA提供ActionTrail日志自动清洗解决方案，可以将ActionTrail投递到OSS的日志文件转换为DLA中可以直接查询的数据表，同时自动对数据进行分区和压缩，方便您分析和审计对云产品的操作日志。日志分析痛点 ActionTrail是阿里云提供的云账号...
确定需求
需求分析 在未考虑数据分析师、业务运营人员的数据需求的情况下，单纯根据业务调研建设的数据仓库，可能可用性较差。完成业务调研后，您需要进一步收集数据使用者的需求，进而对需求进行深度思考和分析，并改进数据仓库。需求分析的途径有...
数据分析：即时快速分析
计费 DataWorks的数据分析功能不收取功能费用，您开通DataWorks后即可使用数据分析功能，但不同版本的DataWorks支持的数据分析功能细节不一致，详情请参见 DataWorks各版本详解。开通使用 购买DataWorks版本后，您即可登录DataWorks控制台...
常见问题
数据安全中心扫描数据源中的字段名称、字段值综合判断该数据是否为敏感数据，只通过字段值无法判断数据是否敏感。例如：年龄数据。敏感数据识别是如何实现的？敏感数据识别是在完成数据资产授权后，采用内置的检测规则在RDS或OSS数据库中...
账单和用量查询
因为 时间序列数据库TSDB、时序数据库InfluxDB®版和 云原生多模数据库Lindorm 属于同一个产品大类 云原生多模数据库Lindorm，所以产品列显示的是 云原生多模数据库Lindorm。解决办法：本文提供两种确认费用的方法。在 账单详情 页，查看...
概述
实时数据分析 实时数据分析指的是根据业务目标，从原始数据中抽取对应信息并整合的过程。例如，查看每天销量前10的商品、仓库平均周转时间、文档平均单击率和推送打开率等。实时数据分析则是上述过程的实时化，通常在终端体现为实时报表或...
功能优势
高维向量数据的高准度和高性能 以典型的人脸512维向量为例，分析型数据库MySQL版向量分析提供百亿向量100 QPS、50毫秒响应时间（RT）约束下99%的数据召回率；两亿向量1000 QPS、1秒 RT约束下99%的数据召回率。结构化和非结构化混合检索 ...
读写RDS MySQL数据
因为RDS本身能承载的数据量有限，不适合大数据分析。更多的场景是在DLA中对存储在OSS、Tablestore中的大数据进行分析，分析完成之后把结果数据回写到RDS中，供前台业务使用。DLA如何读取OSS中的数据，请参见 操作步骤。以 person 表为例，...
音频
BI分析数据配置面板中的详细操作说明，请参见 BI分析模式数据面板功能介绍。音频资源：配置音频资源的地址，与 音频链接 配置项功能相同。若两者都进行了配置，则优先使用数据中的配置。说明 当组件是以分析模式添加后，您可以单击切换数据...
视频
BI分析数据配置面板中的详细操作说明，请参见 BI分析模式数据面板功能介绍。视频地址：（可选）配置视频资源的地址，与 视频地址 配置项功能相同。若两者都进行了配置，则优先使用数据中的配置。说明 当组件是以分析模式添加后，您可以单击...
数仓规划概述
数据集市 数据集市是对某个业务分类制定细化的业务主题，并通过主题域，基于不同分析视角对目标集市中的数据进行主题划分，最终面向业务应用统计分析数据。例如，运营平台数据集市。详情请参见 数据集市。主题域 主题域用于将数据集市按照...
产品简介
使用场景 DLA Ganos的最基本的应用场景就是将存储在不同的数据库系统或文件系统中的时空数据，通过ETL操作，实现数据源之间的数据流转与协同分析。如下图所示，用户通过DLA Ganos可以加载OSS上的GeoTiff文件为RDD模型，然后写入Lindorm...
创建逻辑模型：维度表
后续您可将这些维度表部署到数仓中，通过ETL将实际维度数据按照维度表定义的方式进行存储，方便业务人员在后续的数据分析时进行取用。如上图所示：创建维度表时：可以关联本维度表是用于分析哪个业务分类、哪个数据域，便于后续直接查看...
数据库评估分析
是否评估无效对象 选择是否评估源库画像中的无效对象：是：评估无效对象。否：评估时忽略无效对象。说明 无效对象是指在源库日常维护或者数据迁移的过程中状态变为INVALID的Package、Procedure、Function、View等对象。内核版本 如果目标...
数据集市
背景信息 数据集市是对某个业务分类制定细化的业务主题，并通过主题域，基于不同分析视角对目标集市中的数据进行主题划分，最终面向业务应用统计分析数据。例如，运营平台数据集市。创建数据集市 进入 数据集市。登录 DataWorks控制台，...
分析平台概述
Dataphin提供了简单、快速、高效的数据分析平台，您可通过数据分析对数据仓库中的数据进行洞察、在线查询及可视化分析，提取出有效信息而形成结论，辅助决策。前提条件 需开通智能研发版。分析平台简介 在分析平台上，您可选择您有权限的...
数据治理
数据地图 为什么数据地图数据总览页存储量和存储趋势图相差较大？数据地图血缘展示延迟问题 数据地图新建表搜不到 当前表业务逻辑变更如何通知下游？哪些类型的Hive表支持在数据地图中预览？数据保护伞 数据保护伞为什么有时候查询脱敏有...
通过Quick BI连接StarRocks实例
背景信息 Quick BI是由阿里云提供的一款全场景数据消费式的BI平台，无缝对接各类云上数据库和自建数据库，大幅提升数据分析和报表开发效率。您只需在Quick BI中添加StarRocks数据源并成功连接，然后可以在Quick BI上进行数据的分析和展示。...
分析平台概述
Dataphin提供了简单、快速、高效的数据分析平台，您可通过数据分析对数据仓库中的数据进行洞察、在线查询及可视化分析，提取出有效信息而形成结论，辅助决策。前提条件 需开通智能研发版。分析平台简介 在分析平台上，您可选择您有权限的...
数据分析整体趋势
市场趋势 数据规模高速增长（全球2010-2025年复合增长达到27%，中国则大于30%）带来了强劲的数据分析需求。据Gartner统计，到2025年实时数据占比达30%，其中非结构数据占比达80%，同时数据存储云上规模达45%，而云上数据库规模可达75%。从...
资产安全概述
典型应用场景：数据分析场景的即席查询、数据开发场景的生产数据写开发、数据消费里的数据服务等。静态脱敏 直接修改底层数据的存储，数据存储时就已经是加密或者脱敏过的，例如常见的pn_md5。典型应用场景：数据集成时对敏感数据加密、数...
Quick引擎概述
Quick BI自研的计算内核Quick引擎，托管在阿里云上的SAAS服务实测数据十亿级数据在0.5秒以内完成聚合分析，另外由于依托阿里云，计算资源支持横向扩展，通过增加服务器还可以提供更强大的数据分析计算能力。为什么设计一个新的Quick引擎 ...
资产安全概述
典型应用场景：数据分析场景的即席查询、数据开发场景的生产数据写开发、数据消费里的数据服务等。静态脱敏 直接修改底层数据的存储，数据存储时就已经是加密或者脱敏过的，例如常见的pn_md5。典型应用场景：数据集成时对敏感数据加密、数...
进入组件分析模式
分别为：BI分析图表组件类：单击资产面板中的 BI分析 模块，单击或拖拽模块列表中的某个图表类组件到画布中，会自动进入分析模式。组件添加时，画布中自动弹出 更改数据集 对话框，您可以自定义配置数据集内容，开启以数据为核心的BI分析...
DataWorks on EMR Serverless StarRocks最佳实践
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据分析>SQL查询，在下拉框中选择对应工作空间后单击 进入SQL查询。单击左边侧边栏的 系统管理，设置StarRocks类的查询资源组为独享资源组。回到SQL查询页面，在右上角切换引擎...
萤石云播放器
BI分析数据配置面板中的详细操作说明，请参见 BI分析模式数据面板功能介绍。视频流地址:视频流地址，与配置面板中的 视频流地址 配置项功能相同。若两者都进行了配置，则优先使用数据面板中的配置。说明 当组件是以分析模式添加后，您可以...
MaxCompute账单用量明细分析
通过Excel分析 不足一天 的数据存储费用：查看 数据分类 中的 Storage 存储计费项，会发现在 alian 项目下存储了 333507833900 字节数据，由于是8点上传的数据，所以从09:07开始计量存储费用，一共计量15小时。说明 天计量范围以当天的结束...
阿里云流播放器
BI分析数据配置面板中的详细操作说明，请参见 BI分析模式数据面板功能介绍。视频链接:视频流链接地址，与配置面板中的 视频链接 配置项功能相同。若两者都进行了配置，则优先使用数据面板中的配置。说明 当组件是以分析模式添加后，您可以...
创建MaxCompute数据源
背景信息 MaxCompute即阿里云大数据计算服务，适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化...
ECU详解
弹性计算单元（Elastic compute units，简称ECU）是分析型数据库MySQL版中衡量实例计算能力的元单位。ECU由内存容量和磁盘容量组成。ECU分类 分析型数据库MySQL版中有高性能和大存储两种类型的ECU。高性能：以字母C或者H开头的ECU为高性能...
创建MaxCompute数据源
背景信息 MaxCompute即阿里云大数据计算服务，适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化...
新功能发布记录
SQL审核 优化数据分析 优化 在数据分析中，支持一键直达DTS任务详情页。一键建仓 02月 功能名称 变更类型 功能描述 相关文档 数据分析 新增 支持从RDS MySQL一键创建AnalyticDB MySQL 3.0数据仓库，您可以在数据仓库中进行报表开发、周期...
StarRocks概述
集群规模可以灵活伸缩，支持10 PB级别的数据分析。支持MPP框架，并行加速计算。支持多副本，具有弹性容错能力。说明 本文部分内容来源于开源StarRocks的 什么是StarRocks。StarRocks特性 StarRocks的架构设计融合了MPP数据库，以及分布式...
新建AnalyticDB for MySQL 3.0数据源
背景信息 云原生数据仓库AnalyticDB MySQL版（简称ADB，原分析型数据库MySQL版），是阿里巴巴自主研发的海量数据实时高并发在线分析云计算服务，使得您可以在毫秒级针对千亿级数据进行即时的多维分析透视和业务探索。更多信息，请参见 云...
- 产品推荐
- 这些文档可能帮助您