多值数据写入
时序多值模型 多值的模型是针对数据源建模，我们每一行数据针对的是一个数据源，它的被测量的多个指标在同一行上，所以每一个数据源，数据的来源在每一个时间点上都有一行，这就是多值的模型。比如某个机器的cpu，mem和load指标。每次是...
功能特性
DMS数据可视化 Quick BI数据可视化 Quick BI支持连接云数据库 SelectDB 版实例，连接成功后，您可以在Quick BI上进行数据的分析与展示。本文为您介绍如何为Quick BI添加云数据库 SelectDB 版数据源。Quick BI数据可视化 Grafana数据可视化 ...
DataWorks on EMR Serverless StarRocks最佳实践
DataWorks支持StarRocks数据源，通过数据源对接EMR Serverless StarRocks，可实现EMR Serverless StarRocks的数据集成、开发、分析、数据服务等功能。本文为您介绍EMR Serverless StarRocks在DataWorks上的操作流程。背景信息 了解EMR ...
教程概述
本文为您介绍当需要通过DataV展示海量数据的分析结果时，如何使用DataWorks的数据服务开发数据API，并快速在DataV中调用API，最终将来自MaxCompute的数据成果展示在DataV大屏中，数据开发到数据服务再到数据分析展现一气呵成。注意 本案例...
基本概念
聚合函数通常用于执行数据的统计运算。字符串函数 字符串函数 用于处理字符串，包括字符串拼接、子串截取、字符串替换、字符串大小写转换等。常见的字符串函数有：SUBSTRING、CONCAT、REPLACE、UPPER、LOWER等。数学函数 数学函数 用于数字...
数据总览
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据治理>数据地图，在右侧页面中单击 进入数据地图。在数据地图 首页，单击 元数据采集 后的 数据总览。在数据总览页，查看当前地域阿里云主账号下所有的引擎资源。以...
修饰词
修饰词是基于选择的数据域创建的，是对数据域中的数据不同维度的修饰，用来限定统计数据的业务范围。例如，统计上海区域生鲜门店的销售金额，上海区域和生鲜门店就是对业务范围的限定修饰。前提条件 已创建数据域，用于确定修饰词所属的...
基于Delta lake的一站式数据湖构建与分析实战
2.统一元数据服务 对象存储本身是没有面向大数据分析的语义的，需要结合Hive Metastore Service等元数据服务为上层各种分析引擎提供数据的Meta信息。数据湖计算与分析 相比于数据仓库，数据湖以更开放的方式对接多种不同的计算引擎，如传统...
功能特性
阿里云Flink（流式）DataHub（实时）DataHub是MaxCompute提供的流式数据处理（Streaming Data）服务，它提供流式数据的发布（Publish）和订阅（Subscribe）的功能构建基于流式数据的分析和应用。DataHub（实时）SLS投递 将日志服务采集的...
实例画像
资源：主要统计分析数据库实例的磁盘、内存和空间资源的使用状况。会话：主要统计分析数据库实例的活跃会话和异常会话。访问：主要统计分析数据库实例的新增以及未知来源的访问。请求：主要统计分析数据库实例的慢SQL请求概况，并给出优化...
使用DMS进行数据归档
随着企业的数据资料持续积累，需要持久化地保留数据资产，但是数据的存储成本居高不下，因此DMS和 AnalyticDB PostgreSQL版 Serverless模式共同推出了数据归档功能，可以面对数据库实现灵活低价、归档管理和高分析性能的能力。功能介绍 DMS...
实例画像
资源：主要统计分析数据库实例的磁盘、内存和空间资源的使用状况。会话：主要统计分析数据库实例的活跃会话和异常会话。访问：主要统计分析数据库实例的新增以及未知来源的访问。请求：主要统计分析数据库实例的慢SQL请求概况，并给出优化...
规格及选型
案例四：自动驾驶企业 用户为自动驾驶领域企业，需要基于车采数据进行地理位置和时序的采集数据分析，要求对JSON格式的友好兼容和时空数据的分析能力，构建业务看板并支持特征工程。建议：使用 AnalyticDB PostgreSQL版 存储弹性模式，实例...
查看报表
报表中心功能通过综合分析报告、等保参考分析和数据安全法报告展示您数据库资产的审计情况和安全风险的分析结果。您可以根据业务需要使用对应的报表。本文介绍支持的报表类型，以及如何通过报表中心查看或导出报表。支持的报表类型 报表...
实例画像
资源：主要统计分析数据库实例的磁盘、内存和空间资源的使用状况。会话：主要统计分析数据库实例的活跃会话和异常会话。访问：主要统计分析数据库实例的新增以及未知来源的访问。请求：主要统计分析数据库实例的慢SQL请求概况，并给出优化...
如何对JSON类型进行高效分析
方案 业务系统采用JSON类型主要由于半结构化数据的灵活性和高效分析的需求，因此，灵活性与高性能就成为衡量海量半结构化数据分析的解决方案好坏的关键指标。传统数据库解决方案 传统关系型数据库（MySQL、PostgreSQL与ClickHouse等）在...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
产品优势
企业数据分析全场景覆盖 一站式 满足企业各种场景 的数据分析和决策的诉求，从管理层决策分析的驾驶舱，到业务专题分析门户和报表，再到一线人员的自助分析和临时取数等。人找数据和数据找人 两种数据消费的形态相结合，企业业务人员既可以...
兼容性概述
商业智能（BI）分析工具可以将复杂的数据转换成图表、仪表盘等形式，以直观的方式展示分析结果，使您能够快速把握业务状态。BI分析工具连接MaxCompute，能够充分利用MaxCompute强大的数据处理能力和高性能的计算资源，为您带来更高效的数据...
品牌升级
分析型数据库MySQL版（ADS）目前已品牌升级至 云原生数据仓库 AnalyticDB MySQL 版。云原生数据仓库 AnalyticDB MySQL 版 是基于湖仓一体架构打造的实时数仓，高度兼容MySQL，支持毫秒级更新，亚秒级查询。无论是数据湖中的非结构化或半...
事件中心
在数据库日常运维中，您可以通过查看数据库实例中计划执行、正在执行和已执行完成的性能事件（例如异常事件、优化事件、弹性伸缩事件等），及时且全面地了解数据库的性能问题及相关的运维操作。本文介绍如何通过数据库自治服务DAS的性能...
羲和分析计算引擎
面向海量数据的云原生数仓需要满足不同的数据分析场景，包括在线报表，在线交互式分析，以及ETL等。不同的场景依赖分析计算引擎自适应的采用不同的查询优化技术，包括按需的动态代码编译，CPU友好的内存数据布局，以及自适应的并行度调整等...
统计信息
由于统计信息功能是在集群内核版本为3.1.6及以上版本的 AnalyticDB MySQL 数仓版（3.0）集群才默认开启的，所以当集群内核版本从3.1.6以下版本升级到3.1.6及以上版本时，会触发一次全量数据的统计信息收集，导致集群内核版本完成升级后的...
实时数据消费概述
实时数据消费功能包含高速数据导入API和实时数据源消费两部分，可实现数据直接写入Segment（分片单元），避免通过COPY或INSERT方式造成的Master写入负载高的问题，也可实现使用 AnalyticDB PostgreSQL版 单产品直接消费Kafka数据。...
创建StarRocks数据源
通过创建StarRocks数据源能够实现Dataphin读取StarRocks的业务数据或向StarRocks写入数据。本文为您介绍如何创建StarRocks数据源。背景信息 StarRocks是一款高性能分析数据库，支持实时、多维和高度并发的数据分析。StarRocks具有高度可...
功能特性
列存索引可以增强宽表中海量数据的分析计算能力。宽表引擎访问列存索引 计算引擎访问宽表数据 支持在Lindorm计算引擎中通过Lindorm SQL访问和写入宽表数据。计算引擎访问宽表数据 宽表引擎 动态列 Lindorm宽表引擎支持动态列功能，用于在...
创建StarRocks数据源
通过创建StarRocks数据源能够实现Dataphin读取StarRocks的业务数据或向StarRocks写入数据。本文为您介绍如何创建StarRocks数据源。背景信息 StarRocks是一款高性能分析数据库，支持实时、多维和高度并发的数据分析。StarRocks具有高度可...
功能发布记录（2023年）
极大提高了企业数据分析的效率。2023.08.15 华东2（上海 华东1（杭州）华北2（北京）华南1（深圳）华北3（张家口）西南1（成都）华北6（乌兰察布）地域 所有DataWorks用户 增强分析（卡片和报告）2023-06 功能名称 功能描述 发布时间 发布...
多维分析表
使用限制 为趋势分析表添加数据时，有以下限制：度量 由数据的度量决定，最少选择1个度量。日期 由数据的维度决定，只能选择1个日粒度的日期维度字段。维度 由数据的维度决定，最少选择1个维度，最多只能选择10个维度。说明 维度较多时，会...
2020年
2020-09-10 全部区域 使用Logview 2.0查看作业运行信息 备份与恢复功能商业化发布 MaxCompute提供数据备份与恢复功能，系统会自动备份数据的历史版本（例如被删除或修改前的数据）并保留一定时间，您可以对保留周期内的数据进行快速恢复，...
通过操作审计查询行为事件日志
DownloadSqlResult 下载数据分析的SQL查询结果 数据分析 DownloadSheet 下载数据分析电子表格 RunTask 运行数据分析中的SQL查询命令 查看事件详情。单击目标事件的 查看事件详情，即可查看事件的事件源、事件记录、相关资源等详细信息。...
产品优势
高性能&低成本 超大规模数据写入实时可见，确保数据的强一致性。支持秒级甚至毫秒级对海量数据进行查询和计算，复杂SQL查询速度相比传统的关系型数据库快10倍。支持计算资源按需在线扩缩容、分时弹性和按需弹性等功能；同时支持 冷热数据...
趋势分析表
使用限制 为趋势分析表添加数据时，有以下限制：度量/行 由数据的度量决定，最少选择1个度量。日期/列 由数据的维度决定，只能选择1个维度，且必须是日粒度字段。图表概述 使用场景 常用于宏观指标的分析，可以分析年度、季度、月度、周、...
DataWorks数据服务对接DataV最佳实践
过去，如果您想要通过DataV展示海量数据的分析结果，需要自建一套离线数据计算自动导入MySQL的任务流程，过程繁琐且成本高。现在通过DataWorks为您提供的 数据集成>数据开发>数据服务 的全链路数据研发平台，结合MaxCompute即可快速搭建...
统计信息
执行逻辑 在每次导入事务提交后，SelectDB 将记录本次导入事务更新的表行数用以估算当前已有表的统计数据的健康度（对于没有收集过统计数据的表，其健康度为0）。当表的健康度低于60（可通过参数 table_stats_health_threshold 调节）时，...
新建洞察分析
在 自然语言SQL生成 对话框中，下拉选择需要分析的数据表并输入需要查看的结果描述，例如这里的获取门店订单总数和总计销售额，单击 图标。在 自然语言生成 对话框中，确认SQL语句无误后，单击 插入SQL。自动生成的SQL语句会出现在临时查询...
新建统计周期
统计周期即统计数据的时间范围，例如最近7天、最近30天等。本文为您介绍如何新建统计周期。前提条件 仅支持 智能研发版。若需使用，请升级当前版本。升级版本，请参见 升级。完成计算引擎类型设置，详情请参见 设置Dataphin实例的计算引擎...
新建统计周期
统计周期即统计数据的时间范围，例如最近7天、最近30天等。本文为您介绍如何新建统计周期。前提条件 仅支持 智能研发版。若需使用，当前租户还需开通智能研发模块。完成计算引擎类型设置，详情请参见 设置计算引擎为Hadoop 设置Dataphin...
Serverless Spark概述
DLA Spark基于云原生架构，提供面向数据湖场景的数据分析和计算功能。开通DLA服务后，您只需简单的配置，就可以提交Spark作业，无需关心Spark集群部署。重要 云原生数据湖分析（DLA）产品已退市，云原生数据仓库 AnalyticDB MySQL 版 湖仓...
产品计费
实时搜索分析的数据采用热存储，并会自动适应并创建优化索引，以确保数据的读取速度。开启后赠送1天的数据热存储。洞察分析 0.08元/GB 0.12元/GB 使用SQL洞察自动聚合分析时收取该费用。数据热存储 0.01元/GB/天 0.015元/GB/天 数据热存储...
- 产品推荐
- 这些文档可能帮助您