Dataphin即席查询下载数据，较大的数值展示为科学计数...
问题描述 本文主要描述了Dataphin即席查询下载数据，较大的数值展示为科学计数法的解决方法。问题原因 导出来的是CSV文件，显示是Excel的机制，需要我们自己设置格式。解决方案 在Excel中选中该列，设置单元格格式，在数字中将分类选为数值...
Dataphin即席查询下载数据，较大的数值最后四位数为...
问题描述 本文主要描述了Dataphin即席查询下载数据，较大的数值最后四位数为0000的解决方法。问题原因 导出来的是csv文件，显示的时候末尾位数为0000是Excel的机制。解决方案 使用Notepad+等工具打开。适用于 Dataphin v2.9.4-3
如何查询云数据库Redis中过大的Key
您可通过以下方式查询 云数据库Redis版 中的大Key：在Redis控制台查看大Key（推荐），对性能几乎无影响，具体操作请参见 实时Top Key统计。对历史备份数据进行分析，找出大Key、热Key等，对线上服务无影响，具体操作请参见 离线全量key分析...
时序引擎应用开发简介
如果需要使用SQL查询数据，可以手动创建时序数据表或将Schema约束策略设置为弱约束。时序引擎基于SQL提供了更多的时序特性功能和更好的性能，推荐开发者使用SQL查询数据。使用OpenTSDB或单值模型写入：Schema约束策略为无约束，即无法创建...
JindoFS实战演示
Impala如何高效查询OSS数据 Impala如何高效查询OSS数据 2021-06-08 Apache Impala是一个开源的大数据查询分析引擎，能够快速查询分析存储在Hadoop集群的PB级数据。如果您已将HDFS数据迁移至OSS中，可通过在Impala中使用JindoFS SDK，高效...
性能优化
当查询数据量大时，您可以指定查找数据的范围（特定的label，查询属性的起始范围、终止范围、迭代次数等）。示例：推荐方案（将过滤属性限制在10~30内）g.V().hasLabel("person").has("age",P.gt(10).and(lt(30))).limit(5)普通方案 g.V()....
功能发布记录（2023年）
2023.4.18 所有地域 所有DataWorks用户 SQL查询 大数据公共数据集上线 基于大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等），通过DataWorks与MaxCompute快速完成TB级别大数据分析。2023.4.11 所有地域 所有DataWorks用户 SQL...
Github实时数据同步与分析
最终效果如下：（可选）历史离线数据分析 实时数仓Hologres与大数据计算服务MaxCompute深度融合，可以组成一体化的大数据查询与分析架构。在MaxCompute公共数据集中，存储了历史GitHub全量数据。如果想要做更长时间的数据分析，有两种方式...
风险识别管理（新版）
规则名称 规则类型 规则等级 规则配置 非工作时间查询大数据量敏感数据 数据访问风险 低 如下时间段查询数据量大于10000时命中该规则。周一至周五：22:00～24:00。周六至周日：00:00～24:00。相似SQL查询 数据访问风险 低 十分钟内查询相似...
Superset（仅对存量用户开放）
查询数据库。选择 SQL工具箱>SQL编辑器。选择添加的数据库Hive JDBC Server。选择 default 模式。您可以执行Hive命令查看数据库信息。如下图所示。常见问题 问题现象：EMR-4.6和EMR-3.33之前版本的集群，使用admin用户第一次登录Superset的...
加速服务
数据服务支持对部分数据源表的查询提供加速能力，加速能力包含DataWorks数据服务提供的加速能力和MaxCompute本身支持的加速方案（MCQA）。通过使用加速服务，您可以在调用API时提高数据查询的速率和性能。本文为您介绍两种加速方案的使用...
查询加速（MCQA）
查询延时要求高，秒级返回（例如大部分查询不超过5秒，不同查询作业由于数据规模和查询复杂度不同，查询时间有较大差异）。海量数据明细查询分析 MCQA可以自动识别查询作业特征，既能快速响应，处理小规模作业，同时还可以自动匹配大规模...
Quick BI仪表板图表查询时间远大于图表SQL在数据库...
问题描述 Quick BI仪表板图表查询时间远大于图表SQL在数据库查询时间什么原因。问题原因 查看用户侧图表查询时的接口返回信息，访问数据库建立连接时间花费20秒，查询SQL任务2毫秒，访问数据库时花费了较长时间导致报表加载时间较长。解决...
SELECT MATERIALIZED VIEW
背景信息 物化视图状态分为如下两种：物化视图有效 执行查询语句时，MaxCompute会从物化视图中直接查询数据，不会从源数据中查询数据。物化视图无效 执行查询语句时，MaxCompute无法从物化视图中直接查询数据，会从源数据中查询数据，无法...
查询管理与分析
在 运行中大查询 页面，您可以直观监测到大查询操作的各项关键性能指标，包括扫描的数据总量、已处理行数以及CPU和内存的耗时情况。慢查询 在左侧导航栏，选择 诊断与分析>慢查询。在 慢查询 页面，单击待查看的 查询ID，进入该查询的详情...
查询Delta表数据
E-MapReduce也支持对已经存在的Delta数据，通过创建Hive外表来查询数据，详情请参见 创建Hive外表。使用限制 本文适用于EMR-3.37.0及后续版本，EMR-5.3.0及后续版本以及EMR-4.10.0版本。通过Spark创建表查询Delta表 进入Spark命令行。使用...
云数据库 RDS MySQL 版的decimal字段过大导致查询不...
问题原因 云数据库 RDS MySQL 版的 decimal 字段过大查询不准的情况，这是MySQL数据库的BUG引起。解决方法 可以通过添加索引进行优化解决，优化SQL语句如下。create table mlgtestdecimal(`campaign_id` decimal(24,0)NOT NULL,name ...
云数据库 RDS MySQL 版的decimal字段过大导致查询不...
问题原因 云数据库 RDS MySQL 版的 decimal 字段过大查询不准的情况，这是MySQL数据库的BUG引起。解决方法 可以通过添加索引进行优化解决，优化SQL语句如下。create table mlgtestdecimal(`campaign_id` decimal(24,0)NOT NULL,name ...
快速体验MaxCompute
本文指导您基于MaxCompute提供的公开数据集，通过 MaxCompute控制台，快速体验在MaxCompute上执行SQL语句查询数据及下载查询结果到本地的操作。前提条件 已创建一个MaxCompute项目。操作详情请参见 创建MaxCompute项目。已拥有对应...
查询非结构化数据
MaxCompute 2.0支持通过外部表的方式直接访问OSS、OTS等。MaxCompute Studio对此提供了一些代码模板方便您快速进行非...新建一个MaxCompute SQL脚本，输入如下查询语句，并单击 图标，查询数据。相关文档 示例：通过自定义解析器创建OSS外部表
GetDataServiceFolder
调用GetDataServiceFolder查询数据服务文件夹。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是...
GetDataServiceGroup
调用GetDataServiceGroup查询数据服务业务流程。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String ...
GetDataServiceApplication
调用GetDataServiceApplication查询数据服务App的详情。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action ...
Time travel查询与增量查询
对于Transaction Table2.0类型的表，MaxCompute支持查询回溯到源表某个历史时间或者版本进行历史Snapshot查询（Time travel查询），也支持指定源表某个历史时间区间或者版本区间进行历史增量查询（Incremental查询）。本文为您介绍...
Flink Table Store与Hive集成
E-MapReduce的Flink Table Store服务支持在Hive中查询数据。本文通过示例为您介绍如何在Hive中查询Flink Table Store中的数据。使用限制 仅EMR-3.45.0版本、EMR-5.11.0版本的集群，支持在Hive中查询Flink Table Store中的数据。操作步骤 ...
Flink Table Store与Trino集成
E-MapReduce的Flink Table Store服务支持在Trino中查询数据。本文通过示例为您介绍如何在Trino中查询Flink Table Store中的数据。使用限制 仅EMR-3.45.0版本、EMR-5.11.0版本的集群，支持在Trino中查询Flink Table Store中的数据。操作步骤...
QueryPublicModelEngine
调用QueryPublicModelEngine接口，使用FML语句查询数据建模引擎的信息。每次调用该接口均需使用FML语句请求获取查询信息。除了数仓分层、业务过程和数据域查询外，其他引擎信息查询均可使用分页查询方式。您可以在FML语句结尾增加offset ...
查询数据开发中可用的集群列表
调用ListFlowClusterAll接口，查询数据开发可用的集群列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 ...
SQL查询
本文为您介绍如何通过SQL语句查询数据源。支持查询的数据源 SQL查询支持的数据源包含MaxCompute、Hologres、EMR Hive、EMR Spark SQL、EMR Impala、EMR Presto、EMR Trino、CDH hive、StarRocks、ClickHouse、AnalyticDB for MySQL3.0、...
自媒体：易撰
业务端存在复杂查询，查询涉及的数据时间跨度大。单表10亿级数据，亿级数据需要多维度查询。业务端数据存储量大，TB级数据存储诉求，且数据量持续高速增长。业务端数据有更新诉求，对事务有强一致性要求。解决方案 通过 PolarDB-X+RDS的...
SQL处理优化
在查询效率上，跟查询普通表最大的不同在于，读取源表数据文件时，可能会涉及大量 DeltaFile 的合并以及数据历史中间状态的消除，详情可参见 TimeTravel 查询设计，从而极大影响读取效率，因此对于查询频率和效率要求比较高的业务场景，...
聚合支付方案
分析型需求 随着数据量的增大，数据查询涉及的量级呈指数级上升，针对商户等大数据量场景的分析查询，单体MySQL已无法满足需求。解决方案 阿里云通过多款云数据库产品为利楚扫呗制定以下解决方案：方案解读：使用DRDS分库分表将数据库进行...
跨实例查询
大数据场景（例如TPC-H 1 TB数据）下，跨实例查询数据性能约为本地查询数据性能的50%。跨实例查询数据需要跨网络传输数据，为了减少网络IO，请尽量增加外表的WHERE过滤条件。相关文档 AnalyticDB PostgreSQL版 也支持跨库查询，详情请参见 ...
TPC-H性能测试说明
TPC-H简介 以下文字描述引用自 TPC Benchmark H(TPC-H)：“TPC-H是一个决策支持基准，由一套面向业务的临时查询和并发数据修改组成。选择的查询和填充数据库的数据具有广泛的行业相关性。该基准测试说明了决策支持系统可以检查大量数据，...
子查询（SUBQUERY）
当您需要在某个查询的执行结果基础上进一步执行查询操作时，例如单独计算聚合值、检查某条记录的存在性、筛选基于另一查询结果的数据、关联更新或删除操作、简化JOIN操作以获取单个值、作为派生表给主查询使用、提供排序或分组的依据以及...
时序引擎版本说明
修复进行删除操作后新写入的数据无法查询的问题。优化读写性能，稳定性修复。3.4.34 发布日期 类型 说明 2023年11月02日 功能优化 稳定性修复。3.4.33 发布日期 类型 说明 2023年10月11日 功能优化 优化内存使用体验。优化查询性能。完善...
ListFileVersions
UseType String NORMAL 文件所属的功能模块，包括NORMAL（数据开发）、MANUAL（手动任务）、MANUAL_BIZ（手动工作流）、SKIP（数据开发的空跑调度）、ADHOCQUERY（临时查询）和COMPONENT（组件管理）。PageNumber Integer 1 当前数据页的...
数据模型
这意味着Aggregate模型可以通过预聚合，极大地降低聚合查询时所需扫描的数据量和查询的计算量，非常适合报表类统计分析场景。该模型对 count(*)查询不友好，因为固定了Value列上的聚合方式，在进行其他类型的聚合查询时，需要考虑语义正确...
通过操作审计查询行为事件日志
DeleteBusiness 删除业务流程 ExecuteFile 将文件作为临时任务执行 LockFile 偷锁编辑 DICreateDatasource 数据集成新增数据源 数据集成 DIBatchCreateDatasource 数据集成批量新增数据源 DIUpdateDatasource 数据集成修改数据源 ...
Catalog概述
使用External Catalog查询数据时，StarRocks会用到外部数据源的两个组件：元数据服务：用于将元数据暴露出来供StarRocks的FE进行查询规划。存储系统：用于存储数据。数据文件以不同的格式存储在分布式文件系统或对象存储系统中。当FE将生成...
- 产品推荐
- 这些文档可能帮助您