时序引擎应用开发简介
5.连续查询 连续查询应用于大数据查询的场景。通过创建连续查询对新写入的数据预聚合处理，减少实时查询的数据量，从而减少计算量并降低查询延迟。6.预降采样 预降采样应用于较长时间范围的数据查询场景。在数据写入时按照设置的规则将原始...
数据模型
在数据查询时，对于查询涉及到的数据，会进行对应的聚合。数据在不同时间聚合的程度可能不一致。比如一批数据刚导入时，可能还未与之前已存在的数据进行聚合。但是对于您而言，您只能查询到聚合后的数据。即不同的聚合程度对于您的查询而言...
自媒体：易撰
同时我们业务上会有大量的大范围、多维度的数据查询检索，PolarDB的高性能读能力解决了我们这个业务场景的需求。通过 PolarDB-X 的高并发写能力和PolarDB的高性能读能力，最终完美解决了我们资讯数据入库和大范围查询的业务痛点。—— 长沙...
数据服务入门
步骤一：创建数据源并配置网络连通性 使用数据服务创建API前，您需将数据库或数据仓库添加为DataWorks的数据源，并保障数据服务资源组与您的目标数据源网络连通，以便调用API时DataWorks可成功访问数据源。说明 DataWorks工作空间将集群或...
功能优势
当您的数据库中有数据需要被保护时，可以使用RDS MySQL全密态数据库功能，该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全，使被保护数据免受未授权访问。本文将详细介绍RDS MySQL全密态数据库功能的优势，帮助您...
查询执行模式
适用场景：适用于执行时间长、计算数据量大的查询。例如：清洗类查询（Extract-Transform-Load）。默认执行模式 版本 产品系列 默认执行模式 是否支持Batch模式 数仓版（3.0）预留模式集群版 Interactive 否 弹性模式集群版（新版）是 切换...
IO加速
针对临时表和查询产生的临时文件，RDS PostgreSQL的IO加速能力允许将这些临时数据存储到高速的缓存介质中，使得数据库引擎对这些临时数据的读写IO更快，大大加快查询的处理，在复杂查询场景下可提高100%查询性能。价值效益 RDS PostgreSQL...
使用SDK示例代码消费订阅数据
消费订阅速度变慢 无 可通过查询统计信息中的参数 DStoreRecordQueue 和 DefaultUserRecordQueue 队列的大小，分析消费数据变慢的原因。查询方式，请参见 消费数据的统计信息。如参数 DStoreRecordQueue 保持为0，则表示DTS服务器拉取数据...
使用SDK示例代码消费订阅数据
消费订阅速度变慢 无 通过查询统计信息中的参数 DStoreRecordQueue 和 DefaultUserRecordQueue 队列的大小，分析消费数据变慢的原因。查询方式，请参见 消费数据的统计信息。如参数 DStoreRecordQueue 保持为0，则表示DTS服务器拉取数据...
DataV读取数据源超时
问题原因 查询超时的原因如下：使用SQL查询的业务数据表数量太大。API接口内部业务调用链路较长。解决方案 执行以下操作，通过优化查询时间的方式进行解决：使用SQL查询的业务数据表数量太大 针对查询条件所使用的字段添加索引，减少扫描行...
概述
Apache Druid是一个分布式内存实时分析系统，用于解决如何在大规模数据集下快速的、交互式的查询和分析问题。基本特点 Apache Druid具有如下特点：支持亚秒级的交互式查询。例如，多维过滤、Ad-hoc的属性分组和快速聚合数据。支持实时的...
功能特性
适用于查询频率高、查询数据量较大的场景，同时也能够给您使用DLA的费用预算带来一定的确定性。创建虚拟集群 元数据管理 可视化全局管理视图，可以进行元数据的操作，例如创建Schema、查看库表信息、查询数据等。查询Schema详情 元信息发现...
快速体验
步骤一：数据查询 本文示例基于阿里电商数据集（commerce_ali_e_commerce），该表统计淘宝不同时间段的订单详情，将使用 SQL查询 功能，对数据集做查询和排序操作，并对查询的结果进行分析和共享。进入 SQL查询。您可以通过如下两种方式...
Presto FAQ
原因：大部分情况是同步数据到OSS存在问题。解决方案：您可以查看自己的OSS的数据是否正常同步。性能相关问题 如何解决查询报错：“Query exceeded distributed user memory limit of 2.00TB or Query exceeded per-node user memory limit...
即时查询DBS逻辑备份
通常情况下，查询备份数据需要先把数据恢复到新实例，并进行初始化数据库、拷贝备份、恢复数据等步骤，费时费力。本文将介绍如何在不恢复数据的情况下，即时查询备份数据。前提条件 已创建并配置逻辑备份类型的DBS备份计划。具体操作，请...
计费概述
适用于查询频率高、查询数据量较大的场景，同时也能够给您使用DLA的费用预算带来一定的确定性。说明 若您的业务量波动较大且频繁，每个月甚至每周都可能要变更集群配置，推荐您购买按量付费集群并搭配资源包使用。按计算资源付费（CU版计费...
产品功能
您也可以通过 TSDB 产品控制台的数据查询功能进行数据分组、降采样、空间聚合的可视化数据查询展现。数据管理 数据时效设置 您可以通过控制台或者 API 设置数据的有效期。数据时效开启并设置完成后，系统对于定义的过期数据将立即标记失效...
数据查询
数据查询（兼容HBase）数据查询（兼容HBase）界面支持查询指定表的详细信息，也支持为已有的表新增相关属性。查询已有数据 支持查询 SQL表 和 HBase表 中已有的数据。在集群管理系统的左侧导航栏中，选择 数据查询>数据查询（兼容HBase）。...
引擎功能
数据查询 支持通过SQL进行数据查询，兼容基于OpenTSDB协议的查询API等方式进行数据查询。用户也可以通过产品控制台的数据查询功能进行数据分组、降采样、空间聚合等可视化数据查询展现。数据管理 数据库管理 时序数据的存储以Database为...
查询账单
在 计费项 为 SQL洞察和审计-数据查询 的消费明细中，查看数据查询费用情况。对于使用DAS企业版 V3的数据库实例：在 计费项 为 下载数据量 的消费明细中，查看数据导出的费用。在 计费项 为 洞察分析 的消费明细中，查看洞察分析的费用。在...
数据查询
本文介绍数据查询的相关问题。物理表查询支持的云计算资源类型包含哪些？物理表查询支持的云计算资源类型包含哪些？目前包含的有MaxCompute、RDS MySQL、PostgreSQL、AnalyticDB PostgreSQL、AnalyticDB MySQL 3.0、SQLServer、Oracle、...
开发Dataphin数据源并加速数据查询
本文为您介绍如何开发Dataphin数据源及加速数据查询。前提条件 已完成数据源分组的创建。具体操作，请参见 创建服务项目分组。已完成Hologres计算源的创建。具体操作，请参见 创建加速计算源。开发Dataphin数据源 在Dataphin首页，单击顶部...
数据查询
查询表数据 在集群管理系统的左侧导航栏中，选择 数据查询>SQL执行器。在 namespace 下拉列表中选择命名空间，页面右侧会自动显示该命名空间中的表。在编辑器中输入SQL语句。单击 执行。说明 执行操作可以通过键盘完成。Windows系统：CTRL+...
应用场景
实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...
数据源读取时间超时的优化思路
使用SQL查询的业务数据表数量太大，查询超时 针对查询条件所使用的字段添加索引，减少扫描行数。在数据库中增加定时任务，定时计算所需要的业务指标并更新结果表。DataV组件直接查询结果表的数据，不需要在每次组件获取数据时，再次执行SQL...
数据源读取时间超时的优化思路
使用SQL查询的业务数据表数量太大，查询超时 针对查询条件所使用的字段添加索引，减少扫描行数。在数据库中增加定时任务，定时计算所需要的业务指标并更新结果表。DataV组件直接查询结果表的数据，不需要在每次组件获取数据时，再次执行SQL...
如何减少查询数据点提高查询效率
本文介绍如何通过减少单次查询数据点来提升查询效率。时序查询优化的其中一个原则就是，查询命中的数据点越少，查询效率越高。因此来说查询条件尽量精确。如何减少扫过的数据点数 查询周期与写入的采集周期强相关，尽量减少毫秒级采集周期...
查询并下载数据
通过即席查询您可以根据当前的业务情况自定义并执行查询语句和下载查询的数据。...数据下载文件保留 30天，如数据查询时间为2023-04-12，申请时间为2023-04-13，则文件过期时间为2023-04-11。更多信息，请参见 数据下载配置。
减灾与应急时空解决方案与案例
公司主营OpenRIS灾害风险大数据平台提供了海量灾害数据的快速地图展示、统计查询、切割下载、上传数据定制化在线分析等功能，实现了灾害数据与模型一体化云服务。在数据与系统上云过程前，遇到了如下挑战：长期积累的时空数据类型多、数据...
新建及管理动态脱敏规则
数据查询：针对不参与生产环境调度的数据查询（如任务的一次性运行、即席查询、分析查询），会对select语句的查询结果进行脱敏后再展示，可避免影响生产环境任务正常运行的前提下尽可能保障敏感数据的安全。说明 如需对数据进行较好的保护...
新建及管理动态脱敏规则
数据查询：针对不参与生产环境调度的数据查询（如任务的一次性运行、即席查询、分析查询），会对select语句的查询结果进行脱敏后再展示，可避免影响生产环境任务正常运行的前提下尽可能保障敏感数据的安全。说明 如需对数据进行较好的保护...
概述
解决方案 T+1全量同步一键建仓是指通过DLA控制台配置数据源（RDS、PolarDB for MySQL、MongoDB数据源、ECS自建数据库数据）和目标OSS数据仓库，系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，...
创建数据集
数据库（必填）执行数据查询的目标数据库。您需要有该数据库的查询权限。查询SQL（必填）查询数据对应的 SELECT SQL，可自由输入任意可正常执行的查询SQL。说明 如果需要在展示图表时进行数据筛选，可在SQL中引用变量，引用变量的方式为$...
SQL查询概述
③ 编辑区 您可在编辑器中编写SQL查询代码进行数据查询。④控制台 运行SQL查询后，查询结果将在控制台为您展示，您可以在控制台中查看您的运行结果、日志、代码等信息，并且支持对运行结果进行可视化分析。具体支持的功能详情如下：运行...
SQL查询概述
③ 编辑区 您可在编辑器中编写SQL查询代码进行数据查询。④控制台 运行SQL查询后，查询结果将在控制台为您展示，您可以在控制台中查看您的运行结果、日志、代码等信息，并且支持对运行结果进行可视化分析。具体支持的功能详情如下：运行...
数据探索概览
下面将详细介绍InfluxQL的SELECT语句和实用的数据查询语法。基础 查询结果的配置 有关查询语法的提示 SELECT语句 ORDER BY time DESC 时间语法 WHERE子句 LIMIT和SLIMIT子句 正则表达式 GROUP BY子句 OFFSET和SOFFSET子句 数据类型和转换 ...
避免下盘
这种情况往往是查询能够使用的内存调小导致的，原因可能是受到了 resource group 或 resource queue 的限制，或者 statement_mem 参数本身设置的不合理。对于这种情况，您可以通过调大 statement_mem 参数到一个合理的参数来避免算子下盘：...
数据源管理
本文介绍如何管理数据源。前提条件 已登录DataV-Atlas管理控制台。已进入项目编辑器页面。添加数据 单击页面左下角的 添加数据，打开数据库选择窗口。在 已有数据集 页签中，选择需要添加的数据库下的空间表后，单击 添加到项目。说明 您也...
创建数据脱敏场景
在 数据分析 通过 SQL查询 功能查询数据时，查询的敏感数据会按照配置的脱敏规则进行脱敏。说明 EMR引擎暂不支持使用数据开发展示脱敏，Hologres引擎暂不支持使用数据开发/数据地图展示脱敏。数据分析展示脱敏 在 数据分析 通过 SQL Notes ...
加速服务
通过使用加速服务，您可以在调用API时提高数据查询的速率和性能。本文为您介绍两种加速方案的使用方法。背景信息 DataWorks数据服务的加速方案有两种：加速服务 和 MCQA，您可以 点击这里 加入DataWorks用户钉群进行咨询。两种方案的对比...
- 产品推荐
- 这些文档可能帮助您