开发Dataphin数据源并加速数据查询

本文为您介绍如何开发Dataphin数据源及加速数据查询。前提条件 已完成数据源分组的创建。具体操作,请参见 创建服务项目分组。已完成Hologres计算源的创建。具体操作,请参见 创建加速计算源。开发Dataphin数据源 在Dataphin首页,单击顶部...

配置Quick引擎

结果缓存是一种应用范围很广且非常有效的数据查询加速方式,对一定时间内存在重复查询的数据集都可以配置查询缓存,特别是重复查询较多的场景,例如仪表板展示类,可以大幅提升查询性能。开启查询结果缓存,可配置不同缓存时间,如果数据...

StarRocks概述

联邦查询 StarRocks支持使用外表的方式进行联邦查询,当前可以支持Hive、MySQL、Elasticsearch、Iceberg和Hudi类型的外表,您无需通过数据导入,可以直接进行数据查询加速。高效更新 StarRocks支持明细模型、聚合模型、主键模型和更新模型...

调用Dataphin数据

具体操作,请参见 开发Dataphin数据源并加速数据查询。已完成Dataphin数据源分组的创建。具体操作,请参见 创建服务项目分组。已获取Dataphin数据源应用的AppKey和AppSecret。操作流程 步骤一:查询并申请Dataphin数据源 在数据服务市场中...

什么是EMR Serverless StarRocks

联邦查询 StarRocks支持使用外表的方式进行联邦查询,当前可以支持Hive、MySQL、Elasticsearch、Iceberg和Hudi类型的外表,您无需通过数据导入,可以直接进行数据查询加速。高效更新 StarRocks支持明细模型、聚合模型、主键模型和更新模型...

LTS(原BDS)服务介绍

MaxCompute/Hive->Lindorm 离线数据查询加速,将数仓中的明细、指标等数据批量回流Lindorm提供在线查询。待补充,目前可联系值班咨询 Lindorm 数据导出 ODPS(MaxCompute)重要 该功能自2023年6月16日下线,2023年6月16日后购买的LTS 不再...

访问列存数据

查询加速 对指定表或者表中的指定分区进行数据整理(Rewrite),可以增强数据的有序性或紧凑性,从而提升数据扫描性能。假设表结构如下:CREATE TABLE mydb.mytable(id INT NOT NULL,city STRING NOT NULL,name STRING,score INT)...

创建服务项目分组

分组用于分类管理服务单元、应用、Dataphin数据源和API。在您开始创建API、调用API或创建Dataphin数据源前,首先需要创建...完成Dataphin数据源分组创建后,您就可以开发Dataphin数据源,具体操作请参见 开发Dataphin数据源并加速数据查询

概述

适用场景 共享集群(湖仓加速版)适用的场景如下:数据存储于OSS或者MaxCompute,查询数据频率低、延时要求低的场景。使用复杂查询来查询大量外表数据,小规格的独享实例难以满足要求的场景。加速查询湖仓数据并对接BI分析的场景。例如,...

功能更新动态(2022年之前)

2021年08月19日 华北2(北京)、华东1(杭州)网络连通解决方案 2021年08月24日 华南1(深圳)2021年08月26日 华东2(上海)数据服务:支持数据服务模块的数据查询加速、支持的数据源类型和版本拓展 为了满足对数据查询速度有要求的业务...

数据服务概述

功能介绍 数据服务支持基于业务数据源的物理表或Dataphin生成的逻辑表 创建服务项目分组 和 开发Dataphin数据源并加速数据查询,以满足不同场景的业务诉求。后续应用就可以 调用API 和 调用Dataphin数据源。同时数据服务支持 运维监控API,...

文档更新动态(2022年之前)

新功能 网络连通解决方案 2021年08月24日 数据服务:支持数据服务模块的数据查询加速、支持的数据源类型和版本拓展 为了满足对数据查询速度有要求的业务场景,Dataphin支持为项目添加加速计算源,且完成Dataphin数据源开发后,您可以手动...

MaxCompute加速概述

Hologres支持使用创建外部表的方式实现MaxCompute数据加速查询,当数据规模较大时(超过200 GB),您也可以将MaxCompute数据导入Hologres进行查询以获得更查询性能。背景信息 大数据计算服务(MaxCompute)是一种快速、完全托管的EB级...

数据服务权限列表

开发用户:用于 开发API 和 开发Dataphin数据源并加速数据查询。业务应用用户:用于 调用API 和 调用Dataphin数据源。运维用户:用于 运维监控概述,包括监控应用调用API、API运行和影响应用等。下文将以数据服务的模块(数据服务总览、...

功能更新动态(2023年)

创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦(DM)数据源 创建TiDB数据源 创建Kafka数据源 离线集成 新增Apache Doris数据源的离线集成。整库迁移任务支持...

文档更新动态(2023年)

更新说明 标签工厂新手指引 创建行为统计标签 创建行为偏好标签 创建规则组合标签 离线视图概述 分析平台-基于分析平台创建SQL查询 新增SQL查询功能,支持保存、预编译、加速查询、运行、分享、参数配置、格式化、定位SQL查询任务;...

SmartData 3.6.x版本简介

JindoTable支持Spark 3查询加速Parquet和ORC数据 JindoTable NativeEngine查询加速引擎新增支持Spark 3计算引擎,同时支持Parquet和ORC格式的数据,全面提升Spark3查询效率。JindoTable 支持查询加速HDFS存储上的数据 JindoTable ...

加速服务

通过使用加速服务,您可以在调用API时提高数据查询的速率和性能。本文为您介绍两种加速方案的使用方法。背景信息 DataWorks数据服务的加速方案有两种:加速服务 和 MCQA,您可以 点击这里 加入DataWorks用户钉群进行咨询。两种方案的对比...

机器学习的审计事件

QueryInstanceMetrics 查询数据集加速实例监控指标。QuerySlotMetrics 查询加速槽监控指标。QueryStatistic 查询当前账号下数据集加速相关的统计信息。RecreateSlot 重建一个数据集加速槽。RegisterAlgorithm 将指定的算法注册到Paiflow。...

2020年

2020-12-07 所有区域 消费监控告警 查询编辑器支持查询加速提升数据分析能力 MaxCompute数据分析查询模式原先是离线模式,此次发布查询模式支持MaxCompute查询加速,对于中、小数据量查询作业将执行时间从分钟级缩减至秒级,即查速度上提升...

Quick BI查询加速

当您的报表基于MaxCompute数据源创建时,您可以在Quick BI上配置DLA加速引擎,通过DLA Presto为MaxCompute数据源进行加速,从而节约报表的查询时间,提升用户体验。操作步骤 开通DLA Presto引擎CU版。DLA Presto只在CU版提供了MaxCompute...

API概览

实时访问数据 实时访问数据 DescribeVodDomainRealTimeTrafficData 查询实时流量 调用DescribeVodDomainRealTimeTrafficData查询加速域名的流量数据,相比DescribeVodDomainTrafficData接口,本接口支持查询的数据时间粒度更小(最小为1...

JindoFS实战演示

Impala如何高效查询OSS数据 Impala如何高效查询OSS数据 2021-06-08 Apache Impala是一个开源的大数据查询分析引擎,能够快速查询分析存储在Hadoop集群的PB级数据。如果您已将HDFS数据迁移至OSS中,可通过在Impala中使用JindoFS SDK,高效...

排序加速计算

本文为您介绍 云原生数据仓库AnalyticDB PostgreSQL版 如何通过底层的数据顺序加速查询速度。当您执行 SORT后,系统会对表数据进行排序,当数据完成排序后,AnalyticDB PostgreSQL版 即可利用数据的物理顺序,将SORT算子下推到存储层进行...

什么是MaxCompute

统一元数据及安全体系 MaxCompute的离线租户级别元数据信息会通过 Information Schema 提供服务,同时 Information Schema 也提供MaxCompute的使用历史日志数据查询等服务,您可以对作业的运行情况,例如资源消耗、运行时长、数据处理量等...

功能特性

OSS数据湖加速 MaxCompute 在Hologres中可以创建MaxCompute外表,加速离线数据查询,也可以通过SQL方式将MaxCompute数据离线导入至Hologres,实现进一步的数仓快速查询,满足BI分析等业务。通过创建外部表加速查询MaxCompute数据 Holo ...

JindoCube使用说明

spark.sql.cache.queryRewrite 用于控制是否允许使用JindoCube中的Cache数据加速Spark查询任务,用户可以在集群、session、SQL等层面使用该配置,默认值为 true。JindoCube的使用 创建JindoCube。通过阿里云账号登录 阿里云 E-MapReduce ...

JindoCube使用说明

spark.sql.cache.queryRewrite 用于控制是否允许使用JindoCube中的Cache数据加速Spark查询任务,用户可以在集群、session、SQL等层面使用该配置,默认值为 true。JindoCube的使用 创建JindoCube。通过阿里云账号登录 阿里云 E-MapReduce ...

JindoCube使用说明

spark.sql.cache.queryRewrite 用于控制是否允许使用JindoCube中的Cache数据加速Spark查询任务,用户可以在集群、session、SQL等层面使用该配置,默认值为 true。JindoCube的使用 创建JindoCube。通过阿里云账号登录 阿里云 E-MapReduce ...

JindoCube使用说明

spark.sql.cache.queryRewrite 用于控制是否允许使用JindoCube中的Cache数据加速Spark查询任务,用户可以在集群、session、SQL等层面使用该配置,默认值为 true。JindoCube的使用 创建JindoCube。通过阿里云账号登录 阿里云 E-MapReduce ...

JindoCube使用说明

spark.sql.cache.queryRewrite 用于控制是否允许使用JindoCube中的Cache数据加速Spark查询任务,用户可以在集群、session、SQL等层面使用该配置,默认值为 true。JindoCube的使用 创建JindoCube。通过阿里云账号登录 阿里云 E-MapReduce ...

JindoCube使用说明

spark.sql.cache.queryRewrite 用于控制是否允许使用JindoCube中的Cache数据加速Spark查询任务,用户可以在集群、session、SQL等层面使用该配置,默认值为 true。JindoCube的使用 创建JindoCube。通过阿里云账号登录 阿里云 E-MapReduce ...

JindoCube使用说明

spark.sql.cache.queryRewrite 用于控制是否允许使用JindoCube中的Cache数据加速Spark查询任务,用户可以在集群、session、SQL等层面使用该配置,默认值为 true。JindoCube的使用 创建JindoCube。通过阿里云账号登录 阿里云 E-MapReduce ...

一键MaxCompute表结构同步节点

DataWorks支持一键导入表结构功能,帮助您使用DataStudio快速批量创建与目标MaxCompute表结构相同的Hologres外部表,后续您可使用Hologres外部表加速查询MaxCompute表的数据。本文为您介绍如何创建并使用一键MaxCompute表结构同步节点。...

搜索索引介绍

索引是加速数据查询的重要方法。云原生多模数据库 Lindorm 宽表引擎除了支持高性能原生二级索引,也支持一种新的索引类型,称为搜索索引(SearchIndex),搜索索引主要面向复杂的多维查询场景,能够覆盖分词、模糊查询、聚合分析、排序...

时空索引介绍

对于非聚合查询,使用网格二索引可有效过滤掉与查询条件不相关的网格内的数据加速查询,例如:围栏监测:实时查询轨迹点落在哪些围栏内,可达到百万级围栏数据毫秒级返回结果。周边查询:实时查询某位置周边一定半径范围内的商区。同时,...

安全加速SCDN的审计事件

安全加速SCDN已与操作审计服务...DescribeScdnDomainRealTimeSrcTrafficData 查询加速域名回源流量监控数据。DescribeScdnDomainRealTimeTrafficData 查询加速域名回源流量监控数据。DescribeScdnDomainRegionData 查询用户区域分布数据统计。...

一键同步MaxCompute表结构

背景信息 Hologres与MaxCompute在底层无缝连接,支持使用新建外部表的方式加速查询MaxCompute的数据,详情请参见 通过创建外部表加速查询MaxCompute数据。HoloStudio支持 一键MaxCompute表结构同步 功能,您可以使用可视化方式批量创建外部...

深度解析Lindorm搜索索引(SearchIndex)特性

索引是加速数据查询的重要手段,Lindorm除了提供高性能的二级索引外,同时支持搜索索引(SearchIndex),主要面向复杂的多维查询场景,并能够覆盖模糊查询、聚合分析、排序、分页等场景。本文主要介绍SearchIndex的技术原理和核心能力。...

PCDN的审计事件

GetAccessData 查询加速域名的访客统计数据。GetAllAppVersions 查询所有应用版本列表。GetAllIsp 查询所有支持的运营商列表。GetAllMarkets 查询当前用户的所有市场列表。GetAllPlatformTypes 查询所有支持的终端类型列表。GetAllRegions ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 云数据库 Redis 版 云数据库 RDS 数据库备份 DBS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用