数据导入方式介绍

通过外表弹性导入MaxCompute数据 通过外表弹性导入OSS数据 适用场景 使用弹性导入功能可以降低Worker资源消耗,加速数据导入,适用场景如下:执行多个导入任务时,可提交弹性导入任务,加速导入。常规导入任务最多支持2个任务并发执行,而...

使用Fluid加速Lindorm S3协议兼容的数据访问

lindorm 100Gi RWO fluid 10m 步骤四:访问数据 方法一:使用Fluid加速数据访问 您可以通过创建应用容器来使用Fluid加速服务,或者提交机器学习作业来体验加速功能。以下示例以创建一个应用容器多次访问同一数据,并通过比较访问时间来...

新零售:特步

PolarDB-X 专注解决海量数据存储、超高并发吞吐、表瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫双十一及阿里云各行业客户业务的考验,助力企业加速完成业务数字化转型。本文介绍特步(中国)有限公司如何通过 PolarDB-X 应对...

添加 MySQL 数据源的白名单

复制 OMS 控制 添加数据源 对话框显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的 访问规则>入方向 区域,单击 快速添加。您也可以选择 手动添加,手动输入 端口范围、授权对象 等信息。在 快速添加 对话框,粘贴复制...

我的看板

数据来源 在工作台中创建并发布的数据看板内容,会同步在此处展示,若数据看板仅编辑完成,但是未发布,则在此处不展示。如需编辑某一看板内容,请单击页面右上角的 前往可视化工作,编辑并发布对应数据看板后,刷新当前页面即可。操作...

基于Delta lake的一站式数据湖构建与分析实战

如果有数据更新,则会自动更新至Delta Lake数据中。步骤三:数据湖探索与分析 DLF产品提供了轻量级的数据预览和探索功能,点击菜单“数据探索”->“SQL查询”进入数据查询页面。a.在元数据库表中,找到“dlf_demo_delta”,展开后可以看到...

应用场景

实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线,您可以实时接入APP、WEB、IoT和数据库等产生的异构数据,统一管理,并投递到下游的分析、归档等系统,构建清晰的数据流,让您更好的释放数据的价值。...

实时监控

获取实时请求命中率数据 获取实时字节命中率数据 注意事项 通过 DCDN 控制(或者OpenAPI)的监控查询、用量查询(实际计费流量)功能查到的加速域名使用的流量数据与通过日志统计的流量数据有差异。通常来说,通过监控查询、用量查询功能...

版本发布记录

计费项 数据字典 支持控制配置数据字典,当业务有常量数据或者业务数据可以划分为业务事实表和业务维度表,通过数据字典来替代维度表,直接查询字典获得维度数据,增加查询效率。数据字典 资源队列 解决开源版单个查询消耗资源过多...

X-Engine简介

因为目标是面向规模的海量数据存储,提供高并发事务处理能力和降低存储成本,在部分大数据量场景下,数据被访问的机会是不均等的,访问频繁的热数据实际上占比很少,X-Engine根据数据访问频度的不同将数据划分为多个层次,针对每个层次...

资源监控

不同时间粒度对应的单次查询的最大时间跨度、可查询的历史数据时间范围和数据延迟关系如下:通过控制查询:时间粒度 单次查询的最大时间跨度 可查询历史数据时间范围 数据延迟 5分钟 3天 30天 15分钟 1小时 30天 30天 4小时 1天 30天 30...

功能发布记录(2023年)

2023.4.11 所有地域 所有DataWorks用户 SQL查询 2023-03 功能名称 功能描述 发布时间 发布地域 使用客户 相关文档 数据治理中心支持使用消息通知治理问题 管理员及个人用户,可将治理工作台中每日治理的待解决问题,以消息通知的形式,通过...

功能特性

索引加速 文件分析 云数据库 SelectDB 版支持表函数功能(Table-Value-Function或TVF),可以将S3、HDFS等常见远端存储的文件数据,映射成云数据库 SelectDB 版的表,从而对这些文件数据进行分析 文件分析 数据湖分析 Hive数据源 通过...

什么是MaxCompute

Hologres针对MaxCompute支持查询加速数据无需移动,查询加速10倍以上。Hologres支持MaxCompute元数据的批量导入,无需手工创建外表。支持流式写入和近实时分析 支持流式数据实时写入并在数据仓库开展分析。与云上主要流式服务深度集成...

文档修订记录

QueryPublicModelEngine 2023.10.20 新增功能 上传与下载 DataWorks的上传与下载模块,提供了便捷的数据上传功能,支持将多种来源(例如,本地文件、OSS文件)的数据上传至MaxCompute大数据引擎进行分析处理及相关管理操作,致力于为您...

Doris概述

Apache Doris是一个高性能、实时的分析型数据库,能够较好的满足报表分析、即席查询、数据湖联邦查询加速等使用场景。本文为您介绍Apache Doris。背景信息 关于更多Apache Doris信息,详情请参见 Doris介绍。使用场景 数据源经过各种数据...

新功能发布记录

概述 名词解释 访问数据分析功能 管理数据集 仪表盘 08月 功能名称 变更类型 功能描述 相关文档 极简模式 新增 极简模式的控制界面简洁、易上手、操作空间,可以随时查找目标数据库实例,无需反复切换到控制首页标签页。极简模式控制...

数据归档

RDS MySQL实例数据量较时,存储成本会随之增高。业务数据通常分为冷数据和热数据,将对象存储(OSS)作为归档冷数据的存储介质,能够大幅降低用户的存储成本。功能简介 在开启RDS MySQL通用云盘的数据归档OSS功能后,用户可通过执行下面...

JindoCube使用说明

概述 JindoCube是E-MapReduce Spark支持的高级特性,通过预计算加速数据处理,实现十倍甚至百倍的性能提升。您可以将任意View表示的数据进行持久化,持久化的数据可以保存在HDFS或OSS等任意Spark支持的DataSource。EMR Spark自动发现可用...

JindoCube使用说明

概述 JindoCube是E-MapReduce Spark支持的高级特性,通过预计算加速数据处理,实现十倍甚至百倍的性能提升。您可以将任意View表示的数据进行持久化,持久化的数据可以保存在HDFS或OSS等任意Spark支持的DataSource。EMR Spark自动发现可用...

JindoCube使用说明

概述 JindoCube是E-MapReduce Spark支持的高级特性,通过预计算加速数据处理,实现十倍甚至百倍的性能提升。您可以将任意View表示的数据进行持久化,持久化的数据可以保存在HDFS或OSS等任意Spark支持的DataSource。EMR Spark自动发现可用...

JindoCube使用说明

概述 JindoCube是E-MapReduce Spark支持的高级特性,通过预计算加速数据处理,实现十倍甚至百倍的性能提升。您可以将任意View表示的数据进行持久化,持久化的数据可以保存在HDFS或OSS等任意Spark支持的DataSource。EMR Spark自动发现可用...

JindoCube使用说明

概述 JindoCube是E-MapReduce Spark支持的高级特性,通过预计算加速数据处理,实现十倍甚至百倍的性能提升。您可以将任意View表示的数据进行持久化,持久化的数据可以保存在HDFS或OSS等任意Spark支持的DataSource。EMR Spark自动发现可用...

JindoCube使用说明

概述 JindoCube是E-MapReduce Spark支持的高级特性,通过预计算加速数据处理,实现十倍甚至百倍的性能提升。您可以将任意View表示的数据进行持久化,持久化的数据可以保存在HDFS或OSS等任意Spark支持的DataSource。EMR Spark自动发现可用...

JindoCube使用说明

概述 JindoCube是E-MapReduce Spark支持的高级特性,通过预计算加速数据处理,实现十倍甚至百倍的性能提升。您可以将任意View表示的数据进行持久化,持久化的数据可以保存在HDFS或OSS等任意Spark支持的DataSource。EMR Spark自动发现可用...

什么是EMR Serverless StarRocks

在典型的OLAP场景,由于查询通常只聚焦于特定几个列,列式存储额外减少了读取非必要列的数据量,从而能够在很程度上削减磁盘I/O的负担,实现幅度的吞吐量节省。StarRocks能够实现秒级的导入延迟,提供近乎实时的数据处理能力。其存储...

概述

ETL数据加速计算场景:依托 PolarDB 基于列存索引提供的强大而灵活的计算能力,在 PolarDB 使用SQL来实现ETL功能。性能提升情况 列存索引功能对SQL查询操作有明显的加速作用,查询性能甚至可以提升百倍。接下来我们以标准TPC-H测试的数据...

IO加速

使用IO加速功能 开启IO加速 购买新实例时开启IO加速 您可以在购买实例时,选择满足 IO加速 的参数后,开启IO加速功能:满足 IO加速 的已有实例开启IO加速 访问实例列表,在上方选择地域,然后单击目标实例ID。在 基本信息 区域,单击 存储...

管理备份

说明 控制上展示的 备份大小 与当前集群的模式有关,其中:数仓版(3.0)弹性模式集群:控制上展示的 备份大小 即为当前集群目标备份集的实际数据量。数仓版(3.0)预留模式集群:控制上展示的 备份大小 会大于当前集群目标备份...

通用云盘IO加速功能

使用IO加速功能 开启IO加速 购买新实例时开启IO加速 您可以在购买实例时,选择满足 通用云盘IO加速功能 的参数后,开启IO加速功能:满足 通用云盘IO加速功能 的已有实例开启IO加速 访问实例列表,在上方选择地域,然后单击目标实例ID。...

通用云盘IO加速功能

使用IO加速功能 开启IO加速 购买新实例时开启IO加速 您可以在购买实例时,选择满足 通用云盘IO加速功能 的参数后,开启IO加速功能:满足 通用云盘IO加速功能 的已有实例开启IO加速 访问实例列表,在上方选择地域,然后单击目标实例ID。...

文档更新动态(2022年之前)

新功能 创建项目、开发Dataphin数据源并加速数据查询 持的数据源类型和版本拓展。数据源类型增加了Impala、AnalyticDB for PostgreSQL、AnalyticDB for MySQL3.0数据源。HBase数据源的版本拓展支持了2.x,您可以根据业务数据库的版本添加...

数据防泄漏典型案例

使用数据安全中心可以监测和防范各类数据泄露风险,例如身份...处理方法:通过 数据安全中心控制数据审计>日志分析 页面的审计日志持续监控后续行为,观察是否有违规行为。相关文档 查看审计日志 发现和处理异常告警 自定义检测模型

功能特性

UDF UDT UDJ 查询加速 MCQA 查询加速 MCQA 对数据查询作业进行加速优化,完全兼容原MaxCompute查询功能。MCQA 物化视图 物化视图 MaxCompute提供物化视图智能计算加速,为用户智能分析推荐创建物化视图。物化视图 扩展引擎 机器学习 SQL ML...

2021年

您可以在 云原生数据仓库AnalyticDB PostgreSQL版 控制将实例升级至最新发布的小版本。升级小版本的具体操作,请参见 版本升级。2021年12月06日(V6.3.6.1)类别 功能 功能描述 相关文档 新增 物化视图 新增物化视图自动查询改写功能,...

监控与日志

监控与日志可有效保障您全球加速资源的可用性、业务的正常运行和健康度。您可通过对应的监控能力,持续收集监控数据。阿里云提供了各种监控与日志审计相关的...关于如何在全球加速中使用访问日志服务及相关使用示例,请参见 使用访问日志。

产品架构

整体架构如下:LindormTable 的数据持久化存储在LDFS,表的数据通过自动Sharding分散到集群的多服务器上,并且每一个分区可以拥有1至N个副本,这N个副本拥有主、从两种角色,主从副本可以加载在不同的Zone,从而保障集群的高可用和强...

构建数据仓库

DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力,本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业:全行业...

2020年

新功能 MC-Hologres 是为大数据设计的实时交互式分析产品,它与MaxCompute无缝打通,支持数据实时写入,支持PB级数据进行高并发、低延时的分析处理。兼容PostgreSQL协议,可以使用您最熟悉的BI工具对海量数据进行自助的多维分析透视和业务...

功能发布记录 2022年之前

DataWorks数据服务现已灰度支持直接访问并使用MaxCompute表封装API,该类API的调用请求将借助MaxCompute加速查询能力(MCQA)在引擎执行数据查询,实现快速、高效的调用返回。(附:仅支持在独享数据服务资源组使用MaxCompute数据源)...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 云数据库 Redis 版 数据传输服务 数据库备份 DBS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用