支持的数据源

自建MySQL 外表 自建MySQL数据导入 自建HBase DTS 自建HBase数据导入 AnalyticDB MySQL 2.0 迁移工具 将AnalyticDB MySQL 2.0数据迁移数仓版(3.0)存储 OSS 元数据发现 通过元数据发现导入至湖版 外表 通过外表导入至数仓版 通过外表...

AnalyticDB MySQL 2.0数据导入

您需要迁移数据和应用到 数仓版(3.0)。本文介绍数据和应用的迁移方法。背景信息 AnalyticDB MySQL 2.0随后会下线,不再做功能迭代,以维护为主。数仓版(3.0)具有以下优势:版本完全基于ECS部署,采用云原生架构,集群更加弹性、轻量级...

【通知】2023年06月30日跨数据库查询DSQL升级通知

为提供更好的跨库查询服务,跨数据库查询DSQL将于2023年06月30日进行升级,升级后,原DSQL控制台界面将下线并统一使用DMS的逻辑数仓功能进行跨库查询,应用程序访问DSQL的功能也将迁移至DMS逻辑数仓的一键JDBC功能中。背景信息 DSQL主要...

【通知】下线任务编排(老)和数开发(老)功能

具体操作,请参见:将任务流迁移至新版任务编排 将任务流迁移至新版数仓开发 说明 如果您没有主动迁移旧版中的任务流,旧版功能关闭时会自动将老版中尚未迁移的任务流迁移至新版。使用新版进行任务编排 和数开发。更多信息,请参见 概述...

如何获取更多的在线支持?

开发者社区:实时数仓Hologres Hologres有阿里云开发者社区官方团队号—— 实时数仓Hologres,团队会定期发布关于产品的最新咨询、学习路径、技术交流等,详情请关注:实时数仓Hologres。钉钉交流群 使用钉钉扫描如下二维码加入实时数仓...

实时数仓Hologres服务等级协议(SLA)

实时数仓Hologres服务等级协议(SLA)的详情,请参见 实时数仓服务等级协议。

新用户免费试用

新用户试用教程推荐 试用教程推荐 示例场景 涉及产品 操作难度 数仓加速查询 了解搭建离线数仓的思路,学习离线数仓中Hologres的加速查询功能和大屏展示效果。Hologres MaxCompute(可选)DataV PAI+Hologres基于大模型搭建企业级知识库 ...

新用户免费试用

Hologres基于创新的HSAP架构,可以将您原先数仓架构中的OLAP系统(Greenplum、Presto、Impala、ClickHouse)、KV数据库或Serving系统(HBase、Redis)统一在一个大数据计算引擎中,并提供快速的离线实时一体化分析能力。产品核心优势 简化...

阿里云实时数仓产品Hologres的应用场景

Hologres兼容PostgreSQL生态,是新一代的 阿里云实时数仓产品,与大数据生态无缝连接,支持实时与离线数据,对接第三方BI工具,实现可视化分析业务。本文为您介绍基于Hologres核心功能的典型应用场景。Hologres的典型应用场景如下:搭建...

Hologres推荐的数仓分层

本文为您介绍在Hologres中数仓分层的最佳实践,方便快速构建业务,建设集高性能、敏捷化于一体的实时数仓。背景信息 Hologres与Flink、MaxCompute、DataWorks深度兼容,能够提供实时离线一体化联合解决方案。在该方案下有着非常丰富的应用...

什么是实时数仓Hologres

本文为您介绍什么是实时数仓Hologres以及Hologres的功能。Hologres是阿里巴巴自主研发的一站式实时数仓引擎(Real-Time Data Warehouse),支持海量数据实时写入、实时更新、实时加工、实时分析,支持标准SQL(兼容PostgreSQL协议和语法,...

概述

Hologres与DataWorks深度集成,您可以通过DataWorks绑定Hologres实例,进行一站式实时数仓开发,包括数据集成、数据开发、数据质量、数据服务等,满足不同的业务场景开发和管理需求。在使用DataWorks进行Hologres数据开发时,您可以选择...

产品优势

Hologres专注实时数仓需求,从以下几个方面创新,提高数仓开发效率,降低应用门槛。专注实时场景 数据实时写入、实时更新,无需批处理,写入即可见。Hologres与Flink、Spark原生集成,支持高吞吐、低延时、有模型、高质量的实时数仓开发,...

实时数仓Hologres使用流程

Hologres是一款企业级分析和服务一体化的实时数仓,支持数据实时写入实时更新,PB级数据多维查询。如果您是首次使用Hologres的用户,建议您先阅读以下内容。产品简介:本内容概述了Hologres产品介绍、产品优势及应用场景等内容。计费概述:...

授权信息

本文为您介绍 实时数仓 Hologres(Hologram)为RAM权限策略定义的操作(Action)、资源(Resource)和条件(Condition)。实时数仓 Hologres(Hologram)的RAM代码(RamCode)为 hologram,支持的授权粒度为 RESOURCE。权限策略通用结构 ...

基于Flink+Hologres搭建实时数仓

使用Flink+Hologres搭建实时数仓可以充分利用Flink强大的实时处理能力和Hologres提供的Binlog、行列共存和资源强隔离等能力,实现高效、可扩展的实时数据处理和分析,帮助您更好地应对不断增长的数据量和实时业务需求。本文介绍如何通过...

数据传输与迁移概述

类型 典型场景 数仓管理员对数据进行预览 DataWorks-数据分析、数据管理、数据开发调度(数据通道)。Kettle。商业智能,制作报表,看板 Quick BI。Superset。离线数据批量数据读取(外部表-湖一体)场景特征:主要用于数据联邦查询分析...

数仓加速查询

示例架构 搭建离线数仓时,Hologres可直接读取离线数仓MaxCompute中的数据,并对接BI分析工具将数据实时展示在大屏中,示例架构如图所示。其中:待处理数据:本实践使用GitHub公开事件作为示例数据,更多关于数据集的介绍请参见 业务与数据...

购买Hologres

说明 如果您需要购买超过 1024 CU 以上的实例,您可以加入实时数仓Hologres交流群申请购买,详情请参见 如何获取更多的在线支持?使用 包年包月 付费模式时,如果存储资源超过额度,则系统自动为您转为 按量付费。按量付费 计算费用根据...

概述

背景信息 Hologres共享集群(湖加速版)是原共享集群(MaxCompute BI加速)的升级版本,在支持MaxCompute数仓加速的基础上,进一步支持了OSS数据湖加速。采用存储计算分离的云原生架构,独享4 Core 16GB的接入节点,负责SQL的认证、解析...

2020年

从自建Oracle迁移至PolarDB MySQL 2020年6月 华东2(上海)、华北2(北京)和华南1(深圳)支持从自建Oracle迁移至云原生数据仓库AnalyticDB PostgreSQL,帮助您构建实时数仓。从自建Oracle迁移至云原生数据仓库AnalyticDB PostgreSQL 支持...

MigrateDBCluster-迁移集群

调用MigrateDBCluster将AnalyticDB MySQL数仓版(3.0)迁移至AnalyticDB MySQL湖版(3.0)集群。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 ...

什么是云迁移中心

大数据上云与数据中台建设 针对于企业用户云下的大数据迁移上云来构建云上数仓和数据中台,云迁移中心提供了辅助用户快速新建大量数据迁移任务的工具,自动化完成云下数据源的探查和模型分析,并且批量配置数据迁移上云的任务,一站式管理...

基于Schema级别的简单权限模型函数说明

如果您的DB中有大量的对象(超过千甚至万)需要迁移,建议您加入实时数仓Hologres交流群申请将 batch_size 参数调大,再执行迁移操作,加群方式请参见如何获取更多的在线支持?使用说明 调用 slpm_cleanup()函数时,如果出现 DONE BUT ...

概览

从自建Oracle迁移至云原生数据仓库AnalyticDB PostgreSQL 数据传输服务DTS(Data Transmission Service)支持将自建Oracle迁移至 AnalyticDB PostgreSQL版,帮助您构建实时数仓。支持 从AnalyticDB PostgreSQL版迁移数据 文档 简介 是否...

迁移对象配置说明

[{"SchemaName":"dtstestdata","TableIncludes":[{"TableName":"customer","ColumnIncludes":[{"ColumnName":"id"},{"ColumnName":"address"}]}]}]示例八:迁移dtstestdata库中的customer表至云原生数仓 云原生数据仓库 AnalyticDB MySQL ...

LTS(原BDS)服务介绍

支持简单易用的数据交换、处理、订阅等能力,满足用户的数据迁移、实时订阅、湖转存、数仓回流、单元化多活、备份恢复等需求,实现面向Lindorm的一站式数据生态服务。核心能力 云原生分布式:LTS是一个基于ECS部署的分布式系统,具备良好...

数仓开发任务流

数仓开发的项目空间由入仓解决方案和业务场景两部分组成。每个项目空间内可以创建多个业务场景,每个业务场景下又可添加多个任务流,用于实现复杂的数据处理和任务调度。前提条件 已创建项目空间。具体操作,请参见 创建项目空间。创建数仓...

功能特性

Kafka 通过数据同步功能同步Kafka至湖版 OSS数据源 AnalyticDB for MySQL支持通过外表、Dataworks和元数据发现三种方法将OSS中的数据导入至数仓版或湖版集群,也支持通过外表将数仓版中的数据导出至OSS中。OSS数据导入 导出至OSS 数据...

通过DTS导入数据

操作方法 您可以选择数据同步或数据迁移任意一种方式,将 PolarDB MySQL版 的数据导入至 AnalyticDB MySQL 湖版(3.0)或 数仓版(3.0)。具体操作,请参见:PolarDB MySQL版同步至AnalyticDB MySQL 3.0。PolarDB MySQL版迁移至...

简单权限模型函数说明

本文为您介绍在实时数仓Hologres中简单权限模型(Simple Permission Model,SPM)的函数调用说明,您可以通过调用相关函数管理简单权限模型。函数概述 简单权限模型的函数及其功能说明如下所示。spm_enable:开启简单权限模型。spm_migrate...

通过DTS导入数据

操作方法 您可以选择数据同步或数据迁移任意一种方式,将 RDS SQL Server 数据导入至 AnalyticDB MySQL 湖版(3.0)或 数仓版(3.0)。具体操作,请参见:RDS SQL Server同步至AnalyticDB MySQL版 3.0。RDS SQL Server迁移至AnalyticDB ...

配置DTS数据迁移节点

DTS数据迁移节点可以实现跨库、全量...在数仓开发的标准模式下,试运行DTS数据迁移节点时,该节点会空跑,以免生产数据迁移到测试环境的风险。试运行成功后,您可以在目标库的SQL窗口中,查询已迁移的表。更多信息,请参见 查询与变更表结构。

查看数据迁移进度

在数据迁移任务执行的过程中,您通过控制台查看结构迁移、全量数据迁移或增量数据迁移的执行情况和具体进度。前提条件 已启动数据迁移任务。...查看增量迁移链路状态和性能:可展示累计迁移迁移流量和迁移性能信息。

常见错误码及解决方案

本文主要介绍您在配置新版在线迁移的数据地址或迁移任务时可能会遇到的错误码及解决方案。错误码 错误说明 处理方案 InvalidArgument 请求的参数不合法。您的请求中有无效的参数,请使用正确的参数创建迁移任务。MissingArgument 请求的...

新版计费项

HeadObject 迁移数据需要一次请求:PutObject 重要 若迁移的文件大于或等于150 MB,则迁移数据时会将文件进行分片后再上传,单个分片大小为50 MB,此时迁移数据的请求根据迁移数据大小决定。例如,大小为150 MB的文件会被分成三片上传,...

数仓版变配湖

版(3.0)在 数仓版(3.0)的能力基础上,从数据的采集、存储、计算和应用等方面做了全面升级。您可以将 数仓版(3.0)集群变配为 湖版(3.0),体验更多功能。变配方式有两种,包括:直接变配和克隆集群。本文主要介绍如何通过直接...

旧版计费项

NAS迁移至OSS NAS迁移至OSS的计费项组成如下图所示:OSS迁移至NAS OSS迁移至NAS的计费项组成如下图所示:NAS之间迁移 相同VPC下NAS之间迁移的计费项组成如下图所示:不同VPC下NAS之间迁移的计费项组成如下图所示:第三方NAS迁移至OSS 第三...

数据集成调度策略说明

DTS的数据集成功能可根据调度策略的配置,定期地将源库中的结构和存量数据迁移至目标库中。通过该功能可以帮助您构建更加灵活的数据仓库(例如构建T+...适用于轻量级的数据迁移场景(无需每次迁移所有的存量数据),例如构建T+1的周期性数仓

查看增量迁移链路状态和性能

通过DTS提供的增量迁移性能展示和诊断功能,您可以查看增量迁移链路状态、DDL执行数量、目标库慢SQL数量、迁移流量、迁移性能和迁移延迟等信息,帮助您实时掌握迁移链路的状态,提供一键诊断服务,为您管理数据迁移任务提供参考依据。...
共有194条 < 1 2 3 4 ... 194 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
闪电立方 数据传输服务 弹性公网IP 短信服务 人工智能平台 PAI 物联网平台
新人特惠 爆款特惠 最新活动 免费试用