应用场景

实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线,您可以实时接入APP、WEB、IoT和数据库等产生的异构数据,统一管理,并投递到下游的分析、归档等系统,构建清晰的数据流,让您更好的释放数据的价值。...

构建数据仓库

DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力,本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业:全行业...

什么是ETL

数据传输服务DTS提供的流式数据ETL(Extract Transform Load)功能是一种高效的实时数据加工工具。ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务,并结合DTS的高效流数据复制能力,可以实现流式数据的抽取、数据转换和加工、数据...

流式ETL

数据传输服务DTS提供的流式数据ETL(Extract Transform Load)功能是一种高效的实时数据加工工具。ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务,并结合DTS的高效流数据复制能力,可以实现流式数据的抽取、数据转换和加工、数据...

什么是数据传输服务DTS

数据传输服务DTS(Data Transmission Service)是阿里云提供的实时数据流服务,支持关系型数据库(RDBMS)、非关系型的数据库(NoSQL)、数据多维分析(OLAP)等数据源间的数据交互,集数据同步、迁移、订阅、集成、加工于一体,助您构建...

分析实例简介

分析实例类型 RDS MySQL的分析实例分为以下两种类型:云ClickHouse分析实例 云ClickHouse分析实例本质是云数据库ClickHouse实例,其通过MaterializedMySQL引擎将RDS MySQL实例中的数据同步到云数据库ClickHouse中,并利用其强大的分析性能...

入仓解决方案

支持的数据库部署位置 有公网IP的自建数据库 无公网IP:Port的数据库(通过数据库网关DG接入)通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能...

数据同步流程

适用于数据异地多活、数据异地灾备、数据聚合和实时数据仓库等多种业务场景。您可以参考以下流程进行同步前的准备工作、以及购买、配置和管理数据同步项目。完成准备工作。数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权...

什么是云数据库SelectDB版

数据库SelectDB版 是新一代实时数据仓库 SelectDB 在阿里云上的全托管服务,您可以在阿里云上便捷地购买 SelectDB 数仓服务,满足海量数据分析需求。产品优势 高性价比 高性能:支持亚秒级响应海量数据查询、万级高并发点查询以及高吞吐...

数据同步方案概览

源为自建SQL Server或RDS SQL Server的同步方案 源为自建MongoDB或云数据库MongoDB的同步方案 源为自建Redis或云数据库Tair/Redis的同步方案 源为MariaDB的同步方案 源为Db2 for LUW的同步方案 源为Db2 for i(AS/400)的同步方案 源为数据...

产品优势

Hologres兼容PostgreSQL生态,支持快速查询分析MaxCompute的数据、实时查询实时写入的数据、联邦分析实时数据与离线数据,帮助您快速搭建企业实时数据仓库。Hologres专注实时数仓需求,从以下几个方面创新,提高数仓开发效率,降低应用门槛...

实时数据消费概述

实时数据消费功能包含高速数据导入API和实时数据源消费两部分,可实现数据直接写入Segment(分片单元),避免通过COPY或INSERT方式造成的Master写入负载高的问题,也可实现使用 AnalyticDB PostgreSQL版 单产品直接消费Kafka数据。...

功能特性

在降低开发门槛和业务系统影响的同时提升效率,丰富企业实时数据处理和计算场景,赋能企业数字化转型 功能集 功能 功能描述 参考文档 读写分离与分流 TP实时缓存 支持将MySQL数据库(例如自建MySQL或RDS MySQL)迁移至云原生内存数据库Tair...

应用场景

不停机迁移数据库 传输方式:数据迁移 为了保证数据的一致性,传统的迁移过程需要您在迁移数据时停止向源数据库写入数据。根据数据量和网络条件,迁移过程可能需要几个小时甚至几天的时间。这个漫长的过程可能会对您的业务产生很大的影响。...

使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0

本文以RDS MySQL数据源为例,介绍如何通过DTS将RDS MySQL数据实时同步至 AnalyticDB MySQL版 2.0 中。前提条件 根据 RDS MySQL快速入门,准备好测试...进入 AnalyticDB MySQL版控制台,在 ads_DataBase 数据库中可以查看到同步过来的数据表。

自建库搭配RDS实现异地容灾

自建数据库搭配RDS 通过数据传输服务DTS,您可以将自建机房的数据库或者ECS上的自建数据库实时同步到任一地域的RDS实例。即使发生机房损毁的灾难,数据在阿里云数据库上也会有备份。详情请参见 配置同步任务(新控制台)。为RDS创建异地容...

自建库搭配RDS实现异地容灾

自建数据库搭配RDS 通过数据传输服务DTS,您可以将自建机房的数据库或者ECS上的自建数据库实时同步到任一地域的RDS实例。即使发生机房损毁的灾难,数据在阿里云数据库上也会有备份。详情请参见 配置同步任务(新控制台)。为RDS创建异地容...

错误码表(2.0版)

18001 Not support CREATE DATABASE in db:schema 无法在该数据连接上进行CREATE DATABASE操作,请检查所用数据库连接是否正确。18002 非ADS user导致的失败信息。操作必须由ADS user进行,请确认当前使用的UMM账号是ADS用户账号。18003 NA...

数据库实时入仓快速入门

同样的操作依次为tpc_ds、user_db1、user_db2和user_db3数据库导入对应的数据文件。在Hologres控制台创建my_user数据库,用于存放合并后的user表数据。操作步骤详情请参见 创建数据库。配置IP白名单 为了让Flink能访问MySQL和Hologres实例...

什么是实时数仓Hologres

所见即所得的开发 数据实时写入即可查询,支持DB、Schema、Table三级体系,支持视图View,原生支持Update/Delete/Upsert,支持关联、嵌套、窗口等丰富表达能力,原生支持半结构化JSON数据分析,支持MySQL等数据库数据整库一键入库,实时...

Flink CDC技术

相关文档 数据库实时入仓快速入门 日志实时入仓快速入门 CDC问题

Flink SQL上手示例

相关文档 Flink SQL作业快速入门 数据库实时入仓快速入门

通过DTS导入数据

DTS支持迁移全量数据及增量数据,您可以通过DTS迁移MySQL数据库(例如自建MySQL、RDS MySQL和PolarDB MySQL)同步或迁移至 云数据库 SelectDB 版,并在 云数据库 SelectDB 版 上完成亚秒级响应海量数据查询、万级高并发点查询以及高吞吐...

CREATE DATABASE AS(CDAS)语句

参数 说明 target_database 数据同步的目标数据库名,可以指定具体的Catalog名称。COMMENT 目标库的描述,默认使用source_database的描述。WITH 目标库的参数,详情请参见 管理元数据 中对应的Catalog文档。说明 key和value都需要为字符串...

日志服务数据同步至Hologres

sink(content VARCHAR,operation VARCHAR,uid VARCHAR,topic STRING,source STRING,c_timestamp timestamp,receive_time BIGINT)with('connector'='hologres','dbname'='holo db nema',-Hologres的数据库名称。'tablename'='holo tablene',...

使用Hologres和大模型免费定制专属聊天机器人

HOLO_DATABASE Hologres实例的数据库名称。准备语料库。本文以下载的代码与样例数据中 data 目录下的 example_data.csv 文件为例。语料库文件需要使用CSV格式文件,并包含 title 和 content 两列。本文将Hologres部分用户文档作为语料,...

平滑扩容

扩容示意图下:PolarDB-X 1.0 扩容步骤如下:创建扩容计划 选择新增加RDS/PolarDB MySQL,并选定需要迁移到新RDS/PolarDB MySQL实例上的分库,提交任务后系统自动在目标RDS/PolarDB MySQL上创建数据库和账号,并提交任务进行数据迁移同步。...

CREATE TABLE AS(CTAS)语句

通过CTAS语句,在实时同步数据的同时,还能实时将上游表结构(Schema)的变更同步到下游表,提高您在目标存储中创建表和维护源表结构变更的效率。本文为您介绍CREATE TABLE AS(CTAS)的使用方法,并提供了多种使用场景下的示例。前提条件 ...

实时同步数据库数据至Hologres

常见的支持实时数据同步的数据库包括:Oracle、Polar DB、PolarDB MySQL等。说明 如需查看更多支持的数据库,请参见 支持的数据源及同步方案。相关原理:MySQL Reader、Oracle数据源、PolarDB Reader、SQL Server Reader、Hologres数据源。...

实时大盘

数据库自治服务DAS提供了全局的 实时性能大盘,可以查看所有接入实例的实时性能情况。如果您的业务正在大促、或者正在进行重大变更,可以通过该功能实时确认数据库健康情况。前提条件 在DAS中接入对应的数据库实例,并且接入状态显示为 接...

实时性能

数据库自治服务DAS为RDS PostgreSQL提供实时性能功能,可以实时查看数据库实例性能。本文介绍如何使用实时性能功能。前提条件 RDS PostgreSQL数据库实例为高可用版。操作步骤 访问 RDS实例列表,在上方选择地域,然后单击目标实例ID。在...

备份对数据库的影响

增量备份原理 支持实时捕获数据库内存中的日志,实现实时增量备份,避免堆积数据,从而降低对数据库IO性能的影响。对数据库的影响 从数据库实例中读取数据,对数据库性能有一定影响,但不会造成锁表的情况。从数据库磁盘中读取数据,对数据...

A100使用指南

支持审计10个数据库实例 12,000元/月 144,000元/年 企业版 吞吐量峰值:30,000条SQL/秒 800万/小时入库速率 10亿条在线SQL语句存储 350亿条归档SQL语句存储 支持审计25个数据库实例 20,000元/月 240,000元/年 说明 可以通过需要使用的数据...

如何选择备份方式

增量备份原理 支持实时捕获数据库内存中的日志,实现实时增量备份,避免堆积数据,从而降低对数据库IO性能的影响。日志读取速度也会随着数据库日志产生速度而调整。特性 支持进行更精细的库、表级别备份。不会对数据库加锁,对数据库性能...

性能优化与诊断简介

在RDS PostgreSQL日常运维中,您可以通过数据库自治服务DAS(Database Autonomy Service)来处理数据库故障、优化性能、提升效率、降低运维成本。DAS是一种基于机器学习和专家经验的云服务,实现数据库自感知、自修复、自优化、自运维和自...

实时性能大盘

数据库自治服务DAS提供了全局的 实时性能大盘,可以查看所有接入实例的实时性能情况。如果您的业务正在大促、或者正在进行重大变更,可以通过该功能实时确认数据库健康情况。操作步骤 登录 DAS控制台。在左侧导航栏,单击 实时性能大盘。...

什么是数据库审计

数据库审计服务是一款专业、主动、实时监控数据库安全的审计产品,可用于审计阿里云原生数据库和自建数据库数据库审计服务将数据库监控、审计技术与公共云环境相结合,针对数据库SQL注入、风险操作等数据库风险行为进行记录与告警,形成...

C100售前支持相关问题

数据库审计和其他产品的区别 数据库审计产品相对于自己安装Packetbeat抓取流量审计和RDS数据库自带的SQL洞察功能,有以下区别:支持的数据库协议:数据库审计产品是专注于数据库协议解析的,支持的数据库协议更丰富,解析的粒度更细。...

逻辑备份、物理备份与快照

增量备份 支持实时捕获数据库内存中的日志,实现实时增量备份,避免堆积数据,从而降低对数据库IO性能的影响。日志读取速度也会随着数据库日志产生速度而调整。特性 支持进行更精细的库、表级别备份。不会对数据库加锁,对数据库性能影响较...

购买数据库审计实例

数据库审计服务是一款专业、主动、实时监控数据库安全的审计产品,可用于审计阿里云自研数据库和自建数据库。本文介绍如何购买数据库审计实例。背景信息 购买数据库审计实例前,您可能需要了解以下信息:计费方式 功能特性 支持的数据库...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 DBS 云数据库 RDS 云数据库 MongoDB 版 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用