实时数据库有那些-实时数据库有那些文档介绍内容-阿里云

应用场景

实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...

构建数据仓库

DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库本场景推荐的架构如下。适用行业：全行业...

什么是ETL

数据传输服务DTS提供的流式数据ETL（Extract Transform Load）功能是一种高效的实时数据加工工具。ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据...

流式ETL

数据传输服务DTS提供的流式数据ETL（Extract Transform Load）功能是一种高效的实时数据加工工具。ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据...

什么是数据库审计

数据库审计服务是一款专业、主动、实时监控数据库安全的审计产品，可用于审计阿里云原生数据库和自建数据库。数据库审计服务将数据库监控、审计技术与公共云环境相结合，针对数据库SQL注入、风险操作等数据库风险行为进行记录与告警，形成...

数据库管理常见问题

通过控制台创建数据库与使用SQL创建数据库有什么区别？通过控制台创建数据库与使用SQL创建数据库本身并无区别，但是通过控制台创建时，可以同时给指定账号授予权限，操作更加便捷。为什么查询数据库列表时页面报错？该查询操作需要连接到您...

分析实例简介

分析实例类型 RDS MySQL的分析实例分为以下两种类型：云ClickHouse分析实例云ClickHouse分析实例本质是云数据库ClickHouse实例，其通过MaterializedMySQL引擎将RDS MySQL实例中的数据同步到云数据库ClickHouse中，并利用其强大的分析性能...

ACL权限体系

以下列出AnalyticDB for MySQL 2.0的权限对象和各对象权限：Database（库），即 db_name.*或*（默认数据库），指定数据库或数据库上所有表/表组。TableGroup（表组），即 db_name.table_group_name 或 table_group_name，特定表组。Table...

数据同步流程

适用于数据异地多活、数据异地灾备、数据聚合和实时数据仓库等多种业务场景。您可以参考以下流程进行同步前的准备工作、以及购买、配置和管理数据同步项目。完成准备工作。数据传输已具备云资源访问权限。详情请参见数据传输迁移角色授权...

什么是云数据库SelectDB版

云数据库SelectDB版是新一代实时数据仓库 SelectDB 在阿里云上的全托管服务，您可以在阿里云上便捷地购买 SelectDB 数仓服务，满足海量数据分析需求。产品优势高性价比高性能：支持亚秒级响应海量数据查询、万级高并发点查询以及高吞吐...

数据同步方案概览

源为自建SQL Server或RDS SQL Server的同步方案源为自建MongoDB或云数据库MongoDB的同步方案源为自建Redis或云数据库Tair/Redis的同步方案源为MariaDB的同步方案源为Db2 for LUW的同步方案源为Db2 for i（AS/400）的同步方案源为数据...

通过DTS实现数据库的垂直拆分

背景信息假设一个RDS实例上有数据库A和B，随着业务增长实例瓶颈也日趋可见，如想要减轻该实例的压力，您可以将数据库B垂直拆分至另外一个单独的实例中，详情请参见双写方案和简易拆分方案。注意事项您需要使用一个单独的实例作为目标...

使用DTS迁移分片集群架构的自建MongoDB数据库上云

本文介绍如何使用数据传输服务DTS（Data Transmission Service），依次将本地MongoDB分片集群数据库中的各个Shard节点，迁移至阿里云MongoDB分片集群实例来实现迁移上云。通过DTS的增量迁移功能，可以实现在本地应用不停服的情况下，平滑...

实时数据消费概述

实时数据消费功能包含高速数据导入API和实时数据源消费两部分，可实现数据直接写入Segment（分片单元），避免通过COPY或INSERT方式造成的Master写入负载高的问题，也可实现使用 AnalyticDB PostgreSQL版单产品直接消费Kafka数据。...

如何排查无法连接MongoDB实例的问题？

replicaSet=[&authSource=]数据库和鉴权数据库的参数说明如下：<database>：数据库，实例连接成功后默认要访问的数据库，相当于自动执行命令 use<database>。authSource=（可选）：为鉴权数据库名称。如果不配置该参数，<database>会作为...

什么是RDS PostgreSQL

RDS PostgreSQL 阿里云关系型数据库RDS（Relational Database Service）支持PostgreSQL引擎，RDS PostgreSQL的优点主要集中在对SQL规范的完整实现以及丰富多样的数据类型支持，包括JSON数据、IP数据和几何数据等。除了完美支持事务、子查询...

如何恢复数据到其它数据库实例

数据库备份DBS 支持恢复已有备份数据到源备份数据库实例上，同时也支持恢复到其它已有数据库实例上，包括RDS实例、ECS上的自建数据库等，可用于误操作后恢复以及分析历史数据等场景。本文以恢复到已有RDS实例为例介绍恢复操作。前提条件已...

云数据库MongoDB版（单节点架构）全量迁移至云数据库...

源数据库（单节点架构）目标数据库（所有架构）云数据库MongoDB版云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 有公网IP的自建数据...

自建数据库MongoDB版（分片集群架构）迁移至云数据库...

目标库信息选择已有的DMS数据库实例（可选，如未创建可忽略此处选择，直接在下方配置数据库信息即可）您可以按实际需求，选择是否使用已有实例。如使用已有实例，下方数据库信息将自动填入，您无需重复输入。如不使用已有实例，您需要输入...

使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0

本文以RDS MySQL数据源为例，介绍如何通过DTS将RDS MySQL数据实时同步至 AnalyticDB MySQL版 2.0 中。前提条件根据 RDS MySQL快速入门，准备好测试...进入 AnalyticDB MySQL版控制台，在 ads_DataBase 数据库中可以查看到同步过来的数据表。

CheckDBName

若输入的数据库名称与已有数据库名称重复，会返回错误信息 Specified DB name already exists。示例请求示例 http(s):/polardb.aliyuncs.com/?Action=CheckDBName &DBClusterId=pc-*&DBName=test_db&<公共请求参数>正常返回示例 XML 格式...

CheckDBName

若输入的数据库名称与已有数据库名称重复，会返回错误信息 Specified DB name already exists。示例请求示例 http(s):/polardb.aliyuncs.com/?Action=CheckDBName &DBClusterId=pc-*&DBName=test_db&<公共请求参数>正常返回示例 XML 格式...

管理实例

进入 DB授权页面，您可以新建数据库并授权，也可以对先有数据库进行权限修改操作。更多关于DB授权的操作，请参见 DB管理。IP白名单您可以鼠标右键单击目标实例，选择 IP白名单。进入 IP白名单页面，您可以设置IP白名单来进行访问管理。...

设置参数

客户端修改参数客户端支持以下几种修改方式：命令说明 alter database 可以修改数据库级别的参数，可以使不同数据库有不同的参数配置。需要会话重连才能生效。alter role 可以修改用户级别的参数，可以使不用用户拥有不同参数，用户级别...

错误代码

排查方法：确认是否有数据库异常没有处理，或者捕获了数据库异常但没有调用 rollback 回滚事务。如确认异常后，则客户端需要强制调用 rollback。ERROR:Server connection execute error:x 问题描述：数据访问代理将 SQL 发往后端物理数据库...

什么是实时数仓Hologres

所见即所得的开发数据实时写入即可查询，支持DB、Schema、Table三级体系，支持视图View，原生支持Update/Delete/Upsert，支持关联、嵌套、窗口等丰富表达能力，原生支持半结构化JSON数据分析，支持MySQL等数据库数据整库一键入库，实时...

CheckDBName-校验数据库名称是否合法

若输入的数据库名称与已有数据库名称重复，会返回错误信息 Specified DB name already exists。示例正常返回示例 JSON 格式 {"RequestId":"CDB3258F-B5DE-43C4-8935-CBA0CA*","DBName":"test_db"} 错误码 HTTP status code 错误码错误...

通过Spark SQL读写Hudi外表

如果已有数据库，可跳过本步骤。CREATE DATABASE adb_external_db_hudi location 'oss:/<bucket_name>/test/';用于在该路径中创建表，请替换为自己的OSS路径。执行以下语句，创建Hudi外表。CREATE TABLE adb_external_db_hudi.test_hudi_...

云数据库RDS SQL Server版查看锁信息

您可以通过 sys.dm_tran_locks 系统视图查看锁的信息，具体有下列两种情况：数据库的锁信息您可以执行以下SQL语句，查询哪些数据库有锁。select str(request_session_id,4,0)as spid,convert(varchar(20),db_name(resource_database_id))...

表回收站

Recycle Bin原理介绍回收和清理机制回收机制当执行 DROP TABLE 语句来删除数据表，或执行 DROP DATABASE 语句来删除数据库时，PolarDB 只会保留相关的表对象，并将表对象移动到专门的Recycle Bin目录中。其它对象的删除策略如下：与表...

通过Spark SQL读写Delta外表

如果已有数据库，可跳过本步骤。CREATE DATABASE if not exists external_delta_db location"oss:/<bucket_name>/test/;用于在该路径中创建表，请替换为自己的OSS路径。执行以下语句，创建Delta外表。CREATE TABLE if not exists external_...

平滑扩容

扩容示意图下：PolarDB-X 1.0 扩容步骤如下：创建扩容计划选择新增加RDS/PolarDB MySQL，并选定需要迁移到新RDS/PolarDB MySQL实例上的分库，提交任务后系统自动在目标RDS/PolarDB MySQL上创建数据库和账号，并提交任务进行数据迁移同步。...

权限查询函数

has_database_privilege(user,database,privilege)指定的用户是否有数据库权限。has_database_privilege(database,privilege)当前用户是否有数据库权限。has_foreign_data_wrapper_privilege(user,fdw,privilege)指定的用户是否有外部数据...

基于Flink+Hologres搭建实时数仓

使用Flink+Hologres搭建实时数仓可以充分利用Flink强大的实时处理能力和Hologres提供的Binlog、行列共存和资源强隔离等能力，实现高效、可扩展的实时数据处理和分析，帮助您更好地应对不断增长的数据量和实时业务需求。本文介绍如何通过...

基于Flink+Hologres搭建实时数仓

购买实例后，需要创建order_dw数据库和用户（为用户赋予admin权限），推荐使用简单权限模型创建数据库，详情请参见简单权限模型的使用和 DB管理。如果在被授权账号的下拉列表找不到对应的账号，则说明该账号并未添加至当前实例，您需要...

示例二：运行不带有ON子句的SHOW RETENTION POLICIES查询使用 USE<database_name>指定数据库>USE NOAA_water_database Using database NOAA_water_database>SHOW RETENTION POLICIES name duration shardGroupDuration replicaN default-...

实时同步数据库的数据至Hologres

常见的支持实时数据同步的数据库包括：Oracle、Polar DB、PolarDB MySQL等。说明如需查看更多支持的数据库，请参见支持的数据源及同步方案。相关原理：MySQL Reader、Oracle数据源、PolarDB Reader、SQL Server Reader、Hologres数据源。...

实时大盘

数据库自治服务DAS提供了全局的实时性能大盘，可以查看所有接入实例的实时性能情况。如果您的业务正在大促、或者正在进行重大变更，可以通过该功能实时确认数据库健康情况。前提条件在DAS中接入对应的数据库实例，并且接入状态显示为接...

实时数据库有那些

新品推荐