基于Flink+Hologres搭建实时数仓
数据库创建和授权操作，请参见 DB管理。说明 如果在 被授权账号 的下拉列表找不到对应的账号，则说明该账号并未添加至当前实例，您需要前往 用户管理 页面添加用户为SuperUser。Hologres2.0之后版本默认开启binlog扩展，无需手动执行。...
通过DTS导入数据
DTS支持迁移全量数据及增量数据，您可以通过DTS迁移MySQL数据库（例如自建MySQL、RDS MySQL和PolarDB MySQL）同步或迁移至 云数据库 SelectDB 版，并在 云数据库 SelectDB 版 上完成亚秒级响应海量数据查询、万级高并发点查询以及高吞吐...
基于Flink+Hologres搭建实时数仓
购买实例后，需要创建order_dw数据库和用户（为用户赋予admin权限），推荐使用简单权限模型创建数据库，详情请参见 简单权限模型的使用 和 DB管理。如果在 被授权账号 的下拉列表找不到对应的账号，则说明该账号并未添加至当前实例，您需要...
RDS实时同步至Hologres
数据库：本实践使用RDS MySQL数据库，通过DataWorks数据集成功能将数据库中数据同步至Hologres，您也可以选择其他数据库，DataWorks支持的数据源请参见 支持的数据源及同步方案。数据服务：Hologres是兼容PostgreSQL协议的实时数仓引擎，...
入湖基础操作
关系数据库实时入湖：可以实现RDS MySQL或PolarDB数据库表数据增量同步到数据湖，选择在数据源管理中配置好的数据源，将数据源对应数据库中选定表的数据抽取binlog的方式将数据库表数据实时同步回放到数据湖中。待同步的数据表需确认包含...
技术原理
HTAP PolarDB-X 1.0 解决了OLTP数据库面对海量数据下的存储、并发方面的扩展性问题，但由于缺失多机并行查询加速能力和列存储等能力，无法满足对实时性计算和复杂查询都要求较高的在线业务场景，同时还面临着ETL（Extract-Transform-Loa）...
CREATE DATABASE AS（CDAS）语句
参数 说明 target_database 数据同步的目标数据库名，可以指定具体的Catalog名称。COMMENT 目标库的描述，默认使用source_database的描述。WITH 目标库的参数，详情请参见 管理元数据 中对应的Catalog文档。说明 key和value都需要为字符串...
使用Flink SQL消费实时变更数据示例
云原生多模数据库 Lindorm 支持实时数据订阅功能，对实时变更数据进行计算，可以为实时监控，实时报表和流数据分析功能提供有效数据。通过Flink Kafka Connector可以从底层存储消费订阅数据，同时Flink Kafka Connector对订阅数据进行解析...
日志服务数据同步至Hologres
sink(content VARCHAR,operation VARCHAR,uid VARCHAR,topic STRING,source STRING,c_timestamp timestamp,receive_time BIGINT)with('connector'='hologres','dbname'='holo db nema',-Hologres的数据库名称。'tablename'='holo tablene',...
使用Hologres和大模型免费定制专属聊天机器人
HOLO_DATABASE Hologres实例的数据库名称。准备语料库。本文以下载的代码与样例数据中 data 目录下的 example_data.csv 文件为例。语料库文件需要使用CSV格式文件，并包含 title 和 content 两列。本文将Hologres部分用户文档作为语料，...
平滑扩容
扩容示意图下：PolarDB-X 1.0 扩容步骤如下：创建扩容计划 选择新增加RDS/PolarDB MySQL，并选定需要迁移到新RDS/PolarDB MySQL实例上的分库，提交任务后系统自动在目标RDS/PolarDB MySQL上创建数据库和账号，并提交任务进行数据迁移同步。...
实时性能
您可以在DAS上查看各个数据库引擎实例的实时性能，本文以MongoDB为例介绍如何查看实例的实时性能。前提条件 对应的数据库实例已经接入DAS，详情请参见 接入数据库实例。操作步骤 登录 DAS控制台。在左侧导航栏中，单击 实例监控。找到目标...
功能特性
数据库审计提供用户行为发现审计、多维度分析、实时报警和报表功能。用户行为审计 支持关联应用层和数据库层的访问操作，您可以在C/S架构和B/S架构中使用应用身份识别功能。支持溯源应用者的身份和行为。多维度线索分析 风险和危害线索 ...
基于Flink+Paimon搭建流式湖仓
构建ODS层：业务数据库实时入仓 基于 CREATE DATABASE AS（CDAS）语句 功能，可以一次性将ODS层建出来。SQL作业中通过SET语句指定的配置项也可以在 作业 运维 页面的作业 部署详情 页签指定，详见 如何配置作业运行参数？Paimon写入性能...
将RDS PostgreSQL作为RDS MySQL实时分析库
背景信息 当需要使用RDS PostgreSQL数据库特有的功能来分析MySQL中的数据，使用GIS处理时空数据或进行用户画像分析时，可以使用DTS功能将RDS MySQL中的数据实时迁移到RDS PostgreSQL数据库中，使PostgreSQL数据库作为MySQL的实时分析库。...
CREATE TABLE AS（CTAS）语句
连接器名称 源表 结果表 备注 MySQL√分库分表合并同步时，默认会同步上游存储的数据库名称和表名称。单表同步时，不会同步数据库名称和表名称。如果您需要同步数据库名称和表名称，请使用SQL命令创建Catalog，并添加catalog.table....
从Kafka同步数据
当您需要将消息队列Kafka的数据实时同步至云数据库ClickHouse中时，本文档为您提供了详细的解决方案，以满足您的数据实时处理需求。说明 云数据库ClickHouse 集群从Kafka进行数据同步目前仅支持云消息队列Kafka和部署在ECS上的自建Kafka。...
数据库分析
您可以在 数据库分析 页面查看异常分析，从而了解应用的异常情况。前提条件 请在 容器服务管理控制台 的 组件管理 中确认ack-arms-cmonitor组件已升级到4.1.0及以上版本。查看数据库分析 登录 ARMS控制台，在左侧导航栏单击 应用监控 eBPF ...
写入或更新调优指南
背景信息 Hologres是一站式实时数据仓库引擎，支持海量数据高性能实时写入与实时更新，满足大数据场景上对数据高性能低延迟的需求，Hologres的写入技术原理详情请参见 写入技术揭秘。在写入或更新场景上，Hologres提供多种数据写入和更新的...
云数据库Redis
背景信息 阿里云数据库Redis是兼容开源Redis协议标准、提供内存加硬盘混合存储的数据库服务，基于高可靠双机热备架构及可平滑扩展的集群架构，充分满足高吞吐、低延迟及弹性变配的业务需求，更多内容详情请参见 阿里云数据库Redis版。...
数据库
本文为您介绍如何使用HoloWeb新建、登录、编辑或删除数据库。前提条件 存在已登录实例，请参见 登录实例。新建数据库 登录 Hologres管理控制台。在顶部菜单栏左侧，选择相应的地域。单击 前往HoloWeb，进入HoloWeb开发页面。在HoloWeb开发...
查看实时性能
操作步骤 使用 DMS for Memcache 连接云数据库 Memcache 版实例。单击上方菜单栏的实时性能。说明：上图中的区域1是实时数据区域，显示各项指标的实时监控数据；区域2是与数据区域对应的指标图表，体现指标的变化趋势；页面数据从打开页面...
数据库分析
将应用数据上报至 可观测链路 OpenTelemetry 版 后，可观测链路 OpenTelemetry 版 即可开始监控应用，您可以在 数据库分析 页面查看数据库分析数据，从而了解数据库的调用详情。前提条件 已将应用数据上报至 可观测链路 OpenTelemetry 版，...
实时性能
本章节介绍如何使用数据库自治服务DAS的实时性能功能。前提条件 目标数据库实例已接入DAS，并且接入状态显示为连接正常。详情请参见 实例接入。操作步骤 登录 DAS控制台。在左侧导航栏中，单击 实例监控。找到目标实例，单击实例ID，进入...
实时性能
在CloudDBA中可以实时查看 云原生内存数据库Tair 实例的性能，包括CPU使用率、内存使用信息、QPS（每秒访问次数）、网络流量、Server信息、Key信息、Client信息、连接信息等。操作步骤 访问 Tair实例列表，在上方选择地域，然后单击目标...
概述
本文主要介绍需要实时获取HBase表的数据变更场景。数据写入HBase之后，很多业务场景下需要实时获取或者订阅HBase表的数据变更。当数据被更新时，触发其他应用的业务处理，...说明 该功能只支持云数据库HBase增强版、云原生多模数据库Lindorm。
Key分析
数据库自治服务DAS支持Key分析功能，可实时展示实例中的大Key和热Key信息，同时支持查看4天内的大Key和热Key历史信息。该功能可以掌握Key的访问频次、元素个数等信息，为您的优化操作提供数据支持，帮助您避免因Key倾斜引发的内存不足、...
实时精准营销（人群圈选）
使用数组替代多字段存储标签，需要数据库支持倒排索引，但并不是所有数据库都支持倒排索引。使用数组替代多字段存储标签，加上倒排索引，存储空间会暴增。圈选条件组合多样化，没有固定索引可以优化，如果每个字段一个索引，存储空间又会暴...
实时Top Key统计
云数据库Redis版 集成了DAS的Key分析功能，可展示实例当前实时和历史的大Key和热Key，包括大Key的元素个数以及热Key的访问频次。当Redis内存使用率升高或CPU使用率升高时，帮助您快速找到大Key和热Key，解决实例性能问题。前提条件 实例为...
实时Top Key统计
云原生内存数据库Tair 集成了DAS的Key分析功能，可实时展示实例中的大Key和热Key信息，同时支持查看4天内的大Key和热Key历史信息。该功能可帮助您掌握Key的访问频次、元素个数等信息，为您的优化操作提供数据支持。注意事项 实例为 内存型 ...
数据库调用
本文说明如何查看数据库调用，从而了解应用的数据库调用情况，包括概况、SQL调用、异常、调用来源、调用链列表等信息。前提条件 接入应用监控 功能入口 登录 ARMS控制台，在左侧导航栏选择 应用监控>应用列表。在 应用列表 页面顶部选择...
DROP SCHEMA
DROP SCHEMA语句用于删除数据库中的模式。本文为您介绍DROP SCHEMA的用法及使用限制。使用限制 您不能删除系统默认创建的命名为 public 的Schema。语法 DROP SCHEMA[IF EXISTS]name[,.][CASCADE|RESTRICT]参数说明如下表所示。参数 描述 ...
实时物化视图
使用指南 前提条件 在使用实时物化视图功能前，需要先将内核小版本升级至V1.1.27后，再在数据库中创建 polar_ivm 插件。CREATE EXTENSION polar_ivm WITH SCHEMA pg_catalog;说明 您可通过如下语句查看 PolarDB PostgreSQL版 的内核小版本...
流量诊断
背景信息 在实际使用数据库的过程中，会存在文件数过多导致请求时延变长的情况。同时，流量分布不均匀的问题导致部分节点负载过高并出现热点，进一步造成系统卡顿，影响正常使用。集群管理系统提供流量诊断功能，帮助用户定位热点分片和Key...
实时Top Key统计与离线全量Key分析
您可以调用数据库自治服务DAS（Database Autonomy Service）的相关API接口来执行实时Top Key统计或离线全量Key分析任务。功能介绍 实时Top Key统计：实时展示实例中的大Key和热Key信息，同时支持查看4天内的大Key和热Key历史信息。该功能可...
实时物化视图
对于存量集群，需要升级到内核小版本（V1.1.27）后，在数据库中创建 polar_ivm 插件。CREATE EXTENSION polar_ivm WITH SCHEMA pg_catalog;说明 您可通过如下语句查看 PolarDB PostgreSQL版（兼容Oracle）的内核小版本的版本号：show polar...
ALTER SCHEMA
ALTER SCHEMA语句用于修改数据库中的模式。本文为您介绍ALTER SCHEMA的用法及使用限制。使用限制 交互式分析Hologres仅支持修改模式的名称。使用 ALTER SCHEMA RENAME 修改模式名称时，系统将转移原Schema中的所有表至重命名的Schema中，...
某互动广告运营商实时竞价数据迁移至阿里云Lindorm
从IDC自建到云数据库HBase标准版，再到 云原生多模数据库 Lindorm，满足更少的资源投入同时降低99.9%请求返回的最大时间。业务挑战 实时竞价（RTB）不同于传统的广告投放模式，RTB对广告曝光提交竞价请求的延迟通常小于100ms，超出意味着...
实时物化视图
对于存量集群，需要升级到内核小版本（V1.1.27）后，在数据库中创建 polar_ivm 插件。CREATE EXTENSION polar_ivm WITH SCHEMA pg_catalog;说明 您可通过如下语句查看 PolarDB PostgreSQL版（兼容Oracle）的内核小版本的版本号：show polar...
实时请求trace
实时请求trace功能支持实时追踪、监控某个请求的执行过程，并滚动展示请求的详细信息。当业务请求耗时较长时，您可以通过该功能定位问题所在，方便进一步进行故障诊断和问题分析并及时发现安全漏洞。前提条件 已登录目标实例的集群管理系统...
- 产品推荐
- 这些文档可能帮助您