数据同步概述
实时数仓Hologres是一款兼容PostgreSQL 11协议的实时数仓，与大数据生态无缝连接，支持高并发地实时写入，数据写入即可查，同时也支持离线数据的加速查询、实时数据和离线数据联邦分析，助力快速搭建企业级实时数仓。Hologres数据同步说明 ...
实时数仓 Hologres系统权限策略参考
本文描述实时数仓 Hologres支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制（RAM...
产品优势
Hologres专注实时数仓需求，从以下几个方面创新，提高数仓开发效率，降低应用门槛。专注实时场景 数据实时写入、实时更新，无需批处理，写入即可见。Hologres与Flink、Spark原生集成，支持高吞吐、低延时、有模型、高质量的实时数仓开发，...
数仓加速查询
示例架构 搭建离线数仓时，Hologres可直接读取离线数仓MaxCompute中的数据，并对接BI分析工具将数据实时展示在大屏中，示例架构如图所示。其中：待处理数据：本实践使用GitHub公开事件作为示例数据，更多关于数据集的介绍请参见 业务与数据...
新用户免费试用
Hologres基于创新的HSAP架构，可以将您原先数仓架构中的OLAP系统（Greenplum、Presto、Impala、ClickHouse）、KV数据库或Serving系统（HBase、Redis）统一在一个大数据计算引擎中，并提供快速的离线实时一体化分析能力。产品核心优势 简化...
使用PTS测试Hologres性能实践
VUM消耗量=施压机数×单机并发数×压测时长（分钟），其中单机并发数为固定值500。以本文的测试场景为例，VUM消耗量分别为：OLAP查询场景：1（使用资源IP数，即施压机数）×500×110（分钟）=55000（VUM）。Key/Value点查场景：25（使用...
功能发布记录
2023年04月 更新事项 描述 数知地球 AI Earth 产品服务调整说明 尊敬的用户您好！数知地球 AI Earth 产品功能已迁移至新版平台（https://engine-aiearth.aliyun.com ），旧版管控台（https://rsimganalys.console.aliyun.com/overview ）将...
产品公告
尊敬的阿里云用户您好，非常感谢您对阿里云“数知地球AI Earth”产品的支持，由于业务调整及功能升级，我们计划2023年10月30日暂停原“卫星及无人机遥感影像分析”产品下，遥感影像分析平台（后付费）(rsimganalys_gu_public_cn)、遥感影像...
APPROX_COUNT_DISTINCT
语法 APPROX_COUNT_DISTINCT 函数用于计算某一列去重后的行数，结果只能返回一个值，并且该值为近似值。APPROX_COUNT_DISTINCT()参数说明如下表所示。参数 描述 column 需要近似计算去重后行数的列。APPROX_COUNT_DISTINCT 采用HyperLogLog...
包年包月
计费公式：旧有配置：已经支付的金额=计算量*使用月数*单价+存储量*使用月数*单价 已经使用的金额=已经支付的金额/购买的总小时数*已经使用的小时数 剩余的金额=已经支付的金额-已经使用的金额 新配置：总共需要支付的金额=计算量*使用月数...
Table Group管理
Table Group列表包含如下信息和操作：信息：Table Group名、是否为默认Table Group、Table数、Shard数。操作：查看详情：进入Table Group表管理页面，详情请参见 Table Group表管理。设为默认：将非默认的Table Group设为默认。删除：删除...
概述
背景信息 Hologres共享集群（湖仓加速版）是原共享集群（MaxCompute BI加速）的升级版本，在支持MaxCompute数仓加速的基础上，进一步支持了OSS数据湖加速。采用存储计算分离的云原生架构，独享4 Core 16GB的接入节点，负责SQL的认证、解析...
ANALYZE和AUTO ANALYZE
Hologres需要收集数据的采样统计信息，包括数据的分布和特征、表的统计信息、列的统计信息、行数、列数、字段宽度、基数、频度、最大值、最小值、高频值、分桶分布特征等信息。这些信息将为优化器更新算子执行预估COST、搜索空间裁剪、估算...
查看Worker倾斜关系
原因3：Shard数设置不合理 建议Shard数尽量与Worker的个数存在一定的倍数关系，这样才能使得Worker间的负载尽量均衡，如果Shard数设置不够合理，会导致Worker负载可能出现不均的情况。可以通过 hologres.hg_worker_info 查看当前数据库下...
Blink和Flink常见问题及诊断
表类型 默认连接数（Flink作业的每个并发）Binlog源表 0 批量源表 1 维表 3（可以通过 connectionSize 参数调整）结果表 3（可以通过 connectionSize 参数调整）连接数计算方法 默认情况 默认情况下，作业使用的最大连接数可以通过如下公式...
HTTPS加速网关购买指引
具体操作，请参见 购买网关资源计算数。购买网关资源计算数 重要 购买网关资源计算数扩展资源包之前，需要先购买HTTPS加速网关实例，单独购买无法生效。登录 数字证书管理服务控制台。在左侧导航栏，单击 HTTPS加速网关。在 域名管理 页签...
一键导入公共数据集
任务列表包含如下信息和操作：信息：序号、实例名、数据库、公共数据集名、状态、执行进度（指已完成SQL数/总SQL数）、创建时间、结束时间。操作：详情、停止、重新运行、删除、执行历史。任务 状态 为 执行成功 时，公共数据集导入任务即...
使用建议
单个实例的连接数 与实例规格相关，详情请参见 实例规格概述。单个Table Group中的表（包括分区子表，不包括外部表）数量 10,000 说明 可以使用如下SQL查看当前数据库中每个Table Group有多少张表：SELECT property_value,count(1)FROM ...
授权信息
本文为您介绍 实时数仓 Hologres（Hologram）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。实时数仓 Hologres（Hologram）的RAM代码（RamCode）为 hologram，支持的授权粒度为 RESOURCE。权限策略通用结构 ...
DataV
本文为您介绍DataV如何连接实时数仓Hologres。背景信息 DataV是数据可视化分析BI产品，支持使用拖拽的方式在图形化编辑界面配置样式和数据，搭建数据可视化应用，满足多种业务的展示需求。Hologres独立数据源与DataV深度合作，您可以将...
基于Flink+Hologres搭建实时数仓
使用Flink+Hologres搭建实时数仓可以充分利用Flink强大的实时处理能力和Hologres提供的Binlog、行列共存和资源强隔离等能力，实现高效、可扩展的实时数据处理和分析，帮助您更好地应对不断增长的数据量和实时业务需求。本文介绍如何通过...
功能特性
实时数仓 Hologres 功能集 功能 功能描述 参考文档 计算 SQL开发 兼容PostgreSQL语法，支持完整的DDL、DML等能力，提供多种数据类型和函数，可标准的SQL开发，上手成本低。CREATE TABLE 数据类型汇总 PostgreSQL兼容函数 扩展函数 DML...
Clickhouse兼容函数
返回结果 array_agg-{1,2}(1 row)数组函数 Hologres更多数组函数及其使用方法请参见 数组函数。arrayJoin(anyarray)描述：将数组的每个元素扩展到单独行。Hologres实现：unnest(anyarray)。使用示例：SELECT unnest(ARRAY[1,2]);返回结果 1...
JSON和JSONB类型
JSON和JSONB操作符 常用JSON和JSONB操作符 常用的JSON和JSONB操作符如下表所示：操作符 右操作数类型 描述 操作示例 执行结果->int 获得JSON数组元素（索引从0开始，负整数从末尾开始计）。select '[{"a":"foo"},{"b":"bar"},{"c":"baz"}]'...
约束和限制
MaxCompute直接查询的约束限制 查询MaxCompute分区表时，扫描分区数的最大值为512。每个查询中最大的底层数据扫描量为200GB，与表以及字段的数量无关。Hologres中不支持使用MaxCompute的内建函数。UDF约束限制 Hologres中不支持使用...
数学函数
radians(45.0)0.7853981633974483 random()获取一个随机数，返回值范围为[0.0,1.0)。random()0.3977345246821642 round(dp)返回DP类型表达式四舍五入后的整数值。round(42.4)42.0 round(numeric)返回NUMERIC类型表达式四舍五入后的整数值。...
优化内部表的性能
例如，Hologres需要收集数据的采样统计信息，包括数据的分布和特征、表的统计信息、列的统计信息、行数、列数、字段宽度、基数、频度、最大值、最小值、长键值、分桶分布特征等信息。这些信息将为优化器更新算子执行预估COST、搜索空间裁剪...
关注Hologres技术圈
点击 实时数仓Hologres 关注Hologres开发者社区，获取有关Hologres最新产品咨询、技术动态、视频教学、客户案例实践等内容。
向量计算实例规格推荐
向量维度 向量数据行数 建议最小实例规格 128 小于2亿 32Core 2亿~4亿 64Core 大于4亿 128Core起 256 小于6000万 32Core 6000万~12000万 64Core 大于12000万 128Core起 512 小于3000万 32Core 3000万~6400万 64Core 大于6400万 128Core起 ...
表管理
查询行数 是 列表返回的行数。最多可展示2000行。单击 查询，即可查看对应的表管理列表。在目标表的 操作 列，单击 删除，执行删除表操作。同时您也可以选择多个表，执行 批量删除 操作。历史删表记录 进入HoloWeb开发页面，详情请参见 ...
HoloWeb简介
背景信息 Hologres是为大数据设计的一站式实时数仓，支持数据实时写入、PB级数据高并发低延时的分析处理和超高QPS点查。与MaxCompute无缝打通，支持数据加速查询，兼容PostgreSQL生态，可以使用最熟悉的BI工具对海量数据进行自助的多维分析...
用户行为分析（UV）概述
之后查询时，利用Hologres强大的列存计算直接按照查询维度去查询聚合结果表，对其中关键的RoaringBitmap字段做或运算进行去重后并统计基数，即可得出对应用户数UV，计数条数即可计算得出PV，达到亚秒级查询。只需进行一次最细粒度的预聚合...
快速搭建实时数仓分析大屏
本文为您介绍如何使用交互式分析Hologres对接实时计算，快速搭建实时数仓分析大屏的最佳实践。前提条件 开通Hologres并连接开发工具，详情请参见 DataWorks快速入门 或 连接HoloWeb。开通实时计算，详情请参见 实时计算购买流程。说明 请...
期望实例数
与未设置期望实例数伸缩组的区别 设置期望实例数伸缩组与未设置期望实例数伸缩组的主要区别如下所示：对比项 设置期望实例数伸缩组 未设置期望实例数伸缩组 维护成本 自动维护：伸缩组会自动扩缩容以满足期望实例数，如果伸缩活动失败，...
监控指标常见问题
实例的连接数通常与实例的规格有关，如果您发现连接数过多，甚至出现超出实例最大连接数的情况，或者遇到如下报错：产生 FATAL:sorry,too many clients already connection limit exceeded for superusers 报错。产生 FATAL:remaining ...
查看监控指标
交互式分析Hologres管理控制台的监控告警模块，为您提供了实例的CPU使用率、内存使用率和存储用量，SQL连接数，SQL语句执行的QPS和延迟情况，以及导入数据的RPS等指标监控，方便您查看并及时处理实例的异常。前提条件 开通交互式分析...
规格明细
规格分类 规格描述 建议值 限制值 数据大屏 大屏页面数 5 10 大屏内嵌页面数 5 30 大屏单个页面图表数 100 200 大屏数（单个工作空间）/1000 自助取数 规格分类 规格描述 建议值 限制值 自助取数 自助取数下载行数（普通）/1000000 自助取...
APP 系统预置看板
设备终端 设备终端看板，包括六张报表：操作系统丨活跃设备数、操作系统版本丨活跃设备数、分辨率丨活跃设备数、设备品牌丨活跃设备数、设备品牌型号丨活跃设备数、应用安装渠道丨关键指标，可以通过设备终端报表查看用户的设备终端数据...
小程序预置看板
设备终端 设备终端看板，包括五张报表：操作系统丨活跃设备数、操作系统版本丨活跃设备数、分辨率丨活跃设备数、设备品牌丨活跃设备数、设备品牌型号丨活跃设备数、，可以通过设备终端报表查看用户的设备终端数据分析。操作系统丨活跃设备...
购买Hologres
新购买的Hologres实例会占用两个VPC IP数，请确保您的交换机下有足够的可用IP数。Hologres根据存储资源和计算资源进行收费，包括 包年包月、按量付费 和 共享集群（湖仓加速版）三种付费模式，详情请参见 计费概述。三种付费模式的说明如下...
- 产品推荐
- 这些文档可能帮助您