管理Logstore
智能存储分层 开通智能存储分层，可按需将数据存储在热存储层、低频存储层或归档存储层。按需配置热存储数据保存时间，并选择后续 自动转换 为 低频存储 时，数据保存超出配置的保存时间后，将自动转入低频存储层。若配置低频存储时间后...
多元索引功能
多元索引的核心功能包括任意列的查询（包括主键列和非主键列）、多字段自由组合查询、地理位置查询、全文检索、模糊查询、前缀查询、嵌套查询、去重、排序、查询数据总行数和统计聚合，请根据实际场景需要使用。多元索引部分功能可以实现与...
技术架构
PolarDB PostgreSQL版（兼容Oracle）采用Shared Everything架构，利用分布式共享存储实现存储和计算的分离。计算节点与存储节点分离的架构设计给 PolarDB PostgreSQL版（兼容Oracle）带来了实时的水平扩展能力。由于单个数据库实例的计算...
X-Engine简介
X-Engine采用了一系列的手段，例如SuRF（SIGMOD'18 best paper）提供range scan filter减少扫描层数、异步I/O与预取。读操作中最核心的是缓存设计，Row Cache负责单行查询，Block Cache负责Row Cache的漏网之鱼，也用来进行范围扫描。由于...
功能概览
加速域名访问 SDK端侧支持开启解析本地缓存，减少递归解析过程，极大提升解析速度；阿里云公共DNS与云解析DNS联动，减少递归解析过程，访问直达权威DNS服务器，加速访问速度；解析域名生效快：公共递归DNS和云解析权威DNS售卖版联动刷新，...
如何开启存储压缩功能
PolarDB 支持存储层存储压缩功能。存储层对用户数据按块进行压缩存储，通过高压缩比，节省用户数据，降低存储成本。本文介绍如何开启存储压缩功能，以及查看开启该功能后存储空间大小的方法。前提条件 PolarDB 产品版本需为 企业版，您可以...
如何开启存储压缩功能
PolarDB 支持存储层存储压缩功能。存储层对用户数据按块进行压缩存储，通过高压缩比，节省用户数据，降低存储成本。本文介绍如何开启存储压缩功能，以及查看开启该功能后存储空间大小的方法。前提条件 PolarDB 产品版本需为 企业版，您可以...
内网DNS解析日志转存SLS
应用场景 出于合规和安全性的考虑，公司通常要求对网络日志进行存储和分析。通过内网DNS日志，可以清晰了解企业内网域名的使用情况，帮助企业对内网用户行为进行审计，及时发现潜在的安全问题。什么是内网DNS解析日志 内网DNS解析日志...
DNS
DNS是域名系统(Domain Name System)的缩写，是因特网的一项核心服务，它作为可以将域名和IP地址相互映射的一个分布式数据库，能够使人更方便的访问互联网，而不用去记住能够被机器直接读取的IP数串。DNS解析过程 DNS查询的结果通常会在本地...
产品优势
加密 传输加密保障用户数据在传输到存储的过程中不被窃取和窥探。灵活的访问模式 支持VPC网络访问文件系统或IDC机房通过专线网络、VPN网络等多种方式访问。数据传输 数据迁移服务可支持在NAS间或NAS到OSS间进行数据的同步或异步传输。数据...
变更分片集群实例配置概览
新增Shard节点时，如果添加了只读节点数，则该Shard节点和每个只读节点的存储空间大小均为新增Shard节点时选择的存储空间大小。变更Mongos节点配置 支持变配一个或多个Mongos节点的 规格。变更Shard节点配置 支持变配一个或多个Shard节点的...
技术面临的挑战与革新
随着云的概念不断发展，公有云厂商使用基于网络的块存储逐步代替了单机的本地存储，在这样的基础架构下计算和存储耦合的架构已经变得不透明不合理，此时存储计算分离的架构的优势体现了出来，存储计算分离，分布式存储系统使用高密度，低...
使用ossimport迁移数据
ossimport支持将任意地域的本地存储数据、第三方存储数据、对象存储OSS数据迁移至任意地域的OSS中。本文介绍如何使用ossimport将数据从第三方存储迁移到OSS。背景信息 某用户的数据存储于腾讯云COS广州（华南）区域，数据大小约500TB。现...
存储监控
RowDML MySQL_RowDML 实例存储节点的平均每秒从InnoDB表读取的行数、平均每秒从InnoDB表更新的行数、平均每秒从InnoDB表删除的行数、平均每秒从InnoDB表插入的行数和平均每秒向日志文件的物理写次数。MyISAM读写 MySQL_MyISAMKeyReadWrites...
方案背景
本文以车联网场景中车辆轨迹数据为例介绍基于设备接入平台与表格存储Tablestore搭建车辆轨迹数据平台的场景需求以及方案架构。场景需求 在车联网场景中，车辆通过传感器上报时序数据到云端。通过存储、查询和分析这些时序数据，用户可以...
背景
了解表格存储表设计最佳实践的背景。选择使用表格存储后，根据实际业务场景，选择直接使用表格存储提供的数据模型或者根据最佳实践进行表设计。为什么选择表格存储 如上图所示，表格存储提供了丰富、通用的功能，并具有如下优势：零运维，...
资产全景
将鼠标悬停旋转的球体上，可以查看某个业务板块的 计算消耗、存储量 和 物理表数 信息。计算消耗：当计算设置为MaxCompute时，不包含Hologres的计算消耗。存储量：仅统计生产项目（包括 prod 和 basic 项目），T+1 更新。物理表数：生产...
明细粒度事实层（DWD）
明细粒度事实层DWD（Data Warehouse Detail）以业务过程驱动建模，基于每个具体的业务过程特点，构建最细粒度的明细层事实表。您可以结合企业的数据使用特点，将明细事实表的某些重要维度属性字段做适当冗余，即宽表化处理。公共汇总粒度...
明细粒度事实层（DWD）
明细粒度事实层DWD（Data Warehouse Detail）以业务过程驱动建模，基于每个具体的业务过程特点，构建最细粒度的明细层事实表。您可以结合企业的数据使用特点，将明细事实表的某些重要维度属性字段做适当冗余，即宽表化处理。公共汇总粒度...
资产全景
将鼠标悬停旋转的球体上，可以查看某个业务板块的 计算消耗、存储量 和 物理表数 信息。计算消耗：当计算设置为MaxCompute时，不包含Hologres的计算消耗。存储量：仅统计生产项目（包括 prod 和 basic 项目），T+1 更新。物理表数：生产...
Co、递归调用
前言 我们知道，同步的递归写法，如果在退出递归条件失效时，会快速因为栈溢出导致进程挂掉。而在某些场景下，我们会采用异步的递归写法来规避这个问题：async function recursive(){ if(active)return;do something await recursive();} ...
实例规格概述
在使用Hologres实例实践过程中存在数据量可预估，最适宜实例规格以及对应Shard数区间应该设置为多少的问题，由于最适宜实例规格和Shard数不仅和数据存储量有关，还和实际访问频率、实际数据访问量、计算负载的类型（点查、分析等）、写入...
高级管理FAQ
删除策略之前，如果数据已经转储到低频存储或归档存储，数据仍会继续保存在低频存储或归档存储中，并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间，请参见 创建数据...
WITH查询（公共表表达式）
一个递归 WITH 查询的通常形式总是一个非递归项，然后是 UNION（或者 UNION ALL），再然后是一个递归项，其中只有递归项能够包含对于查询自身输出的引用。这样一个查询可以被这样执行：递归查询求值 计算非递归项。对 UNION（但不对 UNION ...
基于Flink+Hologres搭建实时数仓
使用Flink+Hologres搭建实时数仓可以充分利用Flink强大的实时处理能力和Hologres提供的Binlog、行列共存和资源强隔离等能力，实现高效、可扩展的实时数据处理和分析，帮助您更好地应对不断增长的数据量和实时业务需求。本文介绍如何通过...
计算层变量
XPROTO_MAX_DN_WAIT_CONNECTION 否 32[1-8192]单个存储节点最大请求等待数（私有协议）MERGE_SORT_BUFFER_SIZE 否 2048[1024-81920]TableScan层做归并排序使用的缓存大小，默认2 MB。WORKLOAD_TYPE 否[AP|TP]是否指定查询的workload，默认...
基本概念
DNS概念 DNS 是域名系统(Domain Name System)的缩写，是因特网的一项核心服务，它作为可以将域名和IP地址相互映射的一个分布式数据库，能够使人更方便的访问互联网，而不用去记住能够被机器直接读取的IP数串。域名的分层结构 由于因特网的...
计费规则
可观测链路 OpenTelemetry 版 对链路上报和存储、指标存储进行按量付费。本文介绍按量计费模式的计费项和付费方式。重要 本文所涉及价格请以 产品定价页 为准。基本概念 请求链路（Trace）：一个请求链路代表一个事务或者流程在（分布式）...
动态修改schema
整个过程对业务层透明，您无需变更业务代码，即可实现轻量级动态修改schema。修改多元索引schema的主要步骤说明请参见下表。步骤 操作 说明 1 创建灰度索引 为源索引创建一个灰度索引，并根据需要新增、修改和删除多元索引的schema。2 查看...
CDM明细层设计规范
本文为您介绍CDM明细层的表、数据存储与生命周期管理和各种事实表的设计规范。表命名规范 命名规则：{project_name}.dwd{业务缩写/pub}{数据域缩写}{业务过程缩写}[{自定义表命名标签缩写}]{刷新周期标识}{单分区增量全量标识}。命名说明：...
RestoreObject
解冻过程 不同存储类型的Object的解冻过程相同。Object的解冻过程如下。初始时，Object处于冷冻状态。提交一次解冻请求后，Object处于解冻中状态。服务端完成解冻任务后，Object进入解冻状态。此时您可以读取Object。如果Object处于解冻...
功能特性
数据存储 功能集 功能 功能描述 参考文档 元数据存储 宽表模型 宽表模型（WideColumn）是类Bigtable/HBase模型，可应用于元数据、大数据等多种场景。宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、...
新用户免费试用
新用户试用教程推荐 试用教程推荐 示例场景 涉及产品 操作难度 数仓加速查询 了解搭建离线数仓的思路，学习离线数仓中Hologres的加速查询功能和大屏展示效果。Hologres MaxCompute（可选）DataV PAI+Hologres基于大模型搭建企业级知识库 ...
使用Java SDK写入数据时报错The count of attribute ...
问题现象 使用 表格存储 Java SDK写入数据到数据表时出现如下报错：The count of attribute columns exceeds the maximum:128 可能原因 写入数据到 表格存储 数据表时，一行最多支持写入1024列。在使用TableStoreWriter的过程中，客户端会...
Hologres推荐的数仓分层
本文为您介绍在Hologres中数仓分层的最佳实践，方便快速构建业务，建设集高性能、敏捷化于一体的实时数仓。背景信息 Hologres与Flink、MaxCompute、DataWorks深度兼容，能够提供实时离线一体化联合解决方案。在该方案下有着非常丰富的应用...
PolarDB HTAP实时数据分析技术解密
该执行器框架充分利用列式存储的优势，例如，以一个4096行的Batch为单位访问存储层的数据，使用SIMD指令提升CPU单核处理数据的吞吐量，所有关键算子均支持并行执行。对比MySQL原有的行存执行器，性能有数量级的提升。支持行列混合执行的...
新功能发布记录
本文列举了文件存储NAS产品功能发布的时间、发布地域及相关文档。2024年02月 功能名称 功能概述 发布时间 发布地域 相关文档 通用高级型NAS 通用型NAS新增一个存储规格类型为高级型的文件系统。适用于容器数据持久化、AI训练数据存储、工业...
初始化
CNAME是指将自定义域名绑定到存储空间的过程。conf.IsCname=true;创建OssClient实例。var client=new OssClient(endpoint,accessKeyId,accessKeySecret,conf);使用STS新建OssClient 以下代码用于使用STS新建一个OssClient。using Aliyun....
Jindo CLI使用指南
可选参数如下：s：表示缓存过程同步执行，打印进度和执行信息，推荐开启。replica：缓存副本数量，默认缓存1个副本。R：递归缓存文件，当 path 是文件夹时开启。jindo fs-load[-meta][-data][-s][-m][-R][-replica value]oss:/<bucket>/无 ...
JindoCache CLI使用说明
命令：jindocache-unmount示例：jindocache-unmount/mount/dir report 功能说明：输出当前JindoCache存储加速系统信息，例如节点个数、缓存大小，缓存容量等。命令示例：jindocache-report reportMetrics 功能说明：输出当前JindoCache存储...
- 产品推荐
- 这些文档可能帮助您