使用SQL访问HBase

为了能够在基于HBase API写入的列上使用Lindorm SQL,同时使用丰富的数据类型和二级索引,云数据库HBase提供了HBase列映射功能以及HBase兼容类型。语法 在Lindorm SQL中,对HBase表中自定义Column Family中的Qualifier添加映射,方便后续...

案例集合

存储场景 具体请参见 云Hbase数据库在亿方实践之路。车联网场景 车纷享请参见 基于阿里云HBase构建车联网平台实践。HBase在新能源汽车监控系统中的应用场景请参见 HBase在新能源汽车监控的应用。金融场景 具体请参见 HBase在大搜车金融...

小版本更新说明

云数据库HBase标准支持1.1版本和2.0版本,在此基础上不断提升性能和实现新功能得到小版本,本文介绍云数据库HBase标准的小版本的更新说明。1.x小版本更新说明 1.4.6.2:修复WAL可能由于HDFS BUG导致损坏的问题。修复写入HDFS瞬间异常的...

性能测试工具-Shell

配置被测表的压缩算法,可选项有:#NONE LZO ZSTD SNAPPY GZ LZ4 ZSTD 等#注意部分被测系统可能不支持指定的压缩算法#云数据库HBase性能增强推荐使用ZSTD ahbench.table.compression=SNAPPY#配置被测表的编码算法,可选项有:#NONE DIFF ...

产品优势

类别 云数据库HBase增强(Lindorm)HBase开源 核心功能 HBase API 支持 支持 数据模型 支持宽列(HBase API)、表格(SQL-Like API)、队列等多种,对其他模型感兴趣的话,请联系我们。仅支持宽列 全局二级索引 内置,查询透明、高性能...

监控与报警

向分组中添加要报警的云数据库HBase实例,详情请参见 添加资源至应用分组。创建报警规则,详情请参见 创建报警规则。创建报警联系组,详情请参见 创建报警联系人或报警联系组。警告 HBase实例在存储使用比例达到95%时会自动锁定集群,禁止...

导入数据

本文介绍HBase Ganos时空引擎功能如何通过API导入数据。构建SimpleFeature HBase Ganos通过SimpleFeature类表示空间要素。每个SimpleFeature由ID,Geometry对象与其他属性构成,GeoTools API提供了SimpleFeatureBuilder类帮助用户创建...

如何统计HBase的表行数

本文介绍统计云数据库HBase表行数的方法。根据云数据库HBase表的服务类型使用不同的统计方法。如果云数据库HBase表为增强,统计HBase表行数的方法具体请参见 统计表行数的方法。如果云数据库HBase表为标准,可以通过两种方式精确的统计...

概述

本文主要介绍需要实时获取HBase表的数据变更场景。数据写入HBase之后,很多业务场景下需要实时获取或者订阅HBase表的数据变更。当数据被更新时,触发其他应用的业务处理,...说明 该功能只支持云数据库HBase增强、云原生多模数据库Lindorm。

与Spark集成分析

用户可以通过DLA Ganos实现Spark加载HBase中的时空数据并进行规模时空分析操作。DLA Ganos是基于原生数据湖分析(Data Lake Analytics,DLA)系统设计开发的,面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化(Serverless...

使用前必读

注意 HBase增强已全新升级为原生多模数据库Lindorm,Lindorm全文索引功能也大幅增强,新场景请参见 Lindorm SearchIndex。

HBase SQL(Phoenix)4.x使用说明

Phoenix查询引擎支持使用SQL进行HBase标准版数据的查询,会将SQL查询转换为一个或多个HBase API,协同处理器与自定义过滤器的实现,并编排执行。使用Phoenix进行简单查询,其性能量级是毫秒。更多的信息请参见 官网。背景信息 Ali-Phoenix...

物联网&车联网行业

物联网综合解决方案如下图。车联网示例如下,使用HBase最为海量数据库存储。

设置白名单和安全组

说明 支持安全组的HBase版本:HBase标准HBase增强版。配置安全组,需要ECS实例和HBase集群的网络类型相同(专有网络要求属于同一个VPC ID)。每个集群最多支持添加3个安全组。登录 HBase管理控制台。在顶部菜单栏,选择集群所在地域。...

全量数据索引构建

当配置好HBase表与Search索引的映射后,实时写入HBase中的数据将自动同步到Search索引中。对于HBase表中的存量历史数据,需要手工执行一次全量构建才可以完成数据同步。全量数据构建 在HBase Shell中执行 build_external_index 为HBase表中...

流量诊断

背景信息 在实际使用数据库的过程中,会存在文件数过多导致请求时延变长的情况。同时,流量分布不均匀的问题导致部分节点负载过高并出现热点,进一步造成系统卡顿,影响正常使用。集群管理系统提供流量诊断功能,帮助用户定位热点分片和Key...

金融行业

金融行业:包括银行、保险、基金、P2P、大数据金融等公司,抽象目前HBase在金融行业的应用如下:某大数据风控平台 车联网-基于轨迹的风控 参考HBase在大搜车金融业务中的应用实践 金融公司-历史订单在线查询 金融时序数据-K线、分析 金融...

测试方法

吞吐量测试使用相同的线程数分别对社区版HBase云数据库HBase增强版进行对比测试,对比其吞吐量。毛刺率测试使用相同的吞吐压力分别对社区版HBase云数据库HBase增强版进行对比测试,对比其毛刺率。压缩率测试使用相同的数据写入社区...

主备容灾

登录 云数据库HBase控制台。在 集群列表 页面,单击集群名称,进入集群详情页。在实例信息页面在左侧导航栏选择 数据库连接,查看 VPC ID。购买LTS实例,如已经购买可以忽略,如未购买可以到 购买链接 页面购买BDS实例,BDS实例需要同HBase...

通过Hive访问HBase增强版

注意事项 如果您想要通过公网访问,在执行文本操作前,需要将HBase社区客户端更换为阿里云HBase客户端。具体操作,请参见 升级HBase Java SDK。如果应用部署在ECS实例,通过 专有网络 访问HBase增强集群前,需要确保HBase增强集群和...

DescribeAvailableResource

2.0:云数据库HBase标准实例、云数据库HBase增强实例和云数据库HBase单节点实例支持2.0版本。说明 请根据云数据库HBase实例的服务类型填写对应的版本号。CoreInstanceType String 否 hbase.sn1.large 实例的Core节点规格,更多取值请...

基本介绍

云HBase标准在开源HBase的基础上,做了大量的改进、稳定性优化和运维能力增强,吸收了众多阿里内部成功经验,比社区HBase版本具有更好的稳定性和可运维能力,同时100%兼容开源社区HBase。目前云HBase标准提供1.1版本和2.0版本供用户...

快速入门

spark-sample模块 以AIS数据为例,展示了对轨迹数据的写入、Spark查询分析等功能,其中:Writer:向HBase Ganos写入数据,具体包括如下步骤:连接HBase Ganos,创建Schema(时空索引表),读取示例数据,写入到时空索引表。SparkDemo:从...

写入时空对象

在索引表创建完成、时空对象创建完成后,即可调用数据写入接口将数据写入到HBase Ganos中。单条记录写入 HBase Ganos通过GeoTools API中的SimpleFeatureWriter写入单条数据,SimpleFeatureWriter支持事务,可以通过DataStore的...

RelateDbForHBaseHa

HaActiveVersion String 否 HBase2x 主实例数据库版本。主实例为非标准实例(即IsActiveStandard为false)时,参数必填。HBase1x:hbase1.x版本。HBase2x:hbase2.x版本。HBaseUE:hbaseue版本。HaActiveUser String 否 root 主实例用户名...

DescribeBackupTables

返回数据 名称 类型 示例值 描述 BackupRecords Array of BackupRecord 备份表详情列表。BackupRecord DataSize String 1.2 kB 数据量大小。EndTime String 2020-11-02T18:00:05Z 备份完成时间。Message String null 报错时的报错信息。...

开通备份恢复

云数据库HBase增强支持备份恢复功能,可以为您提供低成本快速恢复数据服务。本文介绍开通备份恢复功能。功能优势 实时增量同步,数据恢复点目标 小于30s。默认全库备份,支持对单表进行恢复。支持指定时间点恢复。使用限制 仅支持云数据...

DescribeRestoreFullDetails

返回数据 名称 类型 示例值 描述 RequestId String CFE525CF-C691-4140-A981-D004DAA7A840 请求Id。RestoreFull Struct 全量恢复详情。DataSize String 1.2 kB 总数据量大小。Fail Integer 0 失败的个数。PageNumber Integer 1 页码。...

全文索引服务

服务开通 开通Search服务需要三步:创建增强版HBase集群;创建BDS集群;HBase集群创建成功后,在HBase控制台页面单击 全文索引,完成Search实例的购买和关联。具体参见 开通指南。使用指南 参见 快速开始 和 索引管理。最佳实践 参见 最佳...

服务介绍

通过深度融合HBase与Solr,我们推出了既能满足大数据海量存储,又可以支持复杂多维查询和全文检索的Search服务。Search服务适用于:需要保存海量数据,并且需要各种条件组合查询的业务。例如:物流场景,需要存储大量轨迹物流信息,并需...

访问HBase HDFS

在一些场景下,比如需要bulkload导入数据,需要打开HBase集群的HDFS端口。注意:HDFS端口打开后,因误操作HDFS导致的数据丢失等问题客户自身承担,客户需要对HDFS的操作比较了解。首先联系 云HBase答疑(s0s3eg3),开通HDFS(由于HDFS的...

EnableHBaseueModule

调用EnableHBaseueModule接口开通云数据库HBase增强实例的扩展服务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值...

核心优势

相比于标准,本文主要介绍云数据库HBase增强的核心优势。HBase增强在RPC、内存管理、缓存、日志写入等方面深度优化,通过高性能数据结构、协程、合并提交、可检索编码等核心技术大幅提升读写的性能,在相同资源规格下,吞吐性能平均...

API概览

云数据库HBase版提供以下相关API接口。实例管理 API 描述 CreateCluster 创建HBase实例。RenewInstance 为当前HBase实例续费。ConvertInstance 转换HBase实例的付费类型,支持按量付费转换为包年包月付费类型。DeleteInstance 删除HBase...

DescribeEndpoints

调用DescribeEndpoints查询HBase实例的数据库连接信息。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action ...

XpackRelateDB

RelateDbType String 是 hbase 需要关联的数据库类型,可选值:hdfs hbase mongodb mysql polardb_mysql redis geomesa 返回数据 名称 类型 示例值 描述 RequestId String 50373857-C47B-4B64-9332-D0B5280B59EA 请求ID。示例 请求示例 ...

通过实时计算(Flink)访问HBase增强版

您可以使用社区Flink或阿里实时计算Flink访问HBase增强集群。本文介绍同时适用于阿里实时计算Flink和社区Flink访问HBase增强集群的方法。背景信息 您可以将HBase增强中的表作为Flink中的维表或结果表,并通过Flink SQL...

管理HBase全文索引

准备工作 学习 快速开始 部分,在 使用HBaseue Shell访问增强集群 下载好并配置好最新版本的Shell。HBase表与Search索引的映射 表和索引的映射采用JSON方式实现,一个典型的映射配置如下:{"sourceNamespace":"default","sourceTable":...

集群扩容

云数据库HBase支持通过控制台可以对集群进行在线节点扩容及磁盘扩容的功能。添加节点可以直接加一个节点,加的节点与之前集群的节点一致,包括节点的CPU、内存及磁盘,集群目前最大规模100台,单次最大5台,如果超过限制,工单联系提高配额...

OpenAPI手册

前提条件 已购买LTS数据迁移同步服务,具体操作请参见 开通LTS。已经将客户端IP添加至LTS白名单,具体操作请参见 设置白名单。HBase全量数据迁移接口说明 创建任务 接口(POST):http://{BDSMaster}:12311/hbase/fulldata/create,...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库HBase版 云数据库 RDS 数据库备份 表格存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用