使用SQL访问HBase

为了能够在基于HBase API写入的列上使用Lindorm SQL,同时使用丰富的数据类型和二级索引,云数据库HBase提供了HBase列映射功能以及HBase兼容类型。语法 在Lindorm SQL中,对HBase表中自定义Column Family中的Qualifier添加映射,方便后续...

产品优势

类别 云数据库HBase增强(Lindorm)HBase开源 核心功能 HBase API 支持 支持 数据模型 支持宽列(HBase API)、表格(SQL-Like API)、队列等多种,对其他模型感兴趣的话,请联系我们。仅支持宽列 全局二级索引 内置,查询透明、高性能...

管理HBase全文索引

准备工作 学习 快速开始 部分,在 使用HBaseue Shell访问增强集群 下载好并配置好最新版本的Shell。HBase表与Search索引的映射 表和索引的映射采用JSON方式实现,一个典型的映射配置如下:{"sourceNamespace":"default","sourceTable":...

如何统计HBase的表行数

本文介绍统计云数据库HBase表行数的方法。根据云数据库HBase表的服务类型使用不同的统计方法。如果云数据库HBase表为增强,统计HBase表行数的方法具体请参见 统计表行数的方法。如果云数据库HBase表为标准,可以通过两种方式精确的统计...

注意事项

3.TTL HBase和Search都支持数据TTL过期,但是HBase的TTL机制与Search的TTL机制不一样,HBase是单个KV过期,而Search中只能按照Document(对应HBase的一行)过期,而且过期的时间不会完全一致。如果业务中需要支持TTL,可以单独联系 HBase...

创建和删除索引

HBase Ganos会根据GeoJson格式所描述的数据类型自动创建不同的索引表,包括属性索引表、时空索引表等。创建索引语法如下:配置参数 说明 URL/index/:alias/:index 方法 POST URL参数 alias=[alphanumeric]表示ds名称。index=[alphanumeric]...

HBase SQL(Phoenix)与Spark的选择

集群 HBase共享一个集群,本质是HBase提供的SQL。Spark需要单独购买集群。并发 单机1 w~5 w左右。Spark最高不超过100。延迟 延迟在ms级别,一些命中较多的数据的SQL会到秒。一般延迟在300 ms以上,大部分SQL需要秒,分钟,甚至小时。更新 ...

CheckComponentsVersion

Components String HBASE,HADOOP 要检查的组件:HBASE HADOOP PHOENIX SOLR THRIFT 返回数据 名称 类型 示例值 描述 RequestId String E3537EB4-1100-41CA-A147-C74CCC8BB12C 请求ID。Components Array of Component 组件是否为最新版本...

RDS数据

本文档介绍如何添加RDS数据源。操作步骤 进入LTS页面,在左侧导航栏选择 数据源管理>添加数据源。...jdbcUrl:rm-xxxx请替换成RDS实例域,{{database}}替换成数据库名称。userCursoreFetch:参数使用默认值,无需修改。单击 添加。

ModifyMultiZoneClusterNodeType

CoreInstanceType String hbase.sn1.large core节点规格,可填种类参考 DescribeInstanceType。LogInstanceType String hbase.sn1.2xlarge log节点规格,可填种类参考 DescribeInstanceType。MasterInstanceType String hbase.sn1...

ModifyInstanceServiceConfig

ConfigureName String hbase#hbase-site.xml#hbase.client.keyvalue.maxsize 待修改的配置项名称,可调用 ListInstanceServiceConfigurations 接口查看。说明 如果您需要修改多个配置项,请输入Parameters参数。ConfigureValue String ...

企业级HBase介绍

2019杭州云栖大会Topic-基于企业级HBase的大数据存储处理 视频地址请点击 注:选择 9.27AM-NoSQL数据库专场 视频时间为01:54:20至02:23:11

快速开始

HBase增强Shell访问 页面下载最新版本的HBase Shell,并根据 Shell使用指导 完成Shell访问HBase的相关配置,同时需要确认配置好 白名单。HBase实例中创建表 hbase(main):002:0>create 'testTable',{NAME=>'f'} 上面的命令在HBase中...

创建同步任务

操作步骤 登录 云数据库HBase版控制台。在左侧导航栏选择 集群列表,单击LTS实例。在 基本信息 页面,选择 UI访问 下的 引擎软件 UI 单击 BDS。说明 如果是第一次创建同步任务,请先配置白名单并重置密码。创建同步任务。说明 创建数据源,...

主备方案介绍

云数据库HBase存储海量大数据,在业务场景中往往承载着重要数据,为保障数据的高可用性和安全性,云数据库HBase提供了主备双活和主备容灾特性。本文介绍云数据库HBase的主备双活和主备容灾特性功能。使用场景 主备双活:大数据量随机读响应...

使用DataWorks或者DataX导入数据

云数据库HBase增强提供LTS服务能够支持各种HBase版本之间相互迁移和实时同步,并且支持同步RDS、Loghub的实时数据到HBase,DataX是阿里巴巴集团内被广泛使用的离线数据同步工具,实现MySQL、Oracle、SqlServer、PostgreSQL、HDFS、Hive、...

主备容灾

登录 云数据库HBase控制台。在 集群列表 页面,单击集群名称,进入集群详情页。在实例信息页面在左侧导航栏选择 数据库连接,查看 VPC ID。购买LTS实例,如已经购买可以忽略,如未购买可以到 购买链接 页面购买BDS实例,BDS实例需要同HBase...

数据导入与迁移

HBase增强支持从阿里RDS,MySQL,不同HBase版本(含阿里云HBase和自建HBase集群)导入数据,并进行实时的增量同步,也支持将数据迁移到不同版本的HBase中。数据的导入和迁移,都是基于LTS服务实现。RDS增量数据同步 通过BDS数据同步...

数据导入Serverless实例

大量数据HBase集群导入Serverless集群 由于Serverless实例的写入受到购买CU数的限制,如果大量的数据直接通过API写入Serverless实例可能会花费过多时间和消耗过多CU(根据购买CU量的多少,几十GB,几百GB,或者上TB的数据可以定义为大量...

EvaluateMultiZoneResource

调用EvaluateMultiZoneResource接口查询HBase增强多可用区实例是否存在可用资源。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 ...

DescribeAvailableResource

2.0:云数据库HBase标准实例、云数据库HBase增强实例和云数据库HBase单节点实例支持2.0版本。说明 请根据云数据库HBase实例的服务类型填写对应的版本号。CoreInstanceType String 否 hbase.sn1.large 实例的Core节点规格,更多取值请...

账单和用量查询

您可以通过阿里云管理控制台查看云数据库HBase实例的账单详情。月账单查询 登录 云数据库HBase控制台。控制台右上方,选择 费用>用户中心。在左侧导航栏中,选择 账单管理>月账单概览。说明 月账单的详细说明,请参见 月账单详情。账单详情...

通过Hive访问HBase增强版

注意事项 如果您想要通过公网访问,在执行文本操作前,需要将HBase社区客户端更换为阿里云HBase客户端。具体操作,请参见 升级HBase Java SDK。如果应用部署在ECS实例,通过 专有网络 访问HBase增强集群前,需要确保HBase增强集群和...

系统概述

分组管理 一键巡检 不涉及 查看集群数据库的基本信息、表库空间的使用情况、分组存储概况和热点分片/Key的诊断结果,并导出诊断报告。一键巡检 流量诊断 topregion/key实时查询 查看热点分片、Key的请求量、请求数据量和平均响应时间等信息...

使用前必读

注意 HBase增强已全新升级为原生多模数据库Lindorm,Lindorm全文索引功能也大幅增强,新场景请参见 Lindorm SearchIndex。

RDS增量导入

适用版本 自建HBase1.x、2.x EMR HBase 标准版云HBase、增强版云HBase(单机版本、集群版本)云HBase Phoenix 任务创建 登录LTS操作页面,在左侧导航栏中选择 导入Lindorm/HBase>RDS实时数据复制。单击 创建通道,设置 RDS数据源 和 目标...

设置预分区

云数据库HBase的预分区功能可以帮助您合理的设计Rowkey,从而避免出现数据热点现象。本文介绍如何为HBase表设置预分区。设置方法 为HBase表test设置预分区,创建表格的语句如下示例,示例中字段的描述如下表。create'test',{NAME=>'f1',...

Revoke

调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 Revoke 系统规定参数。取值:Revoke。...

开通自动续费

在 续费管理 页面,从 产品 下拉列表中选择云数据库HBase版,单击 手动续费 或 到期不续费 页签。根据续费需求,选择对应步骤为实例续费。为单个实例开通自动续费 在 手动续费 或 到期不续费 列表中,单击目标实例所在行 操作 列的 开通...

监控与报警

向分组中添加要报警的云数据库HBase实例,详情请参见 添加资源至应用分组。创建报警规则,详情请参见 创建报警规则。创建报警联系组,详情请参见 创建报警联系人或报警联系组。警告 HBase实例在存储使用比例达到95%时会自动锁定集群,禁止...

注册DataStore

HBase Ganos REST接口中的DataStore(以下简称DS)记录了连接后端存储所需要的配置参数,包括映射在HBase的Catalog Name,以及连接HBase的zookeeper地址,其作用相当于配置信息的别名,您在HBase Ganos中注册DS的具体方式如下表。...

冷热分离

云数据库HBase增强支持冷热分离功能,可以将冷热数据存储在不同的介质中,有效提升热数据的查询效率,同时降低数据存储成本。背景信息 在海量大数据场景下,一张表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低,同时这...

基本介绍

云HBase标准在开源HBase的基础上,做了大量的改进、稳定性优化和运维能力增强,吸收了众多阿里内部成功经验,比社区HBase版本具有更好的稳定性和可运维能力,同时100%兼容开源社区HBase。目前云HBase标准提供1.1版本和2.0版本供用户...

实例节点规格

ssd)hbase.i2.xlarge 8核64 GB(本地-ssd)hbase.i2.2xlarge 16核128 GB(本地-ssd)hbase.i2.4xlarge 32核256 GB(本地-ssd)hbase.i2.8xlarge HBase增强 4核8 GB(独享规格)hbase.sn1.large 4核16 GB(独享规格)hbase.sn2.large 8核...

开通指南

开通Search服务前需要先购买HBase增强集群和同一个VPC内的BDS集群,如果需要在已经购买的HBase增强和BDS上开通Search服务,则可以跳过此步。购买HBase增强和BDS可以在HBase产品首页单击购买按钮选择相应的集群和配置,或者在HBase...

典型使用场景

传统方案数据生产者需要双写数据库和消息队列,但是这样一方面增加了应用的复杂度,同时要保证一致性,又会牺牲应用的可用性和效率,因为数据库和消息队列任务一个出问题都会影响应用系统。应用可以将消息队列的消息投递解耦,交由...

Phoenix数据

使用场景 云HBase Phoenix集群(Phoenix4.x,Phoenix 5.x)。自建HBase集群。EMR HBase集群。操作步骤 进入LTS页面,在左侧导航栏选择 数据源管理>添加数据源。在 添加数据源 页面设置相关参数。参数 说明 名称 自定义,支持字母与数字。...

RDS全量导入

标准版云HBase、增强版云HBase(集群版本)。Mysql 自建Mysql。RDS for Mysql。任务创建 登录 HBase控制台。进入LTS操作页面,在左侧导航栏中选择 导入Lindorm/HBase>RDS全量数据导入。单击 创建迁移任务,设置 RDS数据源 和 目标数据源...

快速入门

spark-sample模块 以AIS数据为例,展示了对轨迹数据的写入、Spark查询分析等功能,其中:Writer:向HBase Ganos写入数据,具体包括如下步骤:连接HBase Ganos,创建Schema(时空索引表),读取示例数据,写入到时空索引表。SparkDemo:从...

访问HBase HDFS

在一些场景下,比如需要bulkload导入数据,需要打开HBase集群的HDFS端口。注意:HDFS端口打开后,因误操作HDFS导致的数据丢失等问题客户自身承担,客户需要对HDFS的操作比较了解。首先联系 云HBase答疑(s0s3eg3),开通HDFS(由于HDFS的...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库HBase版 数据库备份 云数据库 RDS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用