什么是云数据库HBase
云数据库HBase是低成本、高扩展、云智能的大数据NoSQL，兼容标准HBase访问协议，提供低成本存储、高扩展吞吐、智能数据处理等核心能力，是为淘宝推荐、花呗风控、广告投放、监控大屏、菜鸟物流轨迹、支付宝账单、手淘消息等众多阿里巴巴...
开通指南
HBase Ganos作为HBase的一个组件，本身不收取任何额外费用，只收取HBase费用。用户在购买HBase之后，即可在控制台中开通。开通方法
二级索引
重要 由于开源HBase API的一些限制，使用HBase API兼容的二级索引存在一系列限制和问题，因此该功能不再维护，不推荐新用户使用。欢迎大家通过Lindorm SQL使用二级索引，相关内容请参见 二级索引。二级索引简介 HBase原生提供了主键索引，...
增量归档MaxCompute
标准版云HBase、增强版云HBase（集群版本）、Lindorm。限制 实时数据归档基于HBase的日志，因此不能导出bulkload的数据。日志生命周期 开启归档后，如果不消费数据，默认日志会保留48小时，超时后订阅关系自动取消，保留的数据自动删除。...
流量诊断
背景信息 在实际使用数据库的过程中，会存在文件数过多导致请求时延变长的情况。同时，流量分布不均匀的问题导致部分节点负载过高并出现热点，进一步造成系统卡顿，影响正常使用。集群管理系统提供流量诊断功能，帮助用户定位热点分片和Key...
通过Hive访问HBase增强版
在Hive Client中设置需要访问的HBase增强版集群的连接地址。hive/集群的Java API连接地址 set hbase.zookeeper.quorum=ld-bp150tns0sjxs*-proxy-hbaseue.hbaseue.rds.aliyuncs.com:30020 在HBase增强版中创建表hive_hbase_table。CREATE '...
schema设计原则
前提条件 使用HBase Shell或者Java API的HBaseAdmin来创建和编辑HBase的Schema，当修改列簇时，建议先将这张表下线。Configuration config=HBaseConfiguration.create();HBaseAdmin admin=new HBaseAdmin(config);String table="Test;admin...
HBase服务关联角色
应用场景 HBase的 云盘加密 功能需要服务关联角色，新建HBase集群时 加密类型 选择 云盘加密 时会自动创建服务关联角色。AliyunServiceRoleForHBaseEncryption介绍 角色名称：AliyunServiceRoleForHBaseEncryption 角色权限策略：...
全量数据索引构建
当配置好HBase表与Search索引的映射后，实时写入HBase中的数据将自动同步到Search索引中。对于HBase表中的存量历史数据，需要手工执行一次全量构建才可以完成数据同步。全量数据构建 在HBase Shell中执行 build_external_index 为HBase表中...
全增量数据同步
本文主要介绍全增量数据同步的使用场景，功能列表，迁移优势，使用限制以及创建数据同步任务等操作。使用场景 大版本升级：HBase1.x升级HBase2.x。跨地域迁移：例如从青岛机房迁移到北京机房。跨账号迁移：支持不同账号迁移数据。集群升配...
HBase SQL（Phoenix）FAQ
关系型数据库怎么导入云HBase的phoenix表中？通过datax导入，具体操作请参见 示例参考。查询时发生遇到 ERROR 599(42912):Default enable Force index,please set phoenix.force.index=false to disable it.，应该怎么处理？为了避免查询扫...
冷热分离
云数据库HBase增强版支持冷热分离功能，可以将冷热数据存储在不同的介质中，有效提升热数据的查询效率，同时降低数据存储成本。背景信息 在海量大数据场景下，一张表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低，同时这...
CreateRestorePlan
说明 指定HBase增强版集群和备份的HBase增强版集群需要满足以下要求：版本相同。处于同一个Region。与BDS集群相关联。RestoreAllTable Boolean 是 false 是否恢复所有表，取值：true：恢复HBase增强版集群的所有表。false：不恢复HBase增强...
HBase SQL(Phoenix)5.x 使用说明
在准备好的ECS客户机上下载最新版本的HBase SQL客户端。wget https://hbase-opt.oss-cn-hangzhou.aliyuncs.com/ali-phoenix-5.2.4.1-HBase-2.x.tar.gz解压客户端压缩包。tar zxvf ali-phoenix-5.2.4.1-HBase-2.x.tar.gz 启动轻客户端工具。...
快速入门
spark-sample模块 以AIS数据为例，展示了对轨迹数据的写入、Spark查询分析等功能，其中：Writer：向HBase Ganos写入数据，具体包括如下步骤：连接HBase Ganos，创建Schema（时空索引表），读取示例数据，写入到时空索引表。SparkDemo:从...
HBase SQL(Phoenix)4.x使用说明
Phoenix查询引擎支持使用SQL进行HBase标准版数据的查询，会将SQL查询转换为一个或多个HBase API，协同处理器与自定义过滤器的实现，并编排执行。使用Phoenix进行简单查询，其性能量级是毫秒。更多的信息请参见 官网。背景信息 Ali-Phoenix...
Phoenix全增量迁移
增量数据同步基于HBase WAL实现异步数据同步，Bulkload的数据、不写WAL的数据将不会被同步。注意事项 迁移前请确认目标集群的HDFS容量，防止迁移过程中出现容量写满的情况。增量同步提交前，推荐修改一下源集群的日志保留时间，给增量同步...
注意事项
使用实例前，请设置好磁盘空间报警。...请勿使用开源HBCK工具 开源HBCK通过对比meta表和HDFS上的meta文件对集群状态进行检查，但是云数据库HBase不开放HDFS端口，如果使用开源HBCK工具会造成实例meta信息异常实例不可用。
基本概念
在矢量数据基础上结合时间属性，组成的时空数据或时空轨迹数据。针对时空几何对象的相关操作，如时空关系的判断。时空索引 HBase Ganos能够提供优异的查询性能，其背后的机制在于为时空数据建立了高效的时空索引。在HBase Ganos中，时空...
RDS数据源
本文档介绍如何添加RDS数据源。操作步骤 进入LTS页面，在左侧导航栏选择 数据源管理>添加数据源。...jdbcUrl：rm-xxxx请替换成RDS实例域，{{database}}替换成数据库名称。userCursoreFetch：参数使用默认值，无需修改。单击 添加。
创建同步任务
操作步骤 登录 云数据库HBase版控制台。在左侧导航栏选择 集群列表，单击LTS实例。在 基本信息 页面，选择 UI访问 下的 引擎软件 UI 单击 BDS。说明 如果是第一次创建同步任务，请先配置白名单并重置密码。创建同步任务。说明 创建数据源，...
RenewInstance
本接口仅适用于包年包月付费类型的HBase实例。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
自定义RAM授权策略
系统策略针对所有云数据库HBase资源进行RAM授权，您也可以根据业务需求自定义授权策略，仅向RAM用户授予指定实例的具体操作权限。本文介绍如何自定义RAM授权策略。RAM授权HBase资源的方式 创建自定义RAM授权策略的方法具体请参见 创建...
数据导入Serverless实例
大量数据从HBase集群导入Serverless集群 由于Serverless实例的写入受到购买CU数的限制，如果大量的数据直接通过API写入Serverless实例可能会花费过多时间和消耗过多CU（根据购买CU量的多少，几十GB，几百GB，或者上TB的数据可以定义为大量...
物联网&车联网行业
物联网综合解决方案如下图。车联网示例如下，使用HBase最为海量数据库存储。
DescribeInstances
调用DescribeInstances查询指定地域的HBase实例列表信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action...
访问准备
比如，我们的HBase是在杭州的可用区e，那么我们在VPC中创建一个在可用区e的vswitch，叫 switch-zone-e，对应的网段可以根据需要自行选择。在HBase的购买页面，购买VPC设置为 myvpc 和 switch-zone-e。创建ECS使用的vswitch。如果ECS可以...
DescribeActiveOperationTasks
hbase：云数据库HBase标准版。bds：BDS数据同步服务。Status Integer 否 5 任务运行状态，取值：2：等待用户指定时间。3：等待处理。4：处理中。5：成功。6：失败。7：已取消。InsName String 否 ld-bp150tns0sjxs*HBase实例ID。...
CreateAccount
仅支持HBaseue增强版 调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 CreateAccount 系统规定...
基本介绍
云HBase Serverless版是基于阿里云HBase增强版构建的Serverless模式服务，其内核历经8年大规模考验，在吞吐、延迟、成本、稳定性、安全、易用性等方面相比社区版有质的突破，同时具备分区多副本、冷热分离、多租户等企业级能力。...
功能介绍
本文介绍通过Lindorm Streams实现数据订阅功能，数据订阅功能将云数据库HBase增强版（云原生多模数据库Lindorm）表格的增量数据推送至下游消息队列Kafka，您可以根据自身业务需求自由消费增量数据，搭建或实现多种业务场景。推送流程 数据...
LTS（原BDS）服务介绍
LTS（Lindorm Tunnel Service，原BDS）是面向云HBase业务场景特点深度定制的数据生态服务。支持简单易用的数据交换、处理、订阅等能力，满足用户的数据迁移、实时订阅、数湖转存、数仓回流、单元化多活、备份恢复等需求，实现面向云HBase的...
使用HBaseue Shell访问增强版集群
本文介绍如何通过HBaseue Shell工具访问云数据库HBase增强版。前提条件 通过内网连接时，请确认已购买与HBase增强版在相同专有网络VPC的ECS服务器，并把ECS服务器的IP地址在HBase中添加为白名单。若未购买ECS服务器，具体操作请参见 如何...
创建索引表
Ganos内置了多个空间索引，用户只需在前端输入时空数据，并指定要建立的索引即可，不用再关心HBase的KV如何设计与构建，使用较为方便。在数据写入之前，需要先定义好索引表结构。Ganos目前支持四类索引，适应于不同的查询场景。这些索引...
ModifyUIAccountPassword
修改云数据库HBase管理控制台上实例管理页面的登录账号密码。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 ...
DescribeInstance
通过云数据库HBase控制台发起的任务，包括变更规格、扩容节点、缩容节点、重启实例，小版本升级等。CoreNodeCount Integer 2 Core节点个数。EnableHbaseProxy Boolean false 是否支持HBase开源客户端访问，返回值：true：支持访问。false：...
案例集合
存储场景 具体请参见 云Hbase数据库在亿方云实践之路。车联网场景 车纷享请参见 基于阿里云HBase构建车联网平台实践。HBase在新能源汽车监控系统中的应用场景请参见 HBase在新能源汽车监控的应用。金融场景 具体请参见 HBase在大搜车金融...
连接HBase Ganos
HBase Ganos API基于GeoTools接口进行数据库的操作，其中核心的数据访问模块都是围绕GeoTools DataStore类构建的。DataStore被定义为DataAccess，其中SimpleFeature代表了GeoTools中所操作的矢量要素模型，每一个点、线、多边形都可以看作...
使用DataWorks或者DataX导入数据
云数据库HBase增强版提供LTS服务能够支持各种HBase版本之间相互迁移和实时同步，并且支持同步RDS、Loghub的实时数据到HBase，DataX是阿里巴巴集团内被广泛使用的离线数据同步工具，实现MySQL、Oracle、SqlServer、PostgreSQL、HDFS、Hive、...
服务介绍
Search服务的整体数据流如上图，数据写入HBase后，BDS负责将数据实时同步到Search索引中。在此架构下，HBase服务、数据同步通道BDS和Search索引都是以独立集群的方式存在，您可以分别对各个集群进行管理：如果Search索引处理能力不足，只...
- 产品推荐
- 这些文档可能帮助您