使用DataWorks或者DataX导入数据

云数据库HBase增强提供LTS服务能够支持各种HBase版本之间相互迁移和实时同步,并且支持同步RDS、Loghub的实时数据到HBase,DataX是阿里巴巴集团内被广泛使用的离线数据同步工具,实现MySQL、Oracle、SqlServer、PostgreSQL、HDFS、Hive、...

导入数据

本文介绍HBase Ganos时空引擎功能如何通过API导入数据。构建SimpleFeature HBase Ganos通过SimpleFeature类表示空间要素。每个SimpleFeature由ID,Geometry对象与其他属性构成,GeoTools API提供了SimpleFeatureBuilder类帮助用户创建...

Java API

HBase原生提供Java API进行数据访问管理,本文介绍Java API的基本使用示例。准备工作 有关Java API的更多内容请参考 Apache HBase API 手册。如果您使用的是HBase标准,基本环境的配置方法请参见 使用Java Client访问。如果您使用的是...

常见问题

阿里云数据库HBase适合什么场景?阿里云数据库HBase是基于HBase及HBase生态构建的低成本一站式数据处理平台,实现数据从处理、存储到分析全流程闭环,让客户用低成本实现一站式数据处理。相比自建HBase和EMR HBase的优势是什么?提供低成本...

HBase增强版

控制台自动关联 前提条件 LTS与云数据库HBase增强(Lindorm)所处同一个VPC网络。如何打通网络,请参见 网络打通。操作步骤 登录 HBase管理控制台。在 集群列表 页,单击BDS目标实例。在左侧导航栏选择 数据源管理,单击 添加数据源。在 ...

常见问题

HBase同步数据到Search索引的延时是多少 索引同步的延时时间=数据同步延迟+commit时间 没有堆积情况下,同步延时主要为框架开销,毫秒级别(如果有积压情况下,延时会变长,需要增加节点来增加同步能力)默认commit时间为15秒,对于写很少的...

使用前必读

注意 HBase增强已全新升级为原生多模数据库Lindorm,Lindorm全文索引功能也大幅增强,新场景请参见 Lindorm SearchIndex。

通过Hive访问HBase增强版

本文介绍如何通过Hive访问HBase增强。前提条件 HBase增强集群为2.4.3及以上版本。如何查看或升级当前版本,请参见 小版本升级。已将客户端IP地址添加至HBase增强集群的白名单。如何添加,请参见 设置白名单和安全组。已在控制台获取...

企业级HBase介绍

2019杭州云栖大会Topic-基于企业级HBase的大数据存储处理 视频地址请点击 注:选择 9.27AM-NoSQL数据库专场 视频时间为01:54:20至02:23:11

快速开始

从 HBase增强Shell访问 页面下载最新版本的HBase Shell,并根据 Shell使用指导 完成Shell访问HBase的相关配置,同时需要确认配置好 白名单。HBase实例中创建表 hbase(main):002:0>create 'testTable',{NAME=>'f'} 上面的命令在HBase中...

全量数据索引构建

当配置好HBase表与Search索引的映射后,实时写入HBase中的数据将自动同步到Search索引中。对于HBase表中的存量历史数据,需要手工执行一次全量构建才可以完成数据同步。全量数据构建 在HBase Shell中执行 build_external_index 为HBase表中...

物联网&车联网行业

物联网综合解决方案如下图。车联网示例如下,使用HBase最为海量数据库存储。

基本介绍

云HBase标准在开源HBase的基础上,做了大量的改进、稳定性优化和运维能力增强,吸收了众多阿里内部成功经验,比社区HBase版本具有更好的稳定性和可运维能力,同时100%兼容开源社区HBase。目前云HBase标准提供1.1版本和2.0版本供用户...

DescribeAvailableResource

2.0:云数据库HBase标准实例、云数据库HBase增强实例和云数据库HBase单节点实例支持2.0版本。说明 请根据云数据库HBase实例的服务类型填写对应的版本号。CoreInstanceType String 否 hbase.sn1.large 实例的Core节点规格,更多取值请...

写入时空对象

在索引表创建完成、时空对象创建完成后,即可调用数据写入接口将数据写入到HBase Ganos中。单条记录写入 HBase Ganos通过GeoTools API中的SimpleFeatureWriter写入单条数据,SimpleFeatureWriter支持事务,可以通过DataStore的...

全增量数据同步

本文主要介绍全增量数据同步的使用场景,功能列表,迁移优势,使用限制以及创建数据同步任务等操作。使用场景 大版本升级:HBase1.x升级HBase2.x。跨地域迁移:例如从青岛机房迁移到北京机房。跨账号迁移:支持不同账号迁移数据。集群升配...

访问准备

访问模式 目前HBase提供了内网访问及公网访问的模式。内网访问比较稳定,一般在生产使用。公网访问延迟相对较高,比较适合开发测试使用,主要是满足开发测试的需求。公网访问请参见 公网访问方案。经典网络 在经典网络环境中,您可以在...

Phoenix全增量迁移

增量数据同步基于HBase WAL实现异步数据同步,Bulkload的数据、不写WAL的数据将不会被同步。注意事项 迁移前请确认目标集群的HDFS容量,防止迁移过程中出现容量写满的情况。增量同步提交前,推荐修改一下源集群的日志保留时间,给增量同步...

快速入门

spark-sample模块 以AIS数据为例,展示了对轨迹数据的写入、Spark查询分析等功能,其中:Writer:向HBase Ganos写入数据,具体包括如下步骤:连接HBase Ganos,创建Schema(时空索引表),读取示例数据,写入到时空索引表。SparkDemo:从...

RDS全量同步和增量同步

支持目标数据源包括云数据库HBase增强和标准。任务创建 在LTS操作页面中,单击 导入Lindorm/HBase>RDS全增量同步。单击 创建任务。选择RDS数据源、DTS数据源以及目标数据源。说明 添加RDS数据源请参见 RDS数据源。添加DTS订阅通道请...

使用Java Client访问

登录 云数据库HBase控制台。在 集群列表 页面,单击标准集群实例名称,进入集群详情页面。在 集群详情 页面,单击 数据库连接,进入数据库连接页,复制该实例的ZK链接地址。配置ZK地址,连接集群。在客户本地的业务代码中通过如下配置,...

使用SQL访问HBase

为了能够在基于HBase API写入的列上使用Lindorm SQL,同时使用丰富的数据类型和二级索引,云数据库HBase提供了HBase列映射功能以及HBase兼容类型。语法 在Lindorm SQL中,对HBase表中自定义Column Family中的Qualifier添加映射,方便后续...

网络打通

本文主要介绍在使用Hbase的过程中如何打通连接不同的网络环境。源集群网络环境 目标集群网络环境 BDS服务是否支持 网络如何打通 VPC 相同VPC 是 BDS控制台关联HBase集群。VPC 不同的VPC 是 VPC之间需要建立一个 高速通道 HBase集群添加BDS...

API概览

云数据库HBase版提供以下相关API接口。实例管理 API 描述 CreateCluster 创建HBase实例。RenewInstance 为当前HBase实例续费。ConvertInstance 转换HBase实例的付费类型,支持按量付费转换为包年包月付费类型。DeleteInstance 删除HBase...

产品优势

类别 云数据库HBase增强(Lindorm)HBase开源 核心功能 HBase API 支持 支持 数据模型 支持宽列(HBase API)、表格(SQL-Like API)、队列等多种,对其他模型感兴趣的话,请联系我们。仅支持宽列 全局二级索引 内置,查询透明、高性能...

使用限制

如果需要使用Spark分析,请参见 通过Spark访问HBase增强 或者直接在Spark中调用HBase API或者使用MR的TableInputFormat。但增强支持开放HDFS来进行bulkload操作。不支持用户自定义的Filter:自定义Filter指的是用户将自身实现的Filter...

设置白名单和安全组

背景信息 为了数据库的安全,新创建的集群被默认设置为无法访问,包括:无法访问集群的开源组件,例如HBase,Ganglia和HDFS等。无法对集群的HBase服务的数据进行读写操作。在使用前,需要根据您的访问情况,将要访问数据库的机器IP加入到IP...

核心优势

相比于标准,本文主要介绍云数据库HBase增强的核心优势。HBase增强在RPC、内存管理、缓存、日志写入等方面深度优化,通过高性能数据结构、协程、合并提交、可检索编码等核心技术大幅提升读写的性能,在相同资源规格下,吞吐性能平均...

基本介绍

云HBase Serverless是基于阿里云HBase增强构建的Serverless模式服务,其内核历经8年大规模考验,在吞吐、延迟、成本、稳定性、安全、易用性等方面相比社区有质的突破,同时具备分区多副本、冷热分离、多租户等企业级能力。...

ListHBaseInstances

调用ListHBaseInstances接口获取相同专有网络的云数据库HBase实例。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 ...

产品形态(单节点/集群版本)

本文介绍云数据库HBase支持的产品形态。集群 单节点 Serverless 跨可用区双集群(欢迎咨询)费用(以实际售卖为准)>2500元/月 100~1000元/月>6元/月>5000元/月 适用场景 任何规模的企业生产 开发测试生产预发小规模生产 培训学习...

冷热分离

云数据库HBase增强支持冷热分离功能,可以将冷热数据存储在不同的介质中,有效提升热数据的查询效率,同时降低数据存储成本。背景信息 在海量大数据场景下,一张表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低,同时这...

升级HBase Java SDK

本文介绍如何将开源HBase客户端升级到对应版本的阿里云HBase客户端。前提条件 已安装Java环境且JDK为1.8及以上版本。使用须知 开源HBase 1.x版本客户端升级后为阿里云HBase 1.x版本客户端。开源HBase 2.x版本客户端升级后为阿里云HBase 2.x...

OpenAPI手册

前提条件 已购买LTS数据迁移同步服务,具体操作请参见 开通LTS。已经将客户端IP添加至LTS白名单,具体操作请参见 设置白名单。HBase全量数据迁移接口说明 创建任务 接口(POST):http://{BDSMaster}:12311/hbase/fulldata/create,...

与Spark集成分析

用户可以通过DLA Ganos实现Spark加载HBase中的时空数据并进行大规模时空分析操作。DLA Ganos是基于原生数据湖分析(Data Lake Analytics,DLA)系统设计开发的,面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化(Serverless...

主备容灾

登录 云数据库HBase控制台。在 集群列表 页面,单击集群名称,进入集群详情页。在实例信息页面在左侧导航栏选择 数据库连接,查看 VPC ID。购买LTS实例,如已经购买可以忽略,如未购买可以到 购买链接 页面购买BDS实例,BDS实例需要同HBase...

典型使用场景

传统方案数据生产者需要双写数据库和消息队列,但是这样一方面增加了应用的复杂度,同时要保证一致性,又会牺牲应用的可用性和效率,因为数据库和消息队列任务一个出问题都会影响应用系统。应用可以将消息队列的消息投递解耦,交由...

数据查询

除了使用HBase shell来写Get、Scan请求,Lindorm insight提供了一个简单的SQL查询入口,您可以使用SQL语法来查询HBase增强宽表数据。前提条件 已登录目标集群的集群管理系统,具体操作,请参见 登录集群管理系统。使用限制 为确保数据...

Phoenix数据

使用场景 云HBase Phoenix集群(Phoenix4.x,Phoenix 5.x)。自建HBase集群。EMR HBase集群。操作步骤 进入LTS页面,在左侧导航栏选择 数据源管理>添加数据源。在 添加数据源 页面设置相关参数。参数 说明 名称 自定义,支持字母与数字。...

使用限制

HBase serverless支持HBase原生API进行访问,但目前在以下几方面的使用中存在限制:不支持非Java语言访问,不支持Thrift。不支持HBase的系统管理API。HBase Serverless不支持集群管理相关操作的接口,如assign region、flush、...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库HBase版 云数据库 RDS 数据库备份 DBS 表格存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用