从OpenTSDB到TSDB的数据迁移
本文主要介绍如何使用阿里巴巴的开源工具Datax实现从OpenTSDB到TSDB的数据迁移。背景信息 下面将首先介绍DataX工具本身，以及本次迁移工作涉及到的两个插件（OpenTSDB Reader和TSDB Writer）。DataX相关使用介绍请参阅DataX的 README 文档...
相比OpenTSDB优势
OpenTSDB是可扩展的分布式时序数据库，底层依赖HBase。作为基于通用存储开发的时序数据库典型代表，起步比较早，在时序市场的认可度相对较高。阿里云智能TSDB高度兼容OpenTSDB协议，采用自研的索引，数据模型，流式聚合等技术手段提供更...
利用DataWorks将数据迁移到TSDB
本文介绍通过DataWorks的数据集成功能，实现OpenTSDB到TSDB的数据迁移。背景 DataWorks是阿里云重要的PaaS平台产品，提供数据集成、数据开发、数据服务、数据分析、数据治理等全方位的产品服务，一站式开发管理的界面，帮助企业专注于数据...
通过Telegraf写入时序引擎
Telegraf的内置插件支持将采集的数据上报给OpenTSDB，Lindorm时序引擎100%兼容OpenTSDB，用户可以使用Telegraf来对接时序引擎。本文将介绍如何在用户的已有应用环境中部署 Telegraf 监控代理,并对接公有云时序引擎实例使之接收 Telegraf 的...
产品优势
性能卓越 具有高效的读写能力，相较于开源的 OpenTSDB 和 InfluxDB，读写效率提升了数倍。支持横向扩展，性能可达到百万级别读和千万级别写入的数据点处理能力。存储成本低 基于高效压缩算法有效压缩原始数据，最多可节约 90%的存储空间。...
时序引擎应用开发简介
使用OpenTSDB或时间序列数据库TSDB的应用开发步骤 Lindorm时序引擎兼容相关接口，对于已有使用OpenTSDB或者时间序列数据库TSDB的应用程序，您可以按照以下步骤进行应用迁移：应用适配 修改应用程序中的连接字符串，连接的目标从原有的...
数据查询
Grafana使用OpenTSDB插件访问 Lindorm时序引擎提供OpenTSDB兼容数据访问API，支持Grafana的OpenTSDB数据源插件访问Lindorm时序数据。说明 通过兼容TSDB接口的多值写入、HTTP SQL API写入、Java Native SDK写入、行协议写入等四种方式写入的...
Grafana如何对接TSDB
TSDB 兼容Grafana为OpenTSDB提供的全部查询表达式：metrics(prefix)：根据指定的前缀字符串返回查询到的所有metric（可能为空）。tag_names(metric)：根据指定的metric返回查询到的所有tag key的名称。tag_values(metric,tagKey)：根据指定...
与TSDB的功能对比
Java SDK Java SDK 数据模型 半结构化的 时序数据表 模型 OpenTSDB风格的时序数据模型 存储引擎 自研的分布式时序存储引擎 基于HBase的KV存储引擎 预计算能力 原生支持 Continuous Query 存储引擎层面数据预降精度能力 不支持 TTL能力 支持...
图扑案例
现有解决方案中，通常依赖自建单ElasticSearch检索引擎或OpenTSDB、Prometheus等时序引擎搭建数据存储，而采集数据类型多样化使得单模引擎存储方案技术复杂且运维成本高，市场需要新一代云原生且具备多模检索能力的存储系统。某著名IT咨询...
引擎功能
兼容OpenTSDB协议的写入API。支持 Prometheus 以 Remote Storage 的形式将监控数据写入。数据查询 支持通过SQL进行数据查询，兼容基于OpenTSDB协议的查询API等方式进行数据查询。用户也可以通过产品控制台的数据查询功能进行数据分组、降...
产品优势
本文从核心功能、性能、成本等方面，将 云原生多模数据库 Lindorm 与开源HBase、开源Cassandra、OpenTSDB、开源ElasticSearch、开源Solr和开源HDFS进行了对比，帮助您进一步了解Lindorm与其他数据库产品的区别以及Lindorm在各方面的优势。...
数据可视化工具
对接DataV Grafana Grafana是一款开源的可视化和分析平台，支持Prometheus、Graphite、OpenTSDB、InfluxDB、Elasticsearch、MySQL、PostgreSQL等多种数据源的数据查询、可视化等。更多信息，请参见 Grafana官方文档。Grafana可用于展示表格...
用户及权限管理
HTTP API 对于使用OpenTSDB兼容的HTTP API访问时序引擎的应用，当用户认证与权限校验功能启用时，发送请求到API，也需要指定用户信息。指定用户信息的方法 指定方法类似调用通用SQL接口，通过在HTTP请求头中加入基于Basic Authentication...
连接实例
TSDB兼容OpenTSDB协议，通过HTTP方式进行API的调用。注意：由于TSDB实例默认是专有网络VPC的模式，这种模式下如果访问机器和TSDB实例不在同一VPC环境内，会出现网络不通的情况，报出连接超时的错误：“Connection timed out”。解决办法...
数据写入
单值写入 单值写入同时也是兼容OpenTSDB的写入，单值写入使用/api/put接口写入数据。Schema约束策略默认为无约束，即不会创建时序数据表、也不支持使用SQL查询数据。不再推荐使用。API单值写入：写入数据。SDK单值写入：写入数据。使用...
功能和优势
比如对于OpenTSDB、Graphite和Elasticsearch等第三方存储，Prometheus社区提供的adapter只支持写入模式，不支持读取模式。而TSDB for Prometheus同时支持读写。如要了解更多第三方存储系统对于Prometheus读写的支持程度，请参考 Remote ...
引擎类型
云原生多模数据库 Lindorm 内含宽表引擎、时序引擎、搜索引擎、文件引擎、计算引擎和流引擎，兼容HBase/Cassandra/S3、OpenTSDB、Solr、HDFS、Kafka等多种开源标准接口，同时提供SQL查询、时序处理、文本检索分析等能力。为应对动态变化的...
车联网数据存储处理方案
方案总览 Lindorm是一款适用于任何规模、多种模型的云原生数据库服务，支持海量数据的低成本存储处理和弹性按需付费，提供宽表、时序、搜索、文件等多种数据模型，兼容HBase、Cassandra、Phoenix、OpenTSDB、Solr、SQL等多种开源标准接口，...
什么是云数据库HBase
新闻 文档存储 JSON、XML或HTML HBase API 存储量大、并发高 图片或视频 对象存储 图片、视频等 HBase API 存储量大 传感器或物联网 时序数据 时间维度的连续数据 OpenTSDB或HBase API 存储量大 车联网或运动App 时空数据 有空间维度或轨迹...
通过DataX导入Prometheus数据
setting":{"speed":{"channel":1 } } } } 启动OpenTSDB 2时序引擎迁移任务$cd${DATAX_HOME}/.$ls datax/datax.tar.gz prometheus2tsdb.json$python datax/bin/datax.py prometheus2tsdb.json 检查任务是否成功 下面是任务结束后的汇总...
连接Lindorm Search和Grafana
背景信息 Grafana是一个基于Go开发的指标数据图形化展示工具，可以实时从多个插件中采集数据并以图表展示，插件包括InfluxDB/OpenTSDB/MySQL/PosgreSQL/Elasticsearch/Solr，更多信息，请参见 插件列表。步骤1：安装Grafana和插件 下载...
HBase版本选择
说明 HBase增强版目前支持HDFS、Spark、Hive、OpenTSDB等常见大数据生态（暂不支持Phoenix），但还不支持部分组件（Kylin、Geomesa），我们正在加紧适配中。对于HBase原生的功能、客户端API，增强版与开源标准保持一致。HBase增强版内核...
数据建模
单值模型与多值模型 使用OpenTSDB协议或时间序列数据库TSDB接口单值写入的数据为单值模型，目前不支持建表和SQL访问。时序引擎底层数据存储实现了对多值模型数据的存储优化，建议您将单值模型更改为多值模型，让数据读取更加高效。
应用场景
数据中转枢纽 近10多年来，诸如KV存储（HBase）、搜索（Elasticsearch）、流式处理（Storm、Spark、Samza）、时序数据库（OpenTSDB）等专用系统应运而生。这些系统是为单一的目标而产生的，因其简单性使得在商业硬件上构建分布式系统变得...
产品架构
时序引擎 LindormTSDB 是面向海量时序数据设计的分布式时序引擎，兼容开源OpenTSDB等标准接口，其基于时序数据特点和查询方式，采用Timerange+hash结合的分区算法，时序专向优化的LSM架构和文件结构，支持海量时序数据的低成本存储、预降...
应用场景
Lindorm支持宽表模型、时序模型，提供自研的宽表引擎、时序引擎和搜索引擎，兼容HBase、Phoenix、OpenTSDB、Solr等多种开源标准接口，提供SQL查询、时序处理、检索分析等能力，满足结构化、半结构化的存储和分析需求，同时支持在线业务和离...
调度原理
本视频向您介绍日志服务数据加工的数据调度原理。
原理和语法
本视频向您展示数据加工数据分发与汇集的原理及语法。
工作原理
工作原理 本地安装一个数据库网关代理（database gateway agent）。数据库网关代理负责与数据库网关云端服务（database gateway cloud service）建立安全的、可信任的通道。不同账号、不同网关所建立的通道彼此隔离。通道建立后，当您...
预检规则的定义与运行原理
本文为您介绍预检规则的定义、运行原理和集成过程。什么是预检规则 规则的本质是一段判断逻辑，判断资源的某一个配置项是否合规。关于规则的更多信息，请参见 规则的定义及运行原理。预检规则和规则模板的检测逻辑一样，核心要素为资源配置...
Schema约束
humidity=45 1619076780000' 多值写入 支持的约束策略：弱约束 强约束 无约束（默认值）curl-X POST http://ld-bp1489gr5t*-proxy-tsdb.lindorm.rds.aliyuncs.com:8242/api/config -d'{"schema.policy.opentsdb":"WEAK"}'单值写入 仅支持无...
加密解密与签名验签的原理
加密SDK（Encryption SDK）支持加密解密、签名验签，了解其工作原理可以帮助您更好地使用加密SDK。加密解密原理 加密原理 加密SDK使用数字信封对数据进行加密。加密SDK支持通过用户主密钥（CMK）保护数据密钥（DataKey），使用数据密钥加密...
Rowkey设计
OpenTSDB的Key的格式是[metric_type][event_timestamp]，乍一看，这似乎违背了不能将timestamp做key的建议，但是它并没有将timestamp作为key的一个关键位置，有成百上千的metric_type就足够将压力分散到各个地域了。因此，尽管有着连续的...
基本原理
区别传统的两阶段提交(XA)事务，基于最终一致性原理的“柔性事务”能够更好的满足应用的高性能与高可用要求。在分布式数据库中，如果一个事务同时修改多个分库的数据，无法简单保证所有分库一定都能提交成功。如果在事务提交过程中出错，会...
加工原理
本文档主要介绍进行数据加工时日志数据的调度原理，以及加工规则引擎的工作原理。调度原理 日志服务的数据加工功能使用协同消费组对源日志库的日志数据进行流式消费，将每一条日志通过加工规则处理后再输出。调度机制 对每一个加工规则，...
AutoML工作原理
AutoML实现自动化调试参数的工作原理，是通过实验、Trial、训练任务进行循环迭代，来找到最优的超参组合。AutoML的工作机制如下图。您设定好超参数的值域、搜索算法、停止条件配置后，AutoML将其作为一次实验（experiment）传入到后端进行...
HaaS EDU场景式应用整体介绍
本案例中包括以下主要知识点：地磁传感器的工作原理 QMC5883L 三轴AMR磁传感器的原理和使用 OLED绘图与动态刷新 通过本案例的学习，能完整的学习到地磁传感器的原理和使用，AliOS Things中地磁传感器的数据读取，算法开发，OLED动态绘图...
恢复原理
AnalyticDB MySQL版 支持全量恢复和时间点恢复。恢复使用实例克隆的方式，每次恢复会生产一个新的实例，同时恢复数据将被下载并导入到该实例中。全量恢复使用已完成的有效备份集进行，每个有效备份集都是...备份和恢复的原理示意图如下所示：
扩展性原理
本文将介绍 PolarDB-X 1.0 的扩展性原理。并发和存储容量扩展性 扩展性本质在于分而治之，PolarDB-X 1.0 计算资源通过 水平拆分（分库分表）和 垂直拆分，将数据分散到多个存储资源MySQL以实现获取数据读写并发和存储容量分散的效果。水平...
- 产品推荐
- 这些文档可能帮助您