基于定时SQL将日志数据导入时序库

本视频介绍如何通过定时SQL将日志数据导入时序库

基础版

本文档主要介绍了云时序数据库InfluxDB®基础版的相关信息。简介 基础版称为单机版,只有单个数据节点,采用云盘保证数据可靠,性价比高。说明 由于基础版只有一个数据节点,没有备节点作为热备份,因此当该节点意外宕机或者执行变更配置、...

账单和用量查询

如果看到产品明细显示为 时间序列数据库TSDB 或时序数据库InfluxDB®版,说明费用是由 时间序列数据库TSDB 或时序数据库InfluxDB®版产品。为什么账单详情中Lindorm的费用比购买时显示的价格高?原因:账单详情中,产品 云原生多模数据库...

数据转发到时序数据库(TSDB)

您可以配置数据流转规则,将处理过的数据转发到时序数据库(TSDB)的中。本文以物模型数据上报Topic为例,介绍流转消息数据的完整流程。前提条件 已确认当前物联网平台实例及所在地域支持将数据转发到时序数据库(TSDB)。支持的地域详细...

数据转发到时序数据库(TSDB)

您可以配置数据流转规则,将处理过的数据转发到时序数据库(TSDB)的实例中存储。本文介绍将数据流转到数据目的地的完整流程。前提条件 已确认当前物联网平台实例及所在地域支持将数据转发到时序数据库(TSDB)。支持的地域详细信息,请...

InfluxDB®️介绍

云数据库 InfluxDB®版是一款专门处理高写入和查询负载的时序数据库,完全兼容开源InfluxDB 1.8版本,用于存储大规模的时序数据并进行实时分析,包括来自DevOps监控、应用指标和IoT传感器上的数据。主要特点 InfluxDB®是您处理时序数据的...

SDK参考

时序数据库中使用了InfluxDB®️的原生SDK。关于InfluxDB®️的原生SDK详情,请参见 InfluxDB®️官方文档。

数据建模

创建时序数据库 Lindorm实例创建成功后,系统会默认创建default数据库,将数据默认写入该数据库,您无法删除default数据库。时序引擎也支持创建多个数据库,不同的数据库在存储层面进行物理隔离,支持设置不同的数据有效期(TTL)、时间...

时序数据库服务关联角色

本文介绍时序数据库服务关联角色(AliyunServiceRoleForTSDB)。背景信息 时序数据库服务关联角色(AliyunServiceRoleForTSDB)是在某些场景下,为了完成时序数据库自身的某个功能,需要获取其他云服务的访问权限。更多关于服务关联角色的...

Grafana接入阿里云时序数据库TSDB For InfluxDB®️...

将阿里云时序数据库TSDB For InfluxDB®接入Grafana后,您可以利用Grafana的丰富易用的可视化工具更好地监控和分析来自阿里云时序数据库TSDB For InfluxDB®的数据。本文介绍如何将阿里云时序数据库TSDB For InfluxDB®接入Grafana。前置...

数据转发到云原生多模数据库Lindorm

背景信息 转发的数据目的配置完成后,会自动完成以下配置,实现设备数据通过物联网平台的规则引擎 转发到时序数据库(Lindorm)。物联网平台占用Lindorm实例所在虚拟交换机的2个IP地址;将虚拟交换机的IPv4网段配置到Lindorm实例的白名单中...

数据模型

场景示例 某风力电厂包含一系列的智能风力发电机设备,创建名为 Wind-generators 的table来存储所有设备的信息,设备由 ID、型号、厂商 等Tag信息描述,每个设备会持续上报 功率、风速 等Field指标,指标数据通过时序数据库的API实时写入到...

ALTER DATABASE

如果想要修改时序数据库的指定属性,或为其添加新的数据库属性,您可以使用 ALTER DATABASE 语句。引擎与版本 ALTER DATABASE语法 仅适用于时序引擎。无版本限制。语法 alter_database_statement:=ALTER DATABASE database_identifier[WITH...

管理用户账号和数据库

本文介绍创建、修改和删除时序数据库和账号以及添加账号权限。前提条件 已购买实例,具体操作请参见 购买流程。账号类型 时序数据库Influxdb版实例支持两种数据库账号:管理员账号和普通账号。您可以在控制台管理所有账号和数据库,账号...

使用前须知

资产说明 通用数据库审计应用资产都在您选择的Project下,详细说明如下:Logstore 创建采集任务后,自动生成一个名为general-db-logstore的Logstore,用于存储数据库日志。该Logstore已配置索引。Logtail配置 创建采集任务后,自动生成一个...

时序数据库InfluxDB

本文为您介绍如何使用时序数据库InfluxDB连接器。背景信息 时序数据库InfluxDB®版是一款专门处理高写入和查询负载的时序数据库,用于存储大规模的时序数据并进行实时分析,包括来自DevOps监控、应用指标和IoT传感器上的数据。时序数据库...

数据归档

功能概要 在时序数据库持续写入的场景下,早先写入的时序数据会随着时间推移,查询频度逐渐降低。这样的数据通常被称为“冷数据”,与之相对的概念被称为“热数据”。随着冷数据体量的不断变大,存储成本也会水涨船高。所以降低冷数据存储...

Prometheus对接阿里云TSDB For InfluxDB®️服务

存储方面,Prometheus内置一个基于本地存储的时序数据库,这个单节点的数据库在扩展性和可靠性方面都有所限制,功能也不够强大;Prometheus没有在存储系统深入造轮子,而是通过提供接口的方式来集成其他存储系统,建立了灵活多样的生态。...

SQL命令管理数据库

您可以执行以下命令,查询SQL Server实例的所有数据库的数据文件和日志文件的路径信息:SELECT db_name(database_id),physical_name FROM sys.master_files;删除数据库 执行如下命令,删除数据库:DROP DATABASE[TestDb]需注意,若您在删除...

测试环境与工具

这个数据模型的场景是:一组服务器需要定期报告系统和应用程序的指标,比如每10秒在一台服务器上的9个子系统(CPU、内存、磁盘、磁盘I/O、内核、网络、Redis、PostgreSQL和Nginx)上采样101个测量值,上报到时序数据库。测试工具下载 通过 ...

配置通用数据库审计

您可以在数据库服务器或应用服务器上安装Logtail和抓包工具,采集数据库的所有活动记录,实现数据库审计。本文介绍配置通用数据库审计的操作步骤。前提条件 已有可用的数据库。已创建Project。具体操作,请参见 创建Project。操作步骤 登录...

使用RDS内网地址访问RDS MySQL数据库

当您的数据分散存储在日志服务Logstore和RDS MySQL数据库中时,您可以通过日志服务数据加工功能从对应数据库获取数据,实现数据富化。本文介绍如何配置数据加工规则及高级参数,实现通过RDS内网地址访问RDS MySQL数据库获取数据。背景信息 ...

通过Lindorm JDBC Driver连接并访问时序引擎

由于时序引擎自身是一个时序数据库,所以JDBC Driver中提供的实际上是JDBC 1.0定义的基础功能集中的一个子集。前提条件 已安装Java环境,要求安装JDK 1.8及以上版本。已将客户端IP地址添加至Lindorm白名单,具体操作请参见 设置白名单。已...

Java JDBC Driver开发手册

由于时序引擎自身是一个时序数据库,所以JDBC Driver中提供的实际上是JDBC 1.0定义的基础功能集中的一个子集。前提条件 已安装Java环境,要求安装JDK 1.8及以上版本。已将客户端IP地址添加至Lindorm白名单,具体操作请参见 设置白名单。已...

常见问题

例如执行SQL分析的权限,读取日志库数据的权限。确保已提供足够的计算资源。资源限制说明请参见 查询与分析的使用限制。避免使用逻辑过于复杂的SQL语句以及SQL时间窗口设置过大,否则将导致计算超时(服务端超时时间为10分钟)。通过定时...

创建时序预测作业

日志服务提供时序预测功能,用于对时序数据进行自动化、智能化的预测。您可以根据预测结果判断时序数据未来的走势,提前感知系统或者业务关键指标的状态。本文介绍创建时序预测作业的操作步骤。前提条件 已采集数据到Logstore或MetricStore...

创建作业

日志库日志库类型 设置为 日志库 时,需选择目标源日志库,即设置为您的多维指标数据所在的日志库时序库日志库类型 设置为 时序库 时,需选择目标时序库,即设置为您的多维指标数据所在的时序库。时间 源数据中表示时间列的...

引擎简介

云原生多模数据库 Lindorm 时序引擎是一款 高性能、低成本、稳定可靠 的在线时序数据库引擎服务,提供高效读写、高压缩比存储、时序数据聚合计算、数据库内机器学习等能力。核心能力 高性能:时序引擎支持高写入吞吐,通过自研的时序引擎,...

日志字段详情

字段 说明_topic_日志主题 redis_audit_log:DB节点的审计日志 redis_proxy_audit_log:Proxy节点的审计日志 account 数据库账号名称 command 执行的Redis命令 db 数据库名称 extend_information 附加信息 instanceid Redis实例ID ip IP...

引擎功能

数据管理 数据库管理 时序数据的存储以Database为粒度进行隔离。支持通过SQL对Database的时间分区间隔、冷热分界线、数据过期时间等属性进行设置。具体操作,请参见 数据库管理。用户和权限管理 支持对时序数据的访问进行用户认证以及存储...

多维指标智能巡检

时序库日志库类型 设置为 时序库 时,需设置 时序库,设置为您的源数据所在的时序库。角色 如果您在创建实例时已完成了授权,则此处自动显示AliyunLogETLRole角色的角色标识。目标 目标日志库,固定为internal-ml-log。在 数据特征...

日志聚合多维指标智能巡检

时序库日志库类型 设置为 时序库 时,需设置 时序库,设置为您的源数据所在的时序库。角色 如果您在创建实例时已完成了授权,则此处自动显示AliyunLogETLRole角色的角色标识。目标 目标日志库,固定为internal-ml-log。在 数据特征...

术语表

时序(MetricStore)时序日志服务中时序数据的采集、存储和查询单元。更多信息,请参见 时序(MetricStore)。日志(Log)日志是系统运行过程中变化的一种抽象数据,其内容为指定对象的操作和其操作结果按时间的有序集合。更多信息...

什么是日志服务

日志服务SLS是云原生观测与分析平台,为Log、Metric、Trace等数据...立即开通日志服务 扩展阅读 SLS不仅能进行日志查询与分析,还能观测告警、数据库审计、数据加工与处理、实现商业分析、用户画像分析……看看达人们是怎么玩的吧。直达实战派

时序引擎应用开发简介

2.数据建模 针对业务场景进行数据建模,需要确定创建数据库时序数据表,确定时序数据表的标签、时间戳和量测值,并根据数据特征确定PRIMARY KEY用于数据分片。关于数据模型,请参见 数据模型。时序引擎提供了三种Schema约束策略,分别为...

与TSDB的功能对比

半结构化的 时序数据表 模型 OpenTSDB风格的时序数据模型 存储引擎 自研的分布式时序存储引擎 基于HBase的KV存储引擎 预计算能力 原生支持 Continuous Query 存储引擎层面数据预降精度能力 不支持 TTL能力 支持级别(Database)TTL设置 ...

CREATE DATABASE

差异说明 宽表引擎和时序引擎对不同语法要素的支持情况如下:语法要素 宽表引擎 时序引擎 数据库名(database_identifier)〇 〇 数据库属性(attribute_definition)✖️ 〇 使用说明 数据库名(database_identifier)数据库名需遵循以下...

RDS SQL Server如何收缩事务日志

SET RECOVERY SIMPLE 系统会将恢复模式重置为FULL,不会实际修改数据库恢复模式为SIMPLE,但数据库日志链会断开,并返回如下报错信息:Msg 50000,Level 16,State 1,Procedure*,Line 46 Login User[Test11]can't change database[TestDb]...

通过JDBC协议分析日志

日志服务支持您在数据库(例如MySQL)中使用JDBC协议连接日志服务,并通过标准的SQL92语法查询和分析日志。前提条件 已创建阿里云账号或RAM用户的AccessKey。具体操作,请参见 访问密钥。如果使用RAM用户的AccessKey,则RAM用户必须是当前...

计费案例

计费项 说明 日计量 单价 日计费 读写流量 上传时序数据日志服务的网络流量为10 GB×20%2 GB。2 GB 0.180元/GB/天 0.36元 索引流量-时序流量 日志服务自动配置所有字段的索引。10 GB 0.200 元/GB/天 2元 存储空间-时序存储 时序数据存储...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库HBase版 云数据库 RDS 云数据库 Redis 版 数据库备份 DBS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用