跨地域传输数据
日志服务支持通过数据加工实现跨地域传输数据，本文介绍跨地域传输数据的使用场景、操作步骤、计费等内容。使用场景 当您的业务分布在不同地域时，相关日志也会分布在不同地域。当您需要对不同地域的日志进行集中管理时，您可以使用日志...
消费-计量计费日志
本文介绍一种基于日志服务按量计费方案，该方案每天处理千亿级计量日志，被众多云产品使用。计量日志生成计费结果过程 计量日志记录了您所涉及计费的项目，后端计费模块根据计费项和规则进行运算，产生最后账单。例如如下原始访问日志记录...
字段操作函数
函数列表 函数 说明 v 获得日志特定字段的值。当同时传入多个字段名时，返回日志中第一个存在的字段的值。支持和其他函数组合使用。相关示例，请参见 调用函数清洗数据。e_set 添加新字段或为现有字段设置新的字段值。支持和其他函数组合...
接入Java应用或Tomcat的监控数据
您可使用Telegraf采集Java应用或Tomcat的监控数据，再通过日志服务Logtail将Telegraf数据上传到MetricStore中，搭建Java应用或Tomcat可视化监控方案。本文以Java应用监控数据为例，介绍如何通过日志服务来完成Java应用数据的采集和可视化。...
机器组简介
用户标识 如果您的服务器与日志服务属于不同账号的ECS实例、其他云厂商的服务器和自建IDC时，并且需要通过Logtail采集该服务器日志。首先，在服务器上安装Logtail，然后配置日志服务Project所属的阿里云账号ID为用户标识，授权该云账号通过...
费用优化
如果您需要经常查询最近90天的日志数据，偶尔查询90天前的数据，建议您把Logstore 数据保存周期调整到90天，同时把数据导入MaxCompute。查询90天内数据，使用日志服务，查询90天前数据，使用MaxCompute。如果您对日志有长时间存储和备份的...
采集Open-Falcon数据
Open-Falcon是一款企业级、高可用、可扩展的开源监控解决方案，用于监控服务器的状态，例如磁盘空间、端口存活、网络流量等。本文介绍如何通过Logtail和Transfer将Open-Falcon数据上传至日志服务。前提条件 已创建Project和MetricStore。...
自定义函数开发指南
cursorTime 本次函数调用包括的数据中，最后一条日志到达日志服务的服务器端的unix_timestamp。source 该字段由日志服务生成，日志服务根据ETL Job定义的任务间隔定时触发函数执行，source字段是函数Event中的重要组成部分，定义了本次函数...
使用前须知
费用说明 目前，CloudLens for OSS支持计量日志（最近60天免费）、时序监控数据（最近60天免费）、访问明细日志（最近7天免费，限额900GB/天的日志写入额度（如果一条日志为1KB，约为9亿条））的查询分析。超出部分，由日志服务单独收费。...
Logtail采集详情
本文介绍Logtail的采集过程，包括监听日志、读取日志、处理日志、过滤日志、聚合日志和发送日志。采集过程 Logtail采集数据的过程如下：监听日志 读取日志 处理日志 过滤日志 聚合日志 发送日志 说明 更多关于Logtail采集原理的介绍，请...
购买云安全中心
根据日志接入数量EPS评估：日志接入流量（GB/天）=EPS*86400s*SIZE/(1024*1024)EPS全称为Event Per Second，一天内接入威胁分析的原始日志的数量。SIZE为每条日志的大小，一般范围为3~7 KB。日志存储容量（可选）：选择需使用的热数据的...
按写入数据量计费模式计费项
重要 您可以在 日志服务控制台 查看前一天的写入流量、读取流量、存储量等信息。按写入数据量计费模式，仅收取数据存储30天以后的费用。沙特（利雅得）、河源专属云汽车合规 地域，不支持使用 资源包 抵扣按写入数据量计费。计费项 计费...
出错提示“failed to leapp preupgrade”
每个文件系统挂载项写在一行之内，不要因为参数过多而换行。每个文件系统挂载项确保是可挂载的，可通过 mount-a 命令测试挂载。配置文件中不要出现中文。问题排查解决后，运行SMC客户端再试。具体操作，请参见 运行SMC客户端。etc/vsftpd/...
CLB使用访问日志快速定位异常后端服务器
步骤一：配置访问日志 登录 传统型负载均衡CLB控制台。在左侧导航栏，选择 日志管理>访问日志。在顶部菜单栏处，选择实例的所属地域。如果您是首次使用该功能，需要进行账号授权。单击 立即授权，然后在弹出的对话框，单击 同意授权 授权 ...
UpdateLogStore-更新LogStore
standard：支持日志服务一站式数据分析功能，适用于实时监控、交互式分析以及构建完整的可观测性系统等场景。query：支持高性能查询，索引流量费用约为 Standard 的一半，但不支持 SQL 分析，适用于数据量大、存储周期长（周、月级别以上）...
CreateLogStore-创建LogStore
standard：支持日志服务一站式数据分析功能，适用于实时监控、交互式分析以及构建完整的可观测性系统等场景。query：支持高性能查询，索引流量费用约为 Standard 的一半，但不支持 SQL 分析，适用于数据量大、存储周期长（周、月级别以上）...
采集公网数据
方案对比 场景1：一天采集10 GB数据，大约一百万次写请求。（这里10 GB是压缩后的大小，实际数据大小一般为50 GB~100 GB左右。方案1 负载均衡的租赁费用：0.02×24×30=14.4元 负载均衡的流量费用：0元（上行流量免费，无公网下行流量）ECS...
日志管理
日志库（Logstore）是日志服务中的日志存储和查询的基本单元，通常用于存储一类日志数据。目前，支持在控制台或者通过API完成对日志库的增删改查操作。日志库创建完成后，用户通过API或SDK向指定日志库写入日志数据。如果用户希望收集阿里...
基本概念
如果是导入历史日志的情况，例如通过SDK导入过去30天的日志，那么 日志接收时间 就是当前时间，和 日志时间 不一致。日志标签 日志存在标记，区别于其他字段，在数据加工中，标签字段以_tag_:作为前缀。包括：用户自定义标签：用户通过API ...
UpdateLogStore
standard：支持日志服务一站式数据分析功能，适用于实时监控、交互式分析以及构建完整的可观测性系统等场景。query：支持高性能查询，索引流量费用约为Standard的一半，但不支持SQL分析，适用于数据量大、存储周期长（周、月级别以上）、无...
CreateLogStore
standard：支持日志服务一站式数据分析功能，适用于实时监控、交互式分析以及构建完整的可观测性系统等场景。query：支持高性能查询，索引流量费用约为Standard的一半，但不支持SQL分析，适用于数据量大、存储周期长（周、月级别以上）、无...
术语表
日志组（LogGroup）日志组是一组日志的集合，是写入与读取日志的基本单位。一个日志组中的日志包含相同Meta信息（IP地址、Source等信息）。更多信息，请参见 日志组（LogGroup）。时序数据（Metric）时序数据是指时间序列数据。更多信息，...
通过消费组读取文本日志进行模板匹配
日志模板匹配通过在线匹配日志和模板，监控日志模板的统计信息，例如数量变化。本文介绍通过读取日志文本进行模板匹配的操作步骤。前提条件 已采集日志到源Logstore或Metricstore。具体操作，请参见 数据采集、接入时序数据。重要 本文中所...
基础资源
在服务器上安装Logtail及在日志服务控制台上创建Logtail采集配置后，日志服务会实时下发Logtail采集配置。Logtail的更多信息，请参见 Logtail采集详情。日志保存时间 日志保存时间，单位为天。取值范围为1~3650，如果设置为3650，表示永久...
增量迁移源服务器
使用增量迁移可以在自定义的时间间隔内，将源服务器系统产生的增量数据同步至阿里云，有效减少源服务器系统业务暂停时间及最终交割时间。本文介绍增量迁移最佳实践的操作步骤。前提条件 已导入迁移源信息。您可以根据需求选择导入迁移源的...
日志应用
日志审计服务中的DDoS高防（新BGP）访问日志、DDoS高防（国际）访问日志、DDoS原生防护访问日志都存储在同一个Logstore（ddos_log）中，如果同时开启采集且设置的存储天数不同，则日志存储天数为开通者的中心化存储天数的最大值。日志审计...
导入OSS数据
您可以将OSS Bucket中的日志文件，通过数据导入方式导入到日志服务，实现日志的查询分析、加工等操作。目前日志服务只支持导入5 GB以内的OSS文件，压缩文件大小按照压缩后的大小计算。费用说明 日志服务不针对导入功能收取费用，但导入功能...
使用前须知
本文介绍日志审计服务的使用限制、费用说明等信息。使用限制 存储方式与地域限制 重要 使用日志审计服务进行日志区域化存储或中心化存储前，请合理评估存储地域是否满足相关法律法规和安全监管的要求。中心化存储 从各个阿里云账号、各个...
投递日志到MaxCompute（旧版）
例如查询2016年1月26日一天内日志数据，查询语句如下所示。select*from {ODPS_TABLE_NAME} where log_partition_time>="2015_01_26"and log_partition_time;extract_others_extract_others_是一个JSON字符串。例如要获取该字段的user-agent...
开通日志审计功能
本文介绍如何在MongoDB控制台上开通日志审计功能，进行日志的查询、在线分析和导出。日志审计功能帮助定位数据修改的操作者身份或时间点等信息，识别是否存在滥用权限、执行非合规命令等内部风险。前提条件 已开通日志服务SLS，如何开通，...
CLB访问日志功能简介
什么是CLB访问日志 CLB的访问日志功能收集了所有发送到CLB的请求的详细信息，包括请求时间、客户端IP地址、延迟、请求路径和服务器响应等。CLB作为公网访问入口，承载着海量的访问请求，您可以通过访问日志分析客户端用户行为、了解客户端...
使用前须知
阿里云DDoS高防（新BGP）、DDoS高防（国际）联合日志服务推出全量日志分析功能，提供网站访问日志、CC攻击日志的实时采集、查询、分析、加工、消费等一站式服务，帮助您排查网站访问异常、追踪CC攻击者来源、分析网站运营情况等。...
远程连接FAQ
可能原因 处理措施 服务器状态异常 只有状态为 运行中 的轻量应用服务器才允许用户登录。如果服务器的状态为 已停止，重启即可。警告 重启实例会造成您的实例停止工作，可能导致业务中断，建议您在非业务高峰期时执行该操作。如果服务器的...
CreateIndex-创建索引
excludeKey ttl integer 否 日志保存时间，单位为天。可选 7 天、30 天、90 天。30 max_text_len integer 否 日志服务默认字段值的最大长度为 2048 字节，即 2 KB。如果您需要修改字段值的最大长度，可设置统计字段（text）最大长度，取值...
导入Elasticsearch数据
本文介绍如何将Elasticsearch数据导入到日志服务，实现数据的查询分析、加工等操作。前提条件 已有可用的Elasticsearch集群。已创建Project和Logstore。具体操作，请参见 创建项目Project 和 创建Logstore。创建数据导入配置 登录 日志服务...
使用前须知
日志服务联合传统型负载均衡CLB推出7层访问日志功能，用于记录所有发送到CLB的请求的详细信息，包括请求时间、客户端IP地址、延迟、请求路径和服务器响应等。您可以通过7层访问日志分析了解客户端用户行为、客户端用户地域分布和进行问题...
通过DaemonSet方式采集Kubernetes容器文本日志
如果需要只使用一个Logtail实例收集Kubernetes节点上所有容器的日志，可以使用DaemonSet方式在Kubernetes集群上部署Logtail。本文介绍DaemonSet方式采集容器文本日志的工作原理、使用限制、前提条件、操作步骤等信息。工作原理 DaemonSet...
时间解析
Logtail时间解析处理插件用于解析日志的时间字段，并将解析结果设置为日志的_time_字段。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件。具体操作，请参见 概述。配置说明 参数名称 说明 原始...
阿里云日志服务Splunk Add-on
本文介绍如何通过阿里云日志服务Splunk Add-on将日志服务上的日志投递到Splunk。架构 Splunk Add-on架构：通过Splunk Data Input创建日志服务消费组，并从日志服务进行实时日志消费。将采集到的日志通过Splunk私有协议（Private Protocol）...
安装Logtail（Windows系统）
网络类型 适用场景 阿里云内网 云服务器ECS实例和日志服务Project属于同一地域。公网 云服务器ECS实例和日志服务Project属于不同地域。服务器为其他云厂商服务器或自建IDC。全球加速 服务器分布在海外各地的自建机房或者来自海外云厂商，...
- 产品推荐
- 这些文档可能帮助您