管理日志
您可以通过控制台或SQL命令查询实例的错误日志，帮助您定位故障。同时您还可以通过控制台或API清理实例的错误日志，以此释放磁盘空间。此外，当实例发生主备切换后，您也可以通过控制台查看主备切换日志，以便实时监控主备切换状态等。查看...
获取RDS MySQL数据语法错误
控制台单独使用资源函数 加工规则 res_rds_mysql(address="xx",username="xx",password="xx",database="xx")错误日志 aliyun.log.logexception.LogException:{"errorCode":"InvalidEtlConfig","errorMessage":"ETL config doesn't pass ...
日志字段详情
错误日志 根据 Method 字段，错误日志被分为读操作、写操作和资源操作三类错误日志，具体如下：分类 请求方式 读操作 产生读操作日志的请求方式如下：GetHistograms GetLogs PullLogs GetCursor GetCursorTime 写操作 产生写操作日志的请求...
解析Java报错日志
需要逐步查找定位问题，并修改正则表达式，直到加工任务能够成功解析各个不同类型的错误日志。步骤三：分析错误日志数据 基于加工后的错误日志，可以进行错误日志数据分析。本文只对日志服务的Java错误日志做分析。在Project列表区域，单击...
调试面板
说明 错误日志和警告日志会在面板中以黄色和红色底色进行高亮显示。调试面板上方会显示当前警告和错误日志的数量。日志筛选 调试面板的日志功能支持用户自定义搜索或按照等级、日志产生的环境范围进行日志筛选，操作如下：日志搜索 在调试...
数据投递仪表盘
创建AnalyticDB MySQL投递任务后，日志服务自动为每个投递任务生成一个仪表盘，您可以在仪表盘中查看数据投递任务运行指标。...您也可以在当前Project下的 internal-export-log 日志库中，通过关键词ERROR或WARNING查看完整的错误日志。
管理OSS投递任务（新版）
您可以在目标Project的internal-diagnostic_log Logstore中，通过关键词ERROR或者WARN查看完整的错误日志。该目标Project为您在开启任务运行日志时所指定的Project。更多信息，请参见 开通服务日志。运行状态 展示OSS投递任务的运行状态。...
管理MaxCompute投递任务（新版）
您可以在目标Project的internal-diagnostic_log Logstore中，通过关键词ERROR或者WARN查看完整的错误日志。该目标Project为您在开启任务运行日志时所指定的Project。更多信息，请参见 开通服务日志。运行状态 展示MaxCompute投递任务的运行...
加工规则错误
错误排查方法 查看错误日志的 logging.levelname 字段，确定日志的错误级别。查看错误日志的 message 字段，定位是哪些日志事件报错。具体请参见 错误日志查看方式。查看错误日志的 reason 字段，确定这些日志事件的报错原因。根据报错原因...
SLB访问日志采集不到
如果发现无法正常采集SLB访问日志，请按照以下步骤排查。1.确认是否为SLB实例开通了访问日志 每个SLB实例需要单独设置，开通后的产生的访问日志将实时写入您的日志服务Logstore。请登录SLB控制台，在左侧导航栏中单击 日志管理>访问日志，...
采集标准Docker容器日志
如果Logtail日志（/usr/local/ilogtail/ilogtail.LOG）中出现 The parameter is invalid:uuid=none 的错误日志，请在宿主机上创建一个 product_uuid 文件，在其中输入任意合法UUID（例如 169E98C9-ABC0-4A92-B1D2-AA6239C0D261），并把该...
日志（Log）
日志服务采用半结构化的数据模式定义一条日志，包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志服务对各个数据域的格式要求不同，详细说明如下表所示。数据域 说明 格式 日志主题 日志服务保留字段（_topic_）用于...
日志服务与Elasticsearch的兼容性
本文介绍日志服务与Elasticsearch的兼容性信息，包括兼容原理、兼容的Elasticsearch API和Elasticsearch DSL（Domain Specific Language）等。重要 本文档为阿里云原创文档，知识产权归阿里云所有，由于本文档旨在介绍阿里云与第三方产品...
查看错误日志
您可以通过控制台查看实例的错误日志。前提条件 实例类型为副本集实例或分片集群实例。重要 单节点实例可以在副本集实例列表中找到，但是不支持查看错误日志信息。注意事项 您只能查看7天内的错误日志。操作步骤 登录 MongoDB管理控制台。...
Flink消费
Flink Log Connector是日志服务提供的用于对接Flink的工具，支持对接开源Flink和实时计算Flink版。本文介绍如何对接Flink消费日志数据。前提条件 已创建Project和Logstore。具体操作，请参见 创建项目Project 和 创建Logstore。已创建RAM...
创建日志告警监控规则
创建日志告警监控规则后，日志服务根据您定义的检查频率、触发条件等配置产生告警，并根据您所选择的告警策略和行动策略进行告警降噪和通知。前提条件 已采集数据。支持采集 日志、时序数据。重要 基于查询和分析语句创建告警监控规则前，...
事件检查函数
函数列表 类型 函数 说明 基本方法 e_has 判断日志字段是否存在。e_not_has 判断日志字段是否存在。支持和其他函数组合使用。相关示例，请参见 调用函数清洗数据。表达式函数 e_search 提供一种简化，类似Lucene语法的事件搜索方式。支持和...
使用Python SDK管理项目Project
项目（Project）是日志服务的资源管理单元，包含Logstore、MetricStore和机器组等资源，同时也是您访问日志服务资源的入口。本文通过代码示例介绍如何创建、修改、查询、删除Project等。前提条件 已开通日志服务。更多信息，请参见 开通...
使用Java SDK管理Project
项目（Project）是日志服务的资源管理单元，包含Logstore、MetricStore和机器组等资源，同时也是您访问日志服务资源的入口。本文通过代码示例介绍如何创建、修改、查询、删除Project等。前提条件 已开通日志服务。更多信息，请参见 开通...
日志审计服务概述
Logstore oss_log 仪表盘 OSS审计中心 OSS访问中心 OSS运维中心 OSS性能中心 OSS全局数据 云数据库RDS RDS MySQL审计日志 RDS MySQL慢日志 RDS MySQL性能日志 RDS MySQL错误日志 RDS PostgreSQL审计日志 RDS PostgreSQL慢日志 RDS ...
快速使用全量日志分析
将网站接入DDoS高防后，您可以通过全量日志分析采集和存储网站的日志数据，并对采集到的日志数据进行查询与分析。本文介绍如何快速使用全量日志分析功能。使用前须知 使用前请您了解什么是全量日志分析、如何计算所需的日志存储容量、日志...
通过Syslog投递日志到SIEM
Syslog是一个常见的日志通道，几乎所有的SIEM（例如IBM Qradar,HP Arcsight）都支持通过Syslog渠道接收日志。本文主要介绍如何通过Syslog将日志服务中的日志投递到SIEM。背景信息 Syslog主要是基于RFC5424和RFC3164定义相关格式规范，RFC...
投递日志到OSS失败
EntityNotExist.Role:The role not exists:可能原因 根据报错，可能的错误原因如下：如果报错是接入点错误，则说明日志服务的Project和OSS的Bucket的地域不一致。如果报错是RAM角色不存在，则说明填写的RAM角色的ARN错误。解决方案 根据报...
术语表
日志（Log）日志是系统运行过程中变化的一种抽象数据，其内容为指定对象的操作和其操作结果按时间的有序集合。更多信息，请参见 日志（Log）。日志组（LogGroup）日志组是一组日志的集合，是写入与读取日志的基本单位。一个日志组中的日志...
日志索引表
云产品分类 CloudLens应用 日志类型 存储 CloudLens for SLS 重要日志（消费组延迟日志、Logtail告警日志、Logtail采集日志、Logtail状态日志）详细日志 任务运行日志（定时SQL任务运行日志、数据导入、投递等任务的运行日志）错误日志 ...
什么是日志服务
日志（Log）日志是系统运行过程中变化的一种抽象数据，其内容为指定对象的操作和其操作结果按时间的有序集合。更多信息，请参见 日志（Log）。日志组（LogGroup）日志组是一组日志的集合，是写入与读取日志的基本单位。一个日志组中的日志...
日志主题（Topic）
日志主题（Topic）是日志服务的基础管理单元。您可在采集日志时指定Topic，用于区分日志。Topic可用于区分不同服务、用户、实例等产生的日志。例如系统A由前端HTTP请求处理模块、缓存模块、逻辑处理模块和存储模块组成，您可设置前端HTTP...
工作原理
错误日志会发送到您的internal-etl-log下，您可以检查下配置并重新发起。调度执行完成后，系统会根据实际执行情况变更实例状态为成功或失败。使用建议 使用文本分析时，建议根据业务情况明确具体的监控项，从而对数据进行高效的分析。明确...
如何解决查询分析与流处理两种场景下的数据口径差异
如果这个时间戳和应用程序日志时间的定义不一样（例如，事务日志是在事件发生之后基于数据库记录创建的，但业务需要定义数据中的create_time字段为日志时间），Logtail支持设置时区偏移，或者通过插件配置将日志行中的时间字段（业务时间）...
项目（Project）
项目（Project）是日志服务的资源管理单元，是进行多用户隔离与访问控制的主要边界。Project中包含Logstore、MetricStore和机器组等资源，同时它也是您访问日志服务资源的入口。建议使用不同的Project管理不同的应用、产品或项目中的数据。...
API简介
阿里云日志服务（Log Service，简称SLS）提供数据的采集、加工、查询与分析、可视化、告警、消费与投递等功能。如果您熟悉网络服务协议和一种以上编程语言，您可以通过API接口管理您的数据资源。使用限制 您能创建的Project、Logstore、...
保留字段
在采集日志或投递数据到其他云产品时，日志服务会将日志来源、时间戳等信息以Key-Value对的形式添加到日志中。这些字段是日志服务的保留字段。本文介绍日志服务的保留字段。重要 使用API写入日志数据或添加Logtail配置时，请不要将Key即...
PHP SDK快速入门
日志服务的服务接入点。此处以杭州为例，其它地域请根据实际情况填写。endpoint='cn-hangzhou.log.aliyuncs.com';本示例从环境变量中获取AccessKey ID和AccessKey Secret。accessKeyId=getenv('ALIBABA_CLOUD_ACCESS_KEY_ID');accessKey=...
创建索引
全文索引和字段索引配置参数 全文索引 参数 说明 日志聚类 打开 日志聚类 开关后，日志服务在采集文本日志时会自动聚合相似度高的日志，提取共同的日志模式，帮助您快速掌握日志整体情况。更多信息，请参见 日志聚类。大小写敏感 查询时...
使用Loggie上传日志
Loggie是一个基于Golang的轻量级、高性能的云原生日志采集Agent。您可以使用Loggie的Sink配置，将采集到的日志上传到日志服务。本文介绍通过Loggie上传日志到日志服务的操作步骤。前提条件 已创建Project和Logstore。具体操作，请参见 创建...
采集主机文本日志
采集数据常见的错误类型请参见 日志服务采集数据常见的错误类型。默认情况下，一个日志文件只能匹配一个Logtail配置。如果同一份日志需要被采集多份，请参见 如何实现文件中的日志被采集多份。将企业内网服务器日志采集到日志服务，请参见 ...
使用CloudLens for SLS分析资源用量
本文介绍在CloudLens for SLS中自定义分析 日志服务 资源用量的常用场景。背景信息 CloudLens for SLS推出账单数据（免费），用于监控计费用量。账单数据来源于费用中心，日志服务 使用账单拉取加工任务将数据拉取到表格存储中进行存储...
全局参数
在使用日志服务CLI工具执行命令时，不需要每次都输入全局参数。日志服务CLI默认使用全局参数进行请求处理。本文介绍日志服务CLI的常用全局参数。参数名称 数值类型 是否必选 示例值 描述-access-id String 否 LTAI4G243ui*pLMZ 阿里云访问...
工作原理
错误日志会发送到您的internal-etl-log下，您可以检查下配置并重新发起。调度执行完成后，系统会根据实际执行情况变更实例状态为成功或失败。使用建议 建议您在使用智能巡检时，根据业务情况，明确具体的监控项，从而进行高效的数据转化与...
从OSS获取数据出错
res_oss_file(endpoint,ak_id=res_local("AK_ID"),ak_key=res_local("AK_KEY"),bucket,'test/test.dat',format='text',change_detect_interval=20))错误日志 message:Exception:{'status':404,'x-oss-request-id':'5D49*878','details':{'...
- 产品推荐
- 这些文档可能帮助您