复制和分发数据
通过e_split函数将日志数据进行分裂。更多信息，请参见 e_split。通过e_output函数将日志分发到target-a和target-b。更多信息，请参见 e_output。e_drop()表示将不满足条件的日志丢弃，不进行分发。更多信息，请参见 e_drop。单击 预览数据...
日志备份时报：The transaction log for database xx ...
RDS SQL Server数据库实例进行日志备份时，出现 The transaction log for database xx is full due to 'LOG_BACKUP' 事务日志已满的报错，您可以参照本文进行操作，解决报错问题。问题现象 RDS SQL Server数据库实例进行日志备份时，报 The...
数据传输预检查
启动数据迁移项目时，为确保项目的顺利运行，OceanBase 数据传输功能会自动启动预检查环节，针对源端和目标端的数据库连通性、相关配置的正确性、增量日志参数等问题或设置进行检查。本文为您介绍数据迁移项目预检查环节的常见报错和解决...
通用数据结构
固定取值为rds-vpc，表示VPC下的RDS MySQL数据库。parameter Map {"vpc-id":"vpc-bp1aevy8sofi8mh1q*","instance-id":"i-bp1b6c719dfa08exf*","host":"192.168.XX.XX","port":"3306","username":"root","password":"sfdsfldsfksfls*","db":...
动态日志配置
通常应用使用logback、log4j等日志框架记录日志，通过日志配置文件配置日志级别，最终将日志内容输出到文件中。EDAS支持应用在运行时修改日志配置并生效。您可以在EDAS控制台创建...抓取日志时，能抓取到Spring Boot的日志级别配置吗？支持。
最佳实践
从OSS获取CSV文件进行数据富化 从RDS MySQL数据库获取数据进行数据富化 使用RDS内网地址访问RDS MySQL数据库 使用资源函数增量获取数据 使用e_dict_map、e_search_dict_map函数进行数据富化 从Hologres数据库获取数据进行富化 构建字典与...
快速设置日志告警
高级配置：在 高级配置 页签下，您可以选择监控日志库、指标库和资源数据。日志库：用于存储日志，相关的查询分析配置请参见 查询和分析日志。指标库：用于存储时序数据，相关的查询分析配置请参见 查询和分析时序数据。资源数据：用于配置...
管理Project
删除项目Project 警告 删除Project后，其管理的所有日志数据及配置信息都会被释放，不可恢复。在删除Project前请慎重确认，避免数据丢失。在Project列表中，单击目标Project对应的 删除。在 删除Project 面板中，输入Project名称和选择删除...
概览
{"Version":"1","Statement":[{"Action":["log:Post*","log:BatchPost*"],"Resource":["acs:log:*:*:project/<指定的project名称>/logstore/<指定的logstore名称>"],"Effect":"Allow"}]} 控制台查询指定日志库（Logstore）数据 给RAM用户...
动态日志配置
通常应用使用logback、log4j等日志框架记录日志，通过日志配置文件配置日志级别，最终将日志内容输出到文件中。EDAS支持应用在运行时修改日志配置并生效。您可以在EDAS控制台创建...抓取日志时，能抓取到Spring Boot的日志级别配置吗？支持。
云监控消费
云监控可以直接消费Logstore中日志数据，提供日志监控功能。通过将日志服务与云监控结合，形成了轻量级、全面、易用的日志监控解决方案。简单、易用，相比传统ELK方案，零编码即可享有完整监控解决方案。提供日志数据实时分析、监控图表...
开启日志采集功能
CloudLens for Redis支持一键开启日志采集功能，用于采集云数据库Redis的慢日志、运行日志和审计日志。本文介绍开启日志采集功能的操作步骤及相关操作。前提条件 实例需满足下述条件：版本 为Redis社区版、Tair（Redis企业版）内存型、Tair...
日志字段详情
本文介绍RDS相关日志的字段详情。审计日志 字段名称 说明_topic_日志主题，固定为rds_audit_log。instance_id RDS实例ID。check_rows 扫描的行数。db 数据库名。...db_version 数据库版本 content 日志内容 eventType 事件类型
使用前须知
dwd_ump_log_uapp_event_json_rt Logstore：用于存储U-App移动应用实时日志数据。dwd_ump_log_mini_program_event_rt Logstore：用于存储U-MiniProgram小程序实时日志数据。dwd_ump_log_uweb_rt：用于存储U-Web网站实时数据明细。重要 若您...
管理数据加工任务
消费进度 数据加工任务读取源Logstore日志数据的消费进度。执行状态 默认创建的数据加工规则执行数据指标的仪表盘，包括总览指标、加工速率指标、消费延迟指标、消费速率指标、活跃Shard指标、异常情况。更多信息，请参见 数据加工仪表盘。...
使用资源函数增量获取数据
资源信息与数据示例 日志服务资源 Project：client-project 源Logstore：client-log 数据样例如下所示：目标Logstore：client-information RDS资源 数据库：client-db 数据库表：client 数据样例如下所示：数据库用户名和密码：test/test...
日志聚合多维指标智能巡检
非指标数据一般指常规的日志数据，您可以通过SQL语句聚合生成指标数据后，再进行智能巡检。数据示例 例如A公司将其SLB 7层访问日志接入到日志服务后，在智能巡检服务中通过SQL语句计算QPS、延时、出入流量、成功率等指标，即设置 实体 为 ...
云产品日志概述
日志服务支持采集弹性计算、存储服务、安全、数据库等多种阿里云云产品的日志数据，包括云产品的操作信息、运行状况、业务动态等信息。说明 日志服务支持通过日志审计服务自动跨账号采集日志的云产品覆盖基础（ActionTrail、容器服务...
从SLS同步
例如，选择时间为 2021-12-31 08:00，即把 2021-12-31 08:00 之后的日志数据投递到云数据库ClickHouse。是 否过滤脏数据 是否对脏数据进行过滤。建议打开开关，如果关闭，遇到无法解析的脏数据，会导致投递任务失败。说明 具体的脏数据记录...
使用前须知
阿里云关系型数据库RDS联合日志服务推出RDS SQL审计日志投递功能，将RDS SQL审计日志投递到日志服务中。日志服务提供实时查询、可视化分析、告警、投递、加工等功能。本文介绍RDS SQL审计日志相关的资产详情、费用说明、使用限制等信息。...
多维指标智能巡检
源日志库 当 日志库类型 设置为 日志库 时，需设置 源日志库，设置为您的源数据所在的日志库。时序库 当 日志库类型 设置为 时序库 时，需设置 时序库，设置为您的源数据所在的时序库。角色 如果您在创建实例时已完成了授权，则此处自动...
导入MySQL数据
您可以将自建MySQL数据库或RDS MySQL数据库中的数据导入到日志服务，实现数据的查询分析、加工等操作。本文介绍导入MySQL数据的操作步骤。使用限制 目前仅支持：华东1（杭州）、华东2（上海）、华北1（青岛）、华北2（北京）、华北3...
创建作业
源日志库 当 日志库类型 设置为 日志库 时，需选择目标源日志库，即设置为您的多维指标数据所在的日志库。时序库 当 日志库类型 设置为 时序库 时，需选择目标时序库，即设置为您的多维指标数据所在的时序库。时间 源数据中表示时间列的...
费用优化
如果您需要经常查询最近90天的日志数据，偶尔查询90天前的数据，建议您把Logstore 数据保存周期调整到90天，同时把数据导入MaxCompute。查询90天内数据，使用日志服务，查询90天前数据，使用MaxCompute。如果您对日志有长时间存储和备份的...
计费案例
低频存储：0.005元/GB/天 25元 案例3 C客户业务数据日志量1天1 TB，正在进行日志数据平台选型，客户需求包括全字段可查可分析，通过数据加工清洗错误日志，日志存储30天以备问题回溯，部分数据投递到MC进行进一步的离线数据挖掘。...
消费-搭建监控系统
日志服务是阿里云一个重要的基础设施，支撑着阿里云所有集群日志数据的收集和分发。众多应用比如OTS、ODPS、CNZZ等利用日志服务logtail收集日志数据，利用API消费数据，导入下游实时统计系统或者离线系统做分析统计。作为一个基础设施，...
Flume消费
日志服务支持通过aliyun-log-flume插件与Flume进行对接，实现日志数据的写入和消费。背景信息 aliyun-log-flume是一个实现日志服务与Flume对接的插件，与Flume对接后，日志服务可以通过Flume与其它数据系统如HDFS、Kafka等对接。aliyun-log...
数据投递概述
日志服务提供投递功能，支持通过控制台将数据实时投递至OSS、MaxCompute等阿里云产品。本文介绍数据投递功能的概念、功能优势、应用场景、计费规则、投递目标等信息。数据投递 数据投递是指将日志服务采集的数据通过控制台投递至其他阿里云...
配置日志采集
本文介绍如何在EDAS控制台中配置日志采集功能，将部署在容器服务Kubernetes集群中的应用的相关业务文件日志、容器标准输出日志采集到日志服务进行查询分析。前提条件 已创建ACK集群。具体操作，请参见 创建Kubernetes托管版集群、创建...
哈啰出行
哈啰出行通过把日志数据迁移到日志服务，替代原有的Kafka、ES、ClickHouse，累积节省成本30%，同时满足了稳定性、扩展性以及日志查询与分析的需求。公司简介 哈啰出行是本地出行及生活服务平台，致力于应用数字技术的红利，为人们提供更...
从Hologres数据库获取数据进行富化
面对此类现象，您可以通过日志服务数据加工功能从Hologres数据库获取数据，并通过富化函数将数据富化后，将推荐商品存储到日志服务Logstore中，便于其它服务在Logstore中使用推荐的数据。在该场景中，使用 res_rds_mysql 函数从Hologres...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
检查和修改 Oracle 实例的系统配置 您需要进行下述操作：在源端 Oracle 数据库开启归档模式 在源端 Oracle 数据库开启补偿日志（可选）设置 Oracle 数据库的系统参数 在源端 Oracle 数据库开启归档模式 SELECT log_mode FROM v$database;...
概述
在进行日志数据查询分析时，日志中的部分信息需要和外部存储（ExternalStore）的信息进行关联查询，从而进一步丰富日志服务中的日志数据。外部存储简介 外部存储和Logstore的区别 项目 外部存储（ExternalStore）Logstore 数据存储 日志...
管理服务日志
原Project中保存的日志数据不会同步迁移或删除，若您不需要原Project数据，请 手动删除原Project。关闭服务日志 登录 日志服务控制台。在Project列表区域，单击目标Project。在目标Project详情页中，单击 服务日志 页签的 图标，在右侧面板...
如何调试正则表达式
在 TEST STRING 中粘贴日志样例中的日志，at之后的内容并没有被包含到message字段中（蓝色部分），因此该表达式不能完全匹配样例日志，即对于该样例日志来说，这条正则表达式是错误的，使用这条正则表达式无法正常采集到所有日志数据。...
观测云
计费说明 观测云支持按需购买，采用按量付费的计费方式，即按照DataKit数量、时间线数量、日志数据数量、备份日志数据数量、任务调用次数、用户访问PV数量、应用性能Trace数量、可用性监测拨测任务次数、短信发送次数等多个维度进行价格...
开通审计日志
云数据库MongoDB基于阿里云日志服务SLS（Log Service），推出审计日志功能，提供日志的查询、在线分析和导出等，帮助您时刻掌握产品安全及性能情况。背景信息 阿里云日志服务SLS（Log Service）是针对日志类数据的一站式服务，由阿里巴巴...
Logstore和MySQL联合查询
日志服务支持通过Join语法将Logstore和MySQL数据库进行联合查询，并把查询结果保存到MySQL数据库中。前提条件 已创建ExternalStore。具体操作，请参见 关联MySQL数据源。操作步骤 登录 日志服务控制台。在Project列表区域，单击目标Project...
采集MySQL查询结果
数据库表和日志样例 数据库表样例和Logtail采集到的日志样例如下所示。数据库表样例 CREATE TABLE `VersionOs`(`id` int(11)unsigned NOT NULL AUTO_INCREMENT COMMENT 'id',`time` datetime NOT NULL,`version` varchar(10)NOT NULL ...
.NET SDK概述
LoghubSample.cs 查询日志库、写入日志和查询日志相关示例。相关文档 在调用API接口过程中，若服务端返回结果中包含错误信息，则表示调用API接口失败。您可以参考API错误码对照表查找对应的解决方法。更多信息，请参见 API错误处理对照表。...
- 产品推荐
- 这些文档可能帮助您