加工原理
调度原理 日志服务的数据加工功能使用协同消费组对源日志库的日志数据进行流式消费，将每一条日志通过加工规则处理后再输出。调度机制 对每一个加工规则，加工服务的调度器会启动一个或多个运行实例，每个运行实例扮演一个消费者的角色去...
快速设置日志告警
高级配置：在 高级配置 页签下，您可以选择监控日志库、指标库和资源数据。日志库：用于存储日志，相关的查询分析配置请参见 查询和分析日志。指标库：用于存储时序数据，相关的查询分析配置请参见 查询和分析时序数据。资源数据：用于配置...
最佳实践
时序存储 使用Prometheus采集Kubernetes监控数据 查询与分析 查询和分析网站日志 查询和分析JSON日志 Data Explorer案例 关联Logstore与MySQL数据库进行查询分析 关联Logstore与OSS外表进行查询和分析 查询MNS日志 采集及分析Nginx监控日志...
概览
{"Version":"1","Statement":[{"Action":["log:Post*","log:BatchPost*"],"Resource":["acs:log:*:*:project/<指定的project名称>/logstore/<指定的logstore名称>"],"Effect":"Allow"}]} 控制台查询指定日志库（Logstore）数据 给RAM用户...
管理Project
删除日志项目可能导致日志库的数据丢失，请确认Logstore，MetricStore、EventStore等数据无用或已做好数据备份。本文介绍如何在日志服务控制台上创建、删除日志项目Project等操作。基本概念 项目（Project）是日志服务中的资源管理单元，...
通用数据结构
固定取值为rds-vpc，表示VPC下的RDS MySQL数据库。parameter Map {"vpc-id":"vpc-bp1aevy8sofi8mh1q*","instance-id":"i-bp1b6c719dfa08exf*","host":"192.168.XX.XX","port":"3306","username":"root","password":"sfdsfldsfksfls*","db":...
导出实时日志（公测中）
支持导出以下日志表数据：uniform_behavior：行为日志表 uniform_behavior_auto：自动化日志表 monitor_performance：性能日志表 uniform_exception：异常日志表 gateway_invoke_detail：网关日志 说明 同一个数据源只能创建一个实时日志...
logstore
名称 类型 描述 示例值 object 日志库 Logstore 数据结构。logstoreName string Logstore 名称。my-logstore ttl integer 数据的保存时间，单位为天。取值范围为 1~3650。如果配置为 3650，表示永久保存。1 shardCount integer Shard 分区...
使用前须知
阿里云日志服务和友盟联合推出实时日志订阅功能，将友盟数据开放平台U-DOP的各类明细数据一键实时同步至日志服务，实现日志实时查询、可视化分析、告警、投递、加工等操作。本文介绍友盟相关日志的资源说明、费用说明和使用限制。资源说明 ...
日志备份时报：The transaction log for database xx ...
RDS SQL Server数据库实例进行日志备份时，出现 The transaction log for database xx is full due to 'LOG_BACKUP' 事务日志已满的报错，您可以参照本文进行操作，解决报错问题。问题现象 RDS SQL Server数据库实例进行日志备份时，报 The...
概述
在进行日志数据查询分析时，日志中的部分信息需要和外部存储（ExternalStore）的信息进行关联查询，从而进一步丰富日志服务中的日志数据。外部存储简介 外部存储和Logstore的区别 项目 外部存储（ExternalStore）Logstore 数据存储 日志...
数据传输预检查
启动数据迁移项目时，为确保项目的顺利运行，OceanBase 数据传输功能会自动启动预检查环节，针对源端和目标端的数据库连通性、相关配置的正确性、增量日志参数等问题或设置进行检查。本文为您介绍数据迁移项目预检查环节的常见报错和解决...
日志字段详情
本文介绍RDS相关日志的字段详情。审计日志 字段名称 说明_topic_日志主题，固定为rds_audit_log。instance_id RDS实例ID。check_rows 扫描的行数。db 数据库名。...db_version 数据库版本 content 日志内容 eventType 事件类型
使用Aliyun Log Java Producer写入日志数据
异步非阻塞 在可用内存充足的前提下，Producer会对发往日志库的数据进行缓存，因此调用send方法时能够立即返回响应且不会阻塞，可达到计算与I/O逻辑分离的目的。之后，您可以通过返回的Future对象或传入的Callback获得数据发送的结果。资源...
开启日志采集功能
CloudLens for Redis支持一键开启日志采集功能，用于采集云数据库Redis的慢日志、运行日志和审计日志。本文介绍开启日志采集功能的操作步骤及相关操作。前提条件 实例需满足下述条件：版本 为Redis社区版、Tair（Redis企业版）内存型、Tair...
查看审计日志
在日志服务控制台查看审计日志 日志服务存储了数据库审计系统审计到的数据库操作日志，在数据库审计系统查看到的审计日志来源是日志服务。您可以在日志服务控制台查看和下载数据库审计服务创建的Project和Logstore中记录的审计日志数据。...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
消费-搭建监控系统
日志服务是阿里云一个重要的基础设施，支撑着阿里云所有集群日志数据的收集和分发。众多应用比如OTS、ODPS、CNZZ等利用日志服务logtail收集日志数据，利用API消费数据，导入下游实时统计系统或者离线系统做分析统计。作为一个基础设施，...
导入MySQL数据
您可以将自建MySQL数据库或RDS MySQL数据库中的数据导入到日志服务，实现数据的查询分析、加工等操作。本文介绍导入MySQL数据的操作步骤。使用限制 目前仅支持：华东1（杭州）、华东2（上海）、华北1（青岛）、华北2（北京）、华北3...
关联Logstore与MySQL数据库进行查询分析
本文以游戏公司数据分析场景为例，介绍日志服务Logstore与MySQL数据库关联分析功能。前提条件 已采集日志到日志服务。更多信息，请参见 数据采集。已为日志字段创建索引。更多信息，请参见 创建索引。已有可用的MySQL数据库。更多信息，请...
使用前须知
阿里云关系型数据库RDS联合日志服务推出RDS SQL审计日志投递功能，将RDS SQL审计日志投递到日志服务中。日志服务提供实时查询、可视化分析、告警、投递、加工等功能。本文介绍RDS SQL审计日志相关的资产详情、费用说明、使用限制等信息。...
SQL Server迁移上云指南
上云方案简介 上云方案 实现流程 操作步骤 物理备份上云 使用OSS（手动上云）将数据库日志恢复模式（backup_type）修改为FULL。将全量数据进行备份，并上传到OSS Bucket（存储空间）。定时备份和上传增量日志。停止源库的数据写入，最后...
云产品日志概述
云安全中心 安全日志 漏洞日志 基线日志 安全告警日志 云平台配置检查日志 网络日志 DNS解析日志 本地DNS日志 网络会话日志 Web访问日志 主机日志 进程启动日志 网络连接日志 登录流水日志 暴力破解日志 进程快照日志 账号快照日志 端口...
从Hologres数据库获取数据进行富化
面对此类现象，您可以通过日志服务数据加工功能从Hologres数据库获取数据，并通过富化函数将数据富化后，将推荐商品存储到日志服务Logstore中，便于其它服务在Logstore中使用推荐的数据。在该场景中，使用 res_rds_mysql 函数从Hologres...
开通实时日志订阅功能
本文介绍如何在友盟控制台上开通实时日志订阅功能，将U-App、U-MiniProgram和U-Web日志推送至日志服务。前提条件 已使用友盟U-App、U-MiniProgram或者U-Web产品完成数据采集。已创建Project和Logstore。更多信息，请参见 创建项目Project ...
简介
阿里云日志服务提供服务日志功能，支持记录Project内的用户操作日志等多种日志数据，并提供多种分析维度的仪表盘。您可以通过多种方式实时掌握日志服务的使用状况、提高运维效率。默认配置 默认配置项 配置内容 Logstore 当前Project产生的...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
检查和修改 Oracle 实例的系统配置 您需要进行下述操作：在源端 Oracle 数据库开启归档模式 在源端 Oracle 数据库开启补偿日志（可选）设置 Oracle 数据库的系统参数 在源端 Oracle 数据库开启归档模式 SELECT log_mode FROM v$database;...
日志索引表
监控指标 CloudLens for OSS 访问明细日志 计量日志 监控指标 CloudLens for EBS 监控指标 数据库 CloudLens for PolarDB 审计日志 慢日志 错误日志 性能日志 CloudLens for RDS 审计日志 CloudLens for Redis 审计日志 慢日志 运行日志 ...
从RDS MySQL数据库获取数据进行数据富化
说明 日志字段的值和RDS MySQL数据库表字段的值进行等值匹配时，如果RDS MySQL数据库表字段存在多个相同的值（例如RDS MySQL数据库表有多个值为 1 的 cid 字段。e_table_map函数只获取匹配到的第一行数据。e_table_map函数只支持单行匹配，...
从自建Oracle迁移至阿里云RDS MySQL
数据库 结构迁移 全量迁移 增量数据迁移 自建Oracle数据库 Schema的Owner权限 Schema的Owner权限 DBA RDS MySQL 或RDS MySQL Serverless 实例 待迁入数据库的写权限 待迁入数据库的写权限 待迁入数据库的写权限 数据库账号创建及授权方法：...
创建Oracle数据订阅通道
开启表级别补充日志，则更节约源Oracle数据库的磁盘空间。开启库级别补充日志 打开最小补充日志：alter database add supplemental log data;开启库级主键、唯一键补充日志：alter database add supplemental log data(primary key,unique ...
PostLogStoreLogs
调用PostLogStoreLogs接口向指定的Logstore中写入日志数据。接口说明 已创建并获取AccessKey。更多信息，请参见 访问密钥。阿里云账号AccessKey拥有所有API的访问权限，风险很高。强烈建议您创建并使用RAM用户进行API访问或日常运维。RAM...
云监控消费
云监控可以直接消费Logstore中日志数据，提供日志监控功能。通过将日志服务与云监控结合，形成了轻量级、全面、易用的日志监控解决方案。简单、易用，相比传统ELK方案，零编码即可享有完整监控解决方案。提供日志数据实时分析、监控图表...
配置日志采集
本文介绍如何在EDAS控制台中配置日志采集功能，将部署在容器服务Kubernetes集群中的应用的相关业务文件日志、容器标准输出日志采集到日志服务进行查询分析。前提条件 已创建ACK集群。具体操作，请参见 创建Kubernetes托管版集群、创建...
从自建Oracle迁移至云原生数据仓库AnalyticDB ...
开启表级别补充日志，则更节约源Oracle数据库的磁盘空间。开启库级别补充日志 打开最小补充日志：alter database add supplemental log data;开启库级主键、唯一键补充日志：alter database add supplemental log data(primary key,unique ...
云产品日志通用操作
您在各个云产品控制台开通日志功能后，即可执行日志服务相关操作。常用操作 采集到云产品日志后，您可以执行如下操作。操作 说明 查询和分析日志 查询和分析日志。具体操作，请参见 查询和分析日志。查询和分析时序数据 查询和分析时序数据...
自建Oracle同步至云原生数据仓库AnalyticDB ...
开启表级别补充日志，则更节约源Oracle数据库的磁盘空间。开启库级别补充日志 打开最小补充日志：alter database add supplemental log data;开启库级主键、唯一键补充日志：alter database add supplemental log data(primary key,unique ...
使用前须知
日志服务联合云数据库Redis推出CloudLens for Redis，用于集中管理Redis实例以及采集Redis运行日志、慢日志和审计日志。本文介绍CloudLens for Redis的功能、资产、费用、使用限制等相关信息。功能说明 CloudLens for Redis支持如下功能：...
库表恢复：按时间点恢复
在知晓误操作发生的时间点后，可以通过此方式，将误操作的数据库或者表恢复到误操作发生之前。前提条件 已存在备份集。因为按时间点恢复是先将所选时间点前的一个全量数据备份恢复到集群，然后根据Redo日志恢复增量数据到所选时间点。若您...
logging
名称 类型 描述 示例值 object 项目的服务日志数据结构。loggingProject string 服务日志要保存到的 Project 名称。my-project loggingDetails object[]服务日志配置列表。type string 服务日志的种类。取值包括：consumergroup_log：消费...
- 产品推荐
- 这些文档可能帮助您