服务器数据采集方案概述
相关文档 方案描述 阿里云Elasticsearch数据采集解决方案 本文提供Beats、Logstash、语言客户端和Kibana开发工具四种方法，您可以根据需求和环境，选择合适的方法或工具来采集数据。通过Filebeat采集Apache日志数据 您可以使用Filebeat采集...
最佳实践概览
查询分析RocketMQ客户端日志 通过Elasticsearch和rsbeat实时分析Redis slowlog 服务器数据采集 服务器数据采集方案概述 阿里云Elasticsearch数据采集解决方案 通过自建Metricbeat收集系统指标信息 使用SkyWalking和Elasticsearch实现全链路...
通过接入中心接入数据
云服务环境：对于常规云服务数据采集，通常按地域划分，为每个地域创建各自的云服务环境。每一个环境默认关联一个Prometheus实例的存储指标数据。对于应用监控和链路追踪等组件，目前数据存储不严格对齐指标数据的存储划分。组件 接入中心...
采集主机文本日志
查看Logtail采集错误的步骤，请参见 如何查看Logtail采集错误信息。采集数据常见的错误类型请参见 日志服务采集数据常见的错误类型。默认情况下，一个日志文件只能匹配一个Logtail配置。如果同一份日志需要被采集多份，请参见 如何实现文件...
采集客户端数据的高可用方案
针对该单集群故障风险，日志服务提供两种异地多活的客户端数据采集方案。方案比较 对比项 方案1：双写 方案2：数据加工复制+写入切换 部署复杂度 低 需要额外部署数据加工、切换写入。客户端资源占用 方案1是方案2的2倍 低 数据一致性 较强...
Logtail诊断
基础版诊断 日志采集错误 面板中将展示该Logstore所对应的所有Logtail采集错误列表。您可以单击目标错误代码，查看错误详情。更多信息，请参见 日志服务采集数据常见的错误类型。高级版诊断 在 Logtail异常监控 页面，查看 活跃Logtail数、...
如何查看Logtail采集错误信息
日志服务控制台提供诊断功能，支持诊断Logtail采集错误。操作步骤 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>日志库 页签中，将鼠标悬浮在目标Logstore上，然后单击目标Logstore右侧的 图标。查看诊断信息。...
什么是实时监控
设备上报网络数据的Topic、网络状态数据格式和网络错误说明，请参见 设备上报网络状态。说明 目前仅展示连网方式为Wi-Fi的设备网络状态。云监控报警 物联网平台已接通云监控服务，支持使用云监控的事件报警和阈值报警功能对在线设备数量、...
iOS SDK概述
日志服务iOS SDK封装了日志服务的日志采集相关API接口。您可以通过日志服务iOS SDK方便地采集iOS日志。...采集Unity3D游戏引擎插件数据 Unity4SLS.unitypackage Unity3D游戏引擎数据采集插件。更多信息，请参见 通过Unity Plugin接入数据。
沙盒网络
同时日志服务根据不同业务环境支持内网+VPC、公网+全球加速等多种数据传输方式，能够很好地适应沙盒网络全球化的业务数据采集场景。在多元化数据统一管理方面，日志服务提供可托管、高可用、可扩展的数据加工服务，广泛适用于数据的规整、...
Android SDK概述
日志服务Android SDK封装了日志服务的日志采集相关API接口。您可以通过日志服务Android SDK方便地采集...采集Unity3D游戏引擎插件数据 Unity4SLS.unitypackage Unity3D游戏引擎数据采集插件。更多信息，请参见 通过Unity Plugin接入数据。
什么是Logtail
Logtail多年来一直承载着阿里巴巴集团重要服务的数据采集。每天采集数百万服务器上的实时数据，日流量数十PB，并历经多次双十一挑战。相关性能指标，请参见 Logtail提升采集性能。相关技术分享，请参见 Logtail技术分享一 和 Logtail技术...
采集-IoT/嵌入式日志
C Producer 日志服务量身定制的日志数据采集解决方案。日志服务客户端Logtail在X86服务器上有百万级部署，可以参见文章：Logtail技术分享：多租户隔离技术+双十一实战效果，Polling+Inotify 组合下的日志保序采集方案。除此之外，日志服务...
获取RDS MySQL数据语法错误
解决方案 排查原因后重新配置函数，重启数据加工服务。SQL语法错误 加工规则 e_table_map(res_rds_mysql(address="xxx",username=xxx,password="xx",database="xx",sql="inset into test values(1,"aini")",field="processid",output_...
使用SDK示例代码消费订阅数据
持久化存储消费位点 如果增量数据采集模块触发容灾机制（特别是SUBSCRIBE模式），新建的增量数据采集模块将无法保存客户端上次的消费位点信息，可能会导致客户端从一个较旧的位点开始消费订阅数据，从而造成历史数据的重复消费。...
使用SDK示例代码消费订阅数据
持久化存储消费位点 如果增量数据采集模块触发容灾机制（特别是SUBSCRIBE模式），新建的增量数据采集模块将无法保存客户端上次的消费位点信息，可能会导致客户端从一个较旧的位点开始消费订阅数据，从而造成历史数据的重复消费。...
日志服务采集数据常见的错误类型
本文介绍日志服务采集数据常见的错误类型及对应的解决方法。如果您遇到其他问题，请提交 工单 处理。错误类型 错误说明 解决方法 LOG_GROUP_WAIT_TOO_LONG_ALARM 数据包从产生到发送的过程中等待的时间较长。检查发送是否正常，或者是否...
通过接入中心接入数据
ECS（VPC）环境：对于ECS主机下的各类数据采集，由于大多数情况下需要通过网络进行数据拉取，因此一个VPC对应一个环境。ARMS优先通过网络的形式采集数据，尽可能降低安装到ECS中的探针数量。云服务环境：对于常规云服务数据的采集，云服务...
查询分析RocketMQ客户端日志
本文使用Beats、Elasticsearch、Logstash和Kibana，在分布式环境下采集、汇聚、解析阿里云RocketMQ客户端SDK日志，帮助您在消息队列开发场景中快速定位并解决应用开发问题。背景信息 阿里云Elasticsearch（简称ES）已具备Elastic Stack全栈...
Pod诊断
重要 使用故障诊断功能时，系统将在您的集群执行数据采集程序并收集检查结果。采集的信息包括系统版本，以及负载、容器组件等运行状态及系统日志中关键错误信息。数据采集程序不会采集您的业务信息及敏感数据。诊断支持的异常场景 Pod诊断...
Pod诊断
重要 使用故障诊断功能时，系统将在您的集群执行数据采集程序并收集检查结果。采集的信息包括系统版本，以及负载、Docker、Kubelet等运行状态及系统日志中关键错误信息。数据采集程序不会采集您的业务信息及敏感数据。诊断支持的异常场景 ...
Logtail发布历史
修复 修复Logtail使用历史数据采集之后进程无法优雅退出的问题。1.8.6 发布时间：2024.01.30 优化 Golang插件指标数据和上报逻辑优化，指标统一通过C++指标模块上报 修复 修复开启高精度时间戳开关后Golang模块误加载问题 1.8.5 发布时间：...
采集ECS服务日志
通过采集器（Beats），您可以采集云服务器ECS（Elastic Compute Service）中的日志文件、网络数据、服务器指标等数据，发送到阿里云Elasticsearch或Logstash中进行监控、分析等操作。本文以Filebeat为例，介绍如何配置ECS服务日志采集。...
移动性能监控简介
移动性能监控（Application Performance Management，APM）是移动开发平台（mPaaS）提供的一款集移动应用性能数据采集、分析、监控于一体的应用性能运维产品，支持实时检测、分析并可视化展示应用各项性能指标统计数据。通过对移动客户端、...
网络诊断
重要 使用故障诊断功能时，系统将在您的集群节点上执行数据采集程序并收集检查结果。采集的信息包括系统版本、负载、Docker、Kubelet等运行状态及系统日志中关键错误信息。数据采集程序不会采集您的业务信息及敏感数据。前提条件 已创建ACK...
无法通过MongoDB客户端连接到MongoDB实例
问题描述 使用DMS或Mongo Shell连接MongoDB数据库失败，并提示以下错误。InvalidInstanceId.NotFound：The instance not in current vpc RequestId:xxxxxxxxxxx。Authentication failed：用户名、密码或数据库名错误。DMS与MongoDB服务器...
版本说明
支持基于动态库（libnvml）的GPU采集，使数据采集更安全、更快速。说明 需手动开启动态库（即 nvidia.nvml.enabled=true），解决基于命令方式在某些系统下卡死的隐患。可用性探测的生效时间支持cron表达式。Prometheus采集支持通过...
管理问题数据
当问题数据采集过程中出现错误时，帮助您快速排查、定位问题。方式一：通过数据质量模块查看。您可在 数据质量>任务查询 页面，通过查看目标表数据质量监控规则的 执行日志，查看问题数据采集过程。详情请参见：查看监控任务。方式二：通过...
Logstash数据写入问题排查方案
在使用阿里云Logstash将数据写入阿里云Elasticsearch（output指定为阿里云Elasticsearch）时，您可能会遇到网络不通、管道配置错误、负载高、管道正常启动但无数据写入目标端以及服务正常但缺少数据等问题...网络不通 排查方案 常见错误案例 ...
常见问题概览
实例的节点故障处理机制 解决因磁盘空间耗尽导致的锁定或无法写入问题 云数据库MongoDB版释放数据库空间 云数据库MongoDB版的监控采集粒度是多少？账号与权限 热点问题 其他常见问题 实例创建时指定的root账号拥有什么权限？云数据库...
可观测概述
在Service Mesh中实现可观测性，涉及了日志、监控指标、链路追踪这些可观测性数据的生成规则配置和采集配置，以及如何将这些可观测数据采集到云托管服务或者自建服务中。同时，还需要考虑如何支持针对网格代理与网关Pod分别定义采集配置，...
节点诊断
重要 使用故障诊断功能时，系统将在您的集群节点上执行数据采集程序并收集检查结果。采集的信息包括系统版本，以及负载、Docker、Kubelet等运行状态及系统日志中关键错误信息。数据采集程序不会采集您的业务信息及敏感数据。诊断支持的异常...
常见问题
由于 TSDB 实例默认是专有网络 VPC 的模式，这种模式下如果访问机器和 TSDB 实例不在同一个 VPC 环境内，会出现网络不通，连接超时的错误。解决办法如下：如果写入机器和实例在同一个区域 Region 内，可将写入测试机器加入到 TSDB 所在实例...
DataCollection
字段 类型 描述 id String 数据采集ID name String 数据采集名称 type String 数据采集端的类型-server-web-app注：目前只支持 server status Integer 状态-0 未开通-1 开通中-2 开通成功-3 开通失败 dataCollectionType String 数据采集的...
DataCollection
字段 类型 描述 id String 数据采集ID name String 数据采集名称 type String 数据采集端的类型-server-web-app注：目前只支持 server status Integer 状态-0 未开通-1 开通中-2 开通成功-3 开通失败 dataCollectionType String 数据采集的...
Pod诊断
重要 使用故障诊断功能时，系统将在您的集群 节点上 执行数据采集程序并收集检查结果。采集的信息包括系统版本，以及负载、Docker、Kubelet等运行状态及系统日志中关键错误信息。数据采集程序不会采集您的业务信息及敏感数据。诊断支持的...
Android SDK接入（Maven集成）
数据采集 您需要在满足合规要求下尽可能早的进行信息采集设置，默认是采集设备信息、系统信息和网络信息。AliHaConfig config=new AliHaConfig();可以根据合规要求禁止采集设备信息、系统信息和网络信息 config.noCollectionDataType=...
HarmonyOS SDK快速入门
本文介绍如何快速使用日志服务HarmonyOS SDK采集鸿蒙设备日志数据。前提条件 已完成日志服务HarmonyOS SDK安装。更多信息，请参见 安装HarmonyOS SDK。初始化SDK 您可以参考以下代码进行SDK初始化。import { AliyunLog,LogCallback } from...
常见问题
通过CloudShell管理集群出现超时问题 网络 Service FAQ Ingress FAQ 应用管理 应用FAQ 存储 云盘FAQ 弹性伸缩 水平伸缩（HPA）常见问题 HPA的监控数据current字段为何显示为unknown？为何HPA在滚动发布时出现扩容多余Pod？HPA到达阈值为何...
Android SDK接入（本地集成）
数据采集 您需要在满足合规要求下尽可能早的进行信息采集设置，默认是采集设备信息、系统信息和网络信息。AliHaConfig config=new AliHaConfig();可以根据合规要求禁止采集设备信息、系统信息和网络信息 config.noCollectionDataType=...
- 产品推荐
- 这些文档可能帮助您