接入Redis监控数据
您可使用Telegraf采集Redis监控数据，再通过日志服务Logtail将Telegraf数据上传到MetricStore中，搭建Redis可视化监控方案。本文介绍如何通过日志服务来完成Redis监控数据的采集和可视化。前提条件 Telegraf所在的服务器可通过内网连接...
执行在线评估
背景信息 在线评估是直接连接目标数据库，采集源端数据库的对象、SQL 语句和数据库负载等信息，与 OceanBase 数据库的现有能力进行兼容性对标，查找其不兼容点并提供修复方法。操作步骤 新建在线评估任务。登录 OceanBase 管理控制台。在...
接入MySQL监控数据
您可使用Telegraf采集MySQL监控数据，再通过日志服务Logtail将Telegraf数据上传到MetricStore中，搭建MySQL可视化监控方案。本文介绍如何通过日志服务来完成MySQL监控数据的采集和可视化。前提条件 Telegraf所在的服务器可通过内网连接...
调试实时任务
Dataphin支持对开发的实时任务代码进行数据采样或者手动上传并进行本地调试，以帮助您保障代码任务的正确性，避免人为错误或遗漏。本文将为您介绍如何调试实时任务。使用限制 Blink仅支持引擎版本3.6.0及以上进行本地调试。不支持...
通过CRD采集应用日志
阿里云 日志服务 SLS（Log Service）是针对日志数据的一站式服务，让您无需开发就能快捷完成日志数据采集、消费、投递以及查询分析等功能。ACK Serverless集群 提供了日志服务托管功能。本文介绍如何在 ACK Serverless集群 中配置CRD并进行...
调试实时任务
Session集群调试方式：即通过Session集群进行调试，调试的数据为 线上的真实数据 且为 流式数据（即来源表中写入数据时，将直接输出该条数据的计算结果，与真实线上运行任务的结果一致）。该方式下，Session集群提供Flink任务状态、日志和...
接入Nginx监控数据
您可使用Telegraf采集Nginx监控数据，再通过日志服务Logtail将Telegraf数据上传到MetricStore中，搭建Nginx可视化监控方案。本文介绍如何通过日志服务来完成Nginx监控数据的采集和可视化。前提条件 已创建Project和MetricStore。具体操作，...
配置Prometheus for ECS服务发现
开启ECS服务发现后，将会开启ECS数据采集。步骤二：修改ECS服务发现相关配置 在 名称 为 vpc-ecs-service-discovery 的 操作 列单击 详情。在弹出的对话框中修改 metrics_path 或者 port。如下图所示，若您的服务端口为9090/metrics，只...
配置Prometheus for ECS服务发现
开启ECS服务发现后，将会开启ECS数据采集。步骤二：修改ECS服务发现相关配置 在 名称 为 vpc-ecs-service-discovery 的 操作 列单击 详情。在弹出的对话框中修改 metrics_path 或者 port。如下图所示，若您的服务端口为9090/metrics，只...
接入NVIDIA GPU监控数据
您可使用Telegraf采集NVIDIA GPU监控数据，再通过日志服务Logtail将Telegraf数据上传到MetricStore中，搭建NVIDIA GPU可视化监控方案。本文介绍如何通过日志服务来完成NVIDIA GPU监控数据的采集和可视化。前提条件 已创建Project和...
数据地图概述
数据地图是在元数据基础上提供的企业数据目录管理模块，涵盖全局数据检索、元数据详情查看、数据预览、数据血缘和数据类目管理等功能。数据地图可以帮助您更好地查找、理解和使用数据。元数据采集与接入 MaxCompute数据 如果您使用了...
元数据采集的数据源有白名单访问控制时需要配置的白...
为保证您能正常使用数据地图的元数据采集和类目管理功能，您需要提前配置好白名单，将使用的DataWorks所在地域的IP网段添加至目标项目或数据库中，并为所使用的账号配置类目管理权限。本文为您介绍如何配置白名单及类目管理权限。背景信息 ...
修改监控频率
本文介绍了修改性能监控频率的操作步骤。操作步骤 登录 PolarDB控制台。在控制台左上角，选择集群所在地域。找到目标集群，单击集群ID。...相关API API 描述 ModifyDBClusterMonitor 修改 PolarDB 集群监控数据的采集频率。
加工数据
注意事项 本案例中，数据采集和数据加工的部分任务可以通过ETL工作流模板一键导入。在导入模板后，您可以前往目标空间，并自行完成后续的数据质量监控和数据可视化操作。仅 空间管理员 角色可导入ETL模板至目标工作空间，为账号授权空间...
接入Go程序性能数据
您可以通过 日志服务 全栈可观测中的Golang拉取功能采集Go Pprof性能数据，以及在全栈可观测中分析及可视化展示数据。前提条件 已创建全栈可观测实例。具体操作，请参见 创建实例。使用限制 Logtail为Linux Logtail 1.7及以上版本。工作...
功能性测试
在 功能性测试 Android/功能性测试 iOS 页面的 测试数据准备 中输入 任务名称、选择 待测应用、选择 执行用例、设置 自定义性能数据采集。任务名称：标记当前测试任务，方便后续搜索测试任务。待测应用：可选本地上传或选择已上传的包。...
兼容性测试
在 兼容性测试 Android/兼容性测试 iOS 页面的 测试数据准备 中输入 任务名称、选择 待测应用、选择 执行用例、设置 自定义性能数据采集。任务名称：标记当前测试任务，方便后续搜索测试任务。待测应用：可选本地上传或选择已上传的包。...
Logtail采集详情
采集过程 Logtail采集数据的过程如下：监听日志 读取日志 处理日志 过滤日志 聚合日志 发送日志 说明 更多关于Logtail采集原理的介绍，请参见 Logtail技术分享。监听日志 在服务器上安装Logtail及在日志服务控制台上创建Logtail采集配置后...
接入Kafka监控数据
您可使用Telegraf采集Kafka监控数据，再通过日志服务Logtail将Telegraf数据上传到MetricStore中，搭建Kafka可视化监控方案。本文介绍如何通过日志服务来完成Kafka监控数据的采集和可视化。前提条件 已在服务器上安装Java 1.6或以上版本。已...
加工数据
步骤三：配置ODPS SQL节点 本案例需要将每层加工逻辑通过ODPS SQL调度实现，由于各层节点间存在强血缘依赖，并且在数据采集阶段已将同步任务产出表手动添加为 节点的输出，所以本案例数据加工类的任务依赖关系通过DataWorks 自动解析机制 ...
接入Java应用或Tomcat的监控数据
您可使用Telegraf采集Java应用或Tomcat的监控数据，再通过日志服务Logtail将Telegraf数据上传到MetricStore中，搭建Java应用或Tomcat可视化监控方案。本文以Java应用监控数据为例，介绍如何通过日志服务来完成Java应用数据的采集和可视化。...
性能监控
PolarDB 控制台提供了丰富的性能监控项和秒级监控频率，方便您掌握集群的运行状态并通过细粒度的监控数据快速定位运维问题。性能监控 登录 PolarDB控制台。在控制台左上角，选择集群所在地域。找到目标集群，单击集群ID。在左侧导航栏中，...
性能监控
PolarDB 控制台提供了丰富的性能监控项和秒级监控频率，方便您掌握集群的运行状态并通过细粒度的监控数据快速定位运维问题。性能监控 登录 PolarDB控制台。在控制台左上角，选择集群所在地域。找到目标集群，单击集群ID。在左侧导航栏中，...
常见问题索引
Q9:拿到SDK采集的数据后可以做什么？Q10:集成SDK后多久能看到数据？SDK集成常见问题 Q1：SDK log数据包的发送策略？Q2：SDK log数据包有多大？Q3：集成SDK后为什么没看到日志？Q4：SDK相关接口调用的顺序是否影响埋点？Q5：日志中有哪些...
准备数据
在数据准备阶段，您需要同步原始数据至MaxCompute。前提条件 已完成 准备环境。已新增MaxCompute数据源。详情请参见 创建MaxCompute数据源。准备数据源 通过RDS创建MySQL实例，获取RDS实例ID。详情请参见 快速创建RDS MySQL实例。在RDS控制...
回调及监听
1.17 onPlaybackAudioFrameBeforeMixing 混音前的指定用户的音频数据。2.1 AliRtcAudioVolumeObserver：注册音量回调。API 描述 支持的最低版本 onAudioVolume 用户音量大小回调。1.16.2 onActiveSpeaker 订阅的当前说话人。2.1 ...
配置资源组日志服务
您可以为资源组配置日志服务SLS，将部署在该资源组上的EAS服务打印的日志（包括标准输出或自定义文件）采集到目标SLS日志仓库中。本文为您介绍如何为公共和专属资源组配置日志服务。前提条件 已开通日志服务SLS，并创建了Project和Logstore...
订阅PolarDB MySQL版集群日志
为满足企业自定义管理日志的需求，PolarDB 联合日志服务SLS推出了数据订阅功能，可以将您拥有的所有 PolarDB MySQL版 集群日志投递到日志服务SLS的中心化项目中统一进行管理。本文将介绍 PolarDB MySQL版 集群日志订阅和日志查看的方法。...
通过DaemonSet-控制台方式采集Kubernetes容器标准输出
Logtail支持Docker和Containerd两种容器引擎的数据采集，访问路径说明如下：Docker：Logtail通过/run/docker.sock 访问Docker，请确保该路径存在且具备访问权限。Containerd：Logtail通过/run/containerd/containerd.sock 访问Containerd，...
LogHub（SLS）数据源
LogHub（SLS）数据源为您提供读取和写入LogHub（SLS）双向通道的功能，本文为您介绍DataWorks的LogHub（SLS）数据同步的能力支持情况。使用限制 数据集成离线写LogHub（SLS）时，由于LogHub（SLS）无法实现幂等，FailOver重跑任务时会引起...
采集Beats和Logstash数据源
本文介绍如何通过日志服务控制台创建Logtail采集配置来采集Beats和Logstash数据源。前提条件 已在服务器上安装Linux Logtail 0.16.9及以上版本或Windows Logtail 1.0.0.8及以上版本。具体操作，请参见 安装Logtail（Linux系统）或 安装...
功能使用常见问题
Q9:拿到SDK采集的数据后可以做什么？可以的应用场景如下：（1）BI个性化分析。（2）自定义报表加工。（3）自主挖掘数据，如：数据建模。Q10:集成SDK后多久能看到数据？今日实时及crash实时报表，当天实时可以看到数据；其他报表只能查看T-1...
采集数据
本文为您介绍如何新建OSS和RDS数据源来访问本教程所提供的用户信息与网站日志数据，配置数据同步链路至私有OSS数据源，并通过EMR Hive节点建表去查询同步后的数据，完成数据同步的操作过程。前提条件 开始本文的操作前，请准备好需要使用的...
配置LogHub（SLS）输入
LogHubStream Reader插件基于LogHub（SLS）SDK实时抽取您配置的LogHub（SLS）topic数据，并支持合并和分裂Shard。合并或分裂Shard后，数据可能会增加，但保证不会丢失数据。背景信息 LogHub（SLS）实时同步读取插件，会自带以下元数据字段...
名词解释
本文介绍Lindorm SQL语法的常见术语。Lindorm宽表引擎和时序引擎对术语的支持情况，请参见下表。术语 宽表引擎 时序引擎 说明 DATABASE 〇 〇 Database（数据库...例如，按秒采集的数据，降采样查询时按小时级别采样，减少结果集的数据点数。
数据模型
基本概念 物联网、应用监控、工业互联网等典型的时序场景下，数据源（Data Source）通常按一定的周期持续产生时序数据，一条时序数据由Tag、Timestamp、Field等元素共同来描述，具有相同特征的一类数据存放在同一张表中，表的时序数据元素...
ECI日志采集对接Kafka
本文介绍如何将ECI Pod的日志采集到Kafka中。前提条件 ECI Pod和Kafka之间网络互通。如果您在阿里云上部署Kafka，建议将Kafka和ECI Pod部署在同一VPC下。已完成ECI日志采集的相关配置。具体操作，请参见 通过阿里云日志服务采集日志。通过...
如何排查容器日志采集异常
当您使用Logtail采集容器（标准容器、Kubernetes）日志时，如果采集状态异常，可以根据本文进行问题排查、运行状态检查等运维操作。问题排查 排查机器组心跳是否异常 排查容器日志采集是否异常 排查机器组心跳是否异常 您可以通过检查机器...
数据聚合分析
AnalyticDB的智能分析系统对采集的数据进行了多种分析，从而洞察实例运行状态。实例查询行为画像分析 对单独实例的查询行为进行了统计分析，主要统计指标包括：用户在某段时间内的查询次数；用户查询是否包含join、agg或者sort等；用户第一...
uniapp SDK
在uni-app框架中，调用QuickTracking统计SDK相关接口，完成统计埋点及数据上报 1.下载插件 QuickTracking uniapp插件下载地址 平台兼容性 Android iOS 适用版本区间：4.4-13.0 适用版本区间：9-15 使用流程：1.1 单击购买for云打包 1.2 ...
- 产品推荐
- 这些文档可能帮助您