文档修订记录
任务调度属性配置概述 2023年2月更新记录 时间 特性 类别 描述 产品文档 2023.2.28 新增功能 数据治理中心 DataWorks支持您根据业务需要，将 治理工作台>治理项问题 页面待解决的治理项问题以通知的形式，通过系统提示、邮件、钉钉群消息等...
启用控制平面日志采集和日志告警（旧版）
ASM支持采集控制平面日志和日志告警，例如采集ASM控制平面向数据平面Sidecar推送配置的相关日志。本文介绍如何启用控制平面日志采集和日志告警。背景信息 ASM控制面组件的主要功能之一是推送网格的规则配置到数据面的Sidecar代理或者网关中...
启用控制平面日志采集和日志告警（旧版）
ASM支持采集控制平面日志和日志告警，例如采集ASM控制平面向数据平面Sidecar推送配置的相关日志。本文介绍如何启用控制平面日志采集和日志告警。背景信息 ASM控制面组件的主要功能之一是推送网格的规则配置到数据面的Sidecar代理或者网关中...
SQL Console初体验
当您成功在DMS上登录数据库后，可在SQL Console中进行创建数据库、创建表、查询表数据、变更表数据等操作。本文以在RDS MySQL数据库中进行操作举例。创建数据库 在RDS控制台创建数据库 访问 RDS实例列表，在上方选择地域，然后单击目标实例...
DescribeDataCollction-DescribeDataCollection
获取指定应用的数据采集详情。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 GET/v4/openapi/app-...
SparkSQL自适应执行
阿里云E-MapReduce 3.13.0及后续版本的SparkSQL支持自适应执行功能，可以用来解决Reduce个数的动态调整、数据倾斜和执行计划的动态优化问题。使用限制 本文针对SparkSQL自适应执行涉及到的参数适用于Spark 2.x。如果您使用的是Spark 3.x，...
通过DaemonSet-控制台方式采集Kubernetes容器标准输出
Logtail支持Docker和Containerd两种容器引擎的数据采集，访问路径说明如下：Docker：Logtail通过/run/docker.sock 访问Docker，请确保该路径存在且具备访问权限。Containerd：Logtail通过/run/containerd/containerd.sock 访问Containerd，...
App端性能体验功能说明
核心功能 错误捕获能力强，类型丰富 提供Java崩溃、Native崩溃、Swift崩溃、Objective-C崩溃、ANR、自定义异常的捕捉 快速定位错误根源 提供行为日志、详细日志、内存快照、设备信息、自定义字段，帮您快速发现问题原因，提升问题解决效率 ...
发布日志
V2.5.5@2021-12-06 解决断网重连后稳定性的问题。V2.5.4@2021-12-02 新增支持G.711音频编码格式。V2.5.3@2021-09-23 优化首帧耗时。新增支持三百人大方会议能力。修复突发低带宽收敛过程中语音优先失效问题。完善埋点日志。新增支持动态...
2023年
Github公开事件数据 2023年7月更新记录 时间 特性 类别 描述 产品文档 2023-07-31 新增简单用户画像分析（MaxCompute版）新说明 本文以网站用户画像分析为背景，通过使用DataWorks完成数据采集、数据加工、配置数据质量监控、数据可视化...
接入Kubernetes Go程序性能数据
依托于日志采集组件多维度Kubernetes资源选择能力，采集Go程序的性能指标数据时，也支持通过环境变量、Kubernetes Labels、Namespace、Pod名称、容器名称过滤数据。更多信息，请参见 日志采集组件多维度Kubernetes资源选择能力。另外，Go...
接入Kafka监控数据
您可使用Telegraf采集Kafka监控数据，再通过日志服务Logtail将Telegraf数据上传到MetricStore中，搭建Kafka可视化监控方案。本文介绍如何通过日志服务来完成Kafka监控数据的采集和可视化。前提条件 已在服务器上安装Java 1.6或以上版本。已...
实时同步任务延迟解决方案
此时将无法通过数据集成任务设置解决延迟问题，需要从Kafka、DataHub和Loghub系统的上游数据生产侧解决数据写入倾斜问题后，延迟问题才能恢复。您可以通过在上述任务 运行详情 中切换到 运行信息 页签，查看不同Reader线程总字节数统计，...
运行失败
解析表数据时出现“-nan”错误 报错信息 解决方法 该问题一般是原始doc或query表输入的格式有问题，可能存在很大的值或者接近0的值。例如某一行vector下的值为 1.23~4.56~7.89~nan~4.21 或 1.1~2.2~127197893781729178311928739179222121....
接入Java应用或Tomcat的监控数据
您可使用Telegraf采集Java应用或Tomcat的监控数据，再通过日志服务Logtail将Telegraf数据上传到MetricStore中，搭建Java应用或Tomcat可视化监控方案。本文以Java应用监控数据为例，介绍如何通过日志服务来完成Java应用数据的采集和可视化。...
Cost-based SQL诊断引擎
按照经验，约80%的数据库性能问题能通过SQL优化手段解决，但SQL优化一直以来都是一个非常复杂的过程，需要多方面的数据库领域专家知识和经验。例如如何准确地识别执行计划中的瓶颈点，通过优化物理库设计或SQL改写等手段，让数据库优化器...
开启控制平面日志和日志告警功能
升级数据平面的Sidecar可以解决该问题，您需要删除Pod，待Pod自动重新创建后会自动注入最新版本的Sidecar。证书管理处存在过期证书，可能导致网关处理TLS流量失败 该告警提示证书管理中的证书已经过期，需要立即处理。证书管理处存在即将...
GxP欧盟附录11标准合规包
业务背景 GxP欧盟附录11（GxP EU Annex 11）是欧盟对于计算机化系统使用的规范性要求，主要针对在制药、生物技术和医疗器械领域中使用计算机化系统的企业和组织。他要求涵盖了计算机化系统的开发、验证、操作、维护和监测等方面，以确保...
入门概述
Beats是轻量型的数据采集工具，阿里云Elasticsearch支持Filebeat、Metricbeat、Auditbeat和Heartbeat采集器。本文介绍如何通过使用场景选择对应的采集器，并完成数据采集。数据采集器使用 Filebeat 轻量型日志采集器，用于转发和汇总日志与...
采集Systemd Journal日志
172.16.0.141_tag_:_hostname_:logtail-ds-dp48x_topic_:_realtime_timestamp_:1547975837008708 问题排查 使用Logtail采集日志后，如果预览页面或查询页面无数据，您可以参见 Logtail采集日志失败的排查思路 进行排查。后续步骤 Logtail...
新建数据采集接口
通过 Quick Tracking 使用数据采集服务的流程如下：配置数据采集渠道（App、小程序、Web）接口，并获取AccessKey，具体操作请参见下文。获取 Quick Tracking 的SDK，并使用上一步中获得的AccessKey进行数据采集程序的开发与部署。SDK和程序...
C100售后支持相关问题
本文介绍了您在使用C100系列数据库审计服务时可能遇到的问题和解决方案，帮助您更好地理解和使用产品。安装Agent相关问题 通过云助手安装的Agent，Agent安装目录是什么？通过云助手安装的Agent，Agent的日志目录是什么？安装Agent时，系统...
表设计最佳实践
源数据采集客户端太多时，如果源数据通过Tunnel直接进入到一个分区，则每个源数据采集客户端提交一次数据，都会在同一分区下产生一个独立的文件，从而导致大量小文件的出现。当SLS触发FunctionCompute持续高频地向MaxCompute中传入文件时，...
创建实时日志投递任务
通过实时日志功能可以实时采集系统、应用程序或设备操作的日志，并投递到指定的日志分析服务上进行存储和分析，能够有效保护数据安全，快速监控，定位业务问题和优化内容分发性能。不同套餐的支持情况 每种日志类型下可创建的推送任务数量...
产品概述
TSDB 具备秒级写入百万级时序数据的性能，提供高压缩比低成本存储、预降采样、插值、多维聚合计算、可视化查询结果等功能，解决由设备采集点数量巨大、数据采集频率高造成的存储成本高、写入和查询分析效率低的问题。TSDB是一个分布式时间...
启用控制平面日志采集和日志告警（新版）
升级数据平面的Sidecar可以解决该问题，您需要删除Pod，待Pod自动重新创建后会自动注入最新版本的Sidecar。证书管理处存在过期证书，可能导致网关处理TLS流量失败 该告警提示证书管理中的证书已经过期，需要立即处理。证书管理处存在即将...
启用控制平面日志采集和日志告警（新版）
升级数据平面的Sidecar可以解决该问题，您需要删除Pod，待Pod自动重新创建后会自动注入最新版本的Sidecar。证书管理处存在过期证书，可能导致网关处理TLS流量失败 该告警提示证书管理中的证书已经过期，需要立即处理。证书管理处存在即将...
接入无侵入服务观测
Kubernetes数据面监控基于日志服务与龙蜥社区合作共建的无侵入监控能力，您可以直观地分析整个Kubernetes的数据流向与瓶颈问题，轻松应对复杂的云原生环境。前提条件 已创建全栈可观测实例。具体操作，请参见 创建实例。如果是控制台方式接...
视频直播出现卡顿现象
排查 此问题涉及的原因较多，请参考以下各环节的问题可能性，并根据现场实际情况进行处理：推流端 上行带宽不足或网络抖动，导致的数据发送速率下降，无法达到流畅播放的帧率要求。解决方案：建议您使用网速测试工具 Speedtest 测试您当前...
埋点开发
在所属部落将需求发布人名字添加到部落编辑人员名单（下方第2个图）在所属部落将需求发布人名字添加到部落编辑人员名单，解决无法看到对应权限问题 发布埋点需求 计划的埋点列表中会出现所有勾选埋点，所有埋点标志“需求阶段”；...
CPU使用率高排查方法
PolarDB PostgreSQL版 在使用过程中，可能会出现CPU使用率异常升高甚至达到满载的情况。本文将介绍造成这种情况的常见原因和排查方法，以及对应的解决方案。问题原因 业务量上涨 当CPU使用率上升时，最有可能的情况是业务量的上涨导致数据...
通过Sidecar方式采集Kubernetes容器文本日志
如果问题仍未解决，请参见 Logtail机器组无心跳 进行排查。创建Logtail采集配置，单击 下一步，创建Logtail采集配置。Logtail采集配置生效时间最长需要3分钟，请耐心等待。全局配置 配置项 说明 配置名称 Logtail配置名称，在其所属Project...
常见问题
本文介绍TSDB的常见问题。如何选择 TSDB 的实例规格？您可根据以下两个指标选择 TSDB 的实例规格：时间线数：对应设备上的采集点数。一个采集点可以是某个设备上需要上传数据的一个传感器。计算公式：设备规模（总设备数）×单个设备的采集...
HTAP中的行列混存查询优化
为了解决这个问题，IMCI选择按照数据块采样以减少读放大，同时使用COLLAPSE算法对distinct value的计算公式做了修正。即如果有多个相同的值出现在同一个block中，按只出现一次计算，因为上文的估计公式都很大程度上取决于，通过减少数据...
常见问题及错误排查
本文介绍日志审计服务的常见问题及错误排查。常见错误排查 错误类型 错误信息 错误原因 解决方法 账号配置 LogException{httpCode=-1 errorCode='IllegalResourceDirectoryAccounts' errorMessage='IllegalResourceDirectoryAccounts:...
通过DaemonSet方式采集Kubernetes容器文本日志
例如/var/log/service 目录是数据卷挂载的路径，则设置采集目录为/var/log 将无法采集该目录下的日志，因为采集目录比挂载路径短。必须设置采集目录为/var/log/service 或更深的目录。日志文件采集停止：docker：当容器被停止时，Logtail会...
什么是智能众包
人工智能众包（AI Crowdsourcing）基于共享人力资源模式，为人工智能算法提供数据采集、清洗、标注等服务，帮助企业快速构建算法数据集。人工智能众包（AI Crowdsourcing）基于共享人力资源模式，为人工智能算法提供数据采集、清洗、标注等...
嵌入看板操作说明
Quick Tracking 作为一个用户行为分析产品，可以独立使用，也可以嵌入其他系统作为一个解决方案。用户可以通过以下操作把Quick Tracking看板能力，通过iframe，嵌入到其他系统里，让更多用户可以看到用户行为数据。看板嵌入主要分为两个...
快速入门
Logstash快速入门 Beats Beats是轻量级的数据采集工具，支持一键部署采集器，可视化采集与配置日志文件、网络数据、容器指标等多种类型数据，并集中管理多个采集器。Beats快速入门 高级监控报警 基于Elasticsearch开发的，具备采集、监控、...
（面向SAAS使用）隐私权政策
（3）联系您解决问题。（4）经您许可的其他用途。2、在您使用服务过程中收集的信息（1）瓴羊Quick Tracking产品提供的SDK服务 个人信息采集字段：SDK类型 个人信息字段 用途 数据保护方式 Quick Tracking（全域采集与增长分析）SDK OAID/...
- 产品推荐
- 这些文档可能帮助您