监控服务概览
OSS监控服务为您提供系统基本运行状态、性能以及计量等方面的监控数据指标，并且提供自定义报警服务，帮助您跟踪请求、分析使用情况、统计业务趋势，及时发现以及诊断系统的相关问题。OSS监控指标主要分为基础服务指标、性能指标和计量指标...
使用集群诊断
容器智能运维平台 提供一键故障诊断能力，包括Pod诊断、Service诊断、Ingress诊断，可以辅助您定位集群中出现的问题。本文介绍如何在ACS集群中使用集群诊断功能。前提条件 已创建ACS集群。具体操作，请参见 创建ACS集群。确保ACS集群运行...
采集-多渠道数据
服务端数据采集 支付宝和微信公众账号编程是典型的Web端模式，一般会有四种类型的日志：Nginx和Apache访问日志 Nginx和Apache访问日志用以监控、实时统计。10.1.168.193-[01/Mar/2012:16:12:07+0800]"GET/Send?AccessKeyId=8225105404 ...
管理MySQL集群
主机故障处理策略 主机故障时，系统的处理策略：自动替换主机：系统会自动替换故障主机。说明 如果故障主机是云盘主机，云盘会自动迁移计算资源以自动替换主机。如果故障主机是非云盘主机，则系统会先将故障主机上的实例迁移走，然后自动...
创建并管理数据源
同一个数据源名称可分别配置开发环境数据源、生产环境数据源，且不同环境的数据源配置是相互独立的。管理数据源 在数据源管理页面，您可根据 数据源类型、数据源名称 筛选需要查看的数据源。同时，支持您对目标数据源执行如下管理操作：...
采集ACK服务日志
可选：首次进入 Beats数据采集中心 页面，需要在服务授权对话框中查看提示信息，无误后单击 确认，授权系统创建服务关联角色。说明 Beats采集不同数据源中的数据时，依赖于服务关联角色以及角色规则。使用过程中请勿删除服务关联角色，否则...
安全设置
严格权限模式 背景信息 Dataphin管理中心支持项目安全模式设置功能，在未设置的情况下，会存在以下安全问题：不同项目，在项目管理员不知情的情况下，用户可以随意跨项目进行DDL操作。说明 DDL语句详情，请参见 DDL语句。同一项目，用户...
快照概述
什么是数据库文件系统快照 数据库文件系统快照是某一时间点文件系统状态的备份文件，文件系统部署在云盘上，因此文件系统快照服务实际上基于云盘快照，对某个文件系统打快照相当于对该文件系统所部署的所有云盘同时打快照。文件系统第一份...
安全设置
严格权限模式 背景信息 Dataphin管理中心支持项目安全模式设置功能，在未设置的情况下，会存在以下安全问题：不同项目，在项目管理员不知情的情况下，用户可以随意跨项目进行DDL操作。说明 DDL语句详情，请参见 DDL语句。同一项目，用户...
大数据安全治理的难点
大数据系统以数据类型多（结构化、非结构化、半结构化）、数据量大（动辄PB级别）著称，某些巨头组织一天就能新增数十万甚至数百万张表，如此体量给数据分级分类带来了极大挑战，通过人工进行数据分级分类显然是不现实的，难免会出现遗漏的...
Logtail基本问题
Logtail基于事件进行日志采集，一般会在3秒内将日志发往日志服务。如何采集历史日志？如果日志的时间与Logtail处理该日志的系统时间相差5分钟以上，即被认为是历史日志。Logtail默认只采集增量的日志，如果您需要采集历史日志文件，可使用...
PolarDB MySQL版8.0.1版本发布日志
修复RO节点的物理机出现故障时，RW节点在特殊情况下未将其复制关系中断，而引发RW节点刷脏受阻的问题。修复HA后，因表数量过多而引发table cache淘汰导致Autoinc回退的问题。修复多主集群缓存中心重启情况下，读写节点可能无法启动的问题。...
版本说明
支持基于动态库（libnvml）的GPU采集，使数据采集更安全、更快速。说明 需手动开启动态库（即 nvidia.nvml.enabled=true），解决基于命令方式在某些系统下卡死的隐患。可用性探测的生效时间支持cron表达式。Prometheus采集支持通过...
ADAM概览
敏感数据保护：为保证数据库的敏感信息不被泄漏，数据采集器会对采集到的数据进行脱敏。兼容性分析：源库特性匹配：识别对象使用了哪些特性，并给出在目标库上的解决方案。源库使用场景匹配：针对一些特定的使用场景（通常可能会影响性能）...
使用须知
故障切换 GDB高可用版实例主节点出现故障时，系统会快速切换到备节点。切换过程中有短时间的连接闪断，需要您设置好程序的自动重连，避免因为切换导致服务不可用。存储空间 如果GDB实例的存储空间已满，实例将会自动锁定，变成只读状态。...
管理数仓规划待发布对象
映射并更新配置：导入的数据源对象与当前同名同类型的目标环境数据源对象进行映射并更新目标环境数据源配置为导入的数据源对象配置。说明 若命中替换规则，数据源的配置将根据替换规则进行替换。仅映射不修改配置：导入的数据源对象与当前...
管理数仓规划待发布对象
映射并更新配置：导入的数据源对象与当前同名同类型的目标环境数据源对象进行映射并更新目标环境数据源配置为导入的数据源对象配置。说明 若命中替换规则，数据源的配置将根据替换规则进行替换。仅映射不修改配置：导入的数据源对象与当前...
数据地图
其他操作 数据总览 您可以在数据总览页面查看当前地域（Region）下配置了数据采集器的Hologres数据库统计信息和表信息，进入数据总览详细步骤请参见 数据总览。查找表 数据地图支持通过表名，表描述、字段名及字段描述等搜索表，同时还可以...
为什么高可用系统会触发主备切换
为什么会收到该通知 云数据库MongoDB版采用高可用架构：副本集实例中默认包含三个节点；分片集群实例中的每个Shard节点都包含三个节点。其中，Primary节点及Secondary节点对外提供访问地址，Hidden节点作为日常备节点保障高可用。更多详情...
慢日志分析
常见问题 Q：对于 RDS MySQL 和 PolarDB MySQL版 数据库实例，为什么会出现慢日志记录的SQL执行完成时间与SQL语句的实际执行时间不同？A：通常情况下是执行SQL语句修改了时区。慢日志记录的SQL执行时间的时区，存在会话级别、数据库级别和...
通过Pod环境变量采集应用日志
阿里云日志服务SLS（Log Service）是针对日志数据的一站式服务，让您无需开发就能快捷完成日志数据采集、消费、投递以及查询分析等功能。ACK Serverless集群 提供了日志服务托管功能。您可以在 ACK Serverless集群 中使用SLS环境变量，将...
自动或手动主备切换
系统会在Serverless实例出现故障无法访问时，自动切换主备。注意事项 主备实例切换过程中会出现约30~120秒的服务不可用，请确保您的应用程序具有自动重连机制。如果实例下挂载有只读实例，那么主备实例切换后，只读实例的数据会有几分钟的...
米连科技
但是由于自建的ES平台在高业务量下查询变得非常缓慢，当出现系统问题时故障排查效率较低，用户体验无法得到充分和及时的保障。数据分析能力缺乏 伊对始终坚持以数据驱动产品运营，从最早的统计报表类需求，逐步扩展到基于算法的推荐、风控...
调用链采样配置最佳实践
基于重保角度考虑，特定时间段全采样 运维过程中也经常会面临重大事件保障的场景，比如大促、新版本压测等，需要针对某一类标签的数据甚至全部应用开启全量数据采集和存储，以便出现问题或者故障时，可以快速定位，甚至影响审计和定责。...
数据资产等级定义
一般性质：数据主要用于日常数据分析，出现问题带来的影响极小。标记为A4。未知性质：无法明确数据的应用场景。标记为Ax。这些性质的重要性依次降低，即重要程度为A1>A2>A3>A4>Ax。如果一份数据出现在多个应用场景汇总，则根据其最重要程度...
计费说明
购买示例 举例：某公司有1款应用（年总事件量约为1亿条、性能数据暂无具体概念）需要做用户行为数据采集与分析和性能监控的功能，需要使用SAAS服务，由于自己对埋点、指标体系搭建理解不深，需要咨询服务和按年购买产品，整体的价格如下 ...
基本概念
资源管理 资源管理，实现系统资产和配置管理功能，提供各类资源及其相关属性的维护管理，范围不仅包括设备、服务器和IoT之类物理资源，也包括IP地址、业务链路等逻辑资源。设备 一般指IP网数通类网络通信设备，比如交换机、路由器、防火墙...
通过Pod环境变量配置应用日志采集
特殊场景1：将多个应用数据采集到同一Logstore 如果您需要将多个应用数据采集到同一Logstore，可以设置 aliyun_logs_{key}_logstore 参数，例如以下配置将2个应用的stdout采集到stdout-logstore中。示例中应用1的 {key} 为 app1-stdout，...
云数据库录入
说明 在第一次录入云数据库时，DMS系统会同步云数据库侧的名称。后续不再进行同步，您可以通过编辑实例来维护实例名称。具体操作，请参见 编辑实例。开启DBLink 选择是否开启DBLink，详情请参见 逻辑数仓。无锁结构变更 选择是否开启无锁...
2023年
无 缺陷修复 修复智能诊断功能统计表大小时可能会出现数字溢出的问题，现已将统计表大小的列由integer数据类型修改为bigint数据类型。修复分区表UPDATE分布键列时出现 tuple already updated by self 错误信息的问题。修复Master节点不回收...
集群版-单副本
纯缓存应用 单副本集群版的分片服务器由单节点组成，分片服务器某节点出现故障时，系统会重新拉起一个Redis进程（没有数据），当节点故障业务自动切换完成后，数据将会丢失，有可能流量被冲击到后端数据库，需要做好应用程序的预热保护机制...
播放数据统计常见问题
本文主要介绍播放数据的统计准确和统计次数等问题。视频点播的播放数据是如何统计出来的？数据准确吗？统计方式 准确性 说明 通过播放器SDK的数据埋点来获取播放行为数据 较准确，推荐使用 有完备数据埋点解决方案的播放器（如阿里云所提供...
高压缩引擎（X-Engine）介绍
随着业务发展，数据库系统中会积累大量访问频率很低甚至为0的数据，这些数据的积累容易导致如下问题：历史数据和最新数据存储在同一数据库系统中，导致磁盘空间不足。大量数据共享数据库系统的内存、缓存空间、磁盘IOPS等，导致性能问题。...
集群容灾能力
在阿里云上，如果使用的是云盘技术，则每一个云盘在后台都会对应三个数据副本，当其中任一个出现问题时，副本数据都会自动进行切换并恢复，以保证数据的可靠性。Hadoop HDFS是一个经历了长时间考验且具有高可靠性的数据存储系统，已实现了...
常见问题概览
无集团上云商品标签的客户，在购买集团内部按量付费商品时为什么会出现如下错误提示？登录数据库 如何正确的填写登录DMS的数据库账号与密码？在DMS登录数据库失败，提示“access denied”，如何处理？SSL证书过期该怎么处理？在DMS录入阿里...
Fluentd插件
time"]flush_interval 1s buffer_chunk_limit 3m buffer_queue_limit 128 dirty_data_continue true dirty_data_file 脏数据记录文件路径 retry_times 3 put_data_batch_size 1000使用如下命令启动Fluentd，即可完成CSV文件数据采集进入...
概述
Telegraf是InfluxData开发的数据采集器，支持众多的输入输出插件（例如MySQL、Redis、Elasticsearch等），在开源领域被广泛使用。本文介绍Telegraf的工作机制、安装步骤及采集方式。工作机制 日志服务基于Telegraf开发的监控模板，支持将...
我是普通用户
库表结构 结构设计 在新项目、新需求或者优化等业务场景中，一般会涉及到新建表、修改表等结构的变更操作,此时可以使用DMS的结构设计功能。库表同步 库表同步功能可以在多套不同环境之间（如测试环境、生产环境）进行表结构的对比，从而...
数据库采集器问题
本文解释一些数据库采集问题。采集对数据库压力大吗？采集过程全部都是读取操作，唯一消耗CPU资源的操作来自于getddl操作，一般压力都很小。但为了采集顺利进行，建议在业务低峰期执行，否则容易出现Socket Timeout的超时错误（采集sql无法...
流式数据通道概述
热数据存储量会出现增长情况：在开启异步处理的场景下（Merge或Zorder），MaxCompute流式数据通道服务会对最近一小时写入的数据保存两份，一份为原始数据，一份为异步聚合后的数据，数据的存储量会有一定程度的冗余。冗余数据的保存周期...
- 产品推荐
- 这些文档可能帮助您