投递CDN实时日志到SLS来分析用户访问数据
CDN实时日志打通了SLS日志服务的日志转存和日志分析能力，预制了CDN基础数据、CDN错误分析、CDN热门资源、CDN用户分析这四张常用分析报表，也支持自定义日志分析策略，可以一站式提供日志存储和日志分析能力，而离线日志目前只支持日志转存...
投递CDN实时日志到SLS来分析用户访问数据最佳实践
CDN实时日志打通了SLS日志服务的日志转存和日志分析能力，预制了CDN基础数据、CDN错误分析、CDN热门资源、CDN用户分析这四张常用分析报表，也支持自定义日志分析策略，可以一站式提供日志存储和日志分析能力，而离线日志目前只支持日志转存...
数据库代理发布说明
当路由给主库的事务中不包含Execute报文时，可以视为当前事务没有发生写操作，则仍然可以将后续读请求路由到只读库。广播报文未收到所有结果前不强行路由SYNC报文。修复建连过程中只读节点断开时，会断开客户端连接的问题。添加 enable_...
应用场景
大数据存储与分析 传统的数据分析场景下，用户需要把数据从在线数据库（Operational Database）复制到离线数据仓库（Data Warehouse）上之后再进行数据分析，这需要海量数据的多次复制、传输、加载和存储等多方面工作。HybridDB for MySQL...
数据湖投递概述
应用场景 利用数据湖投递可以实现如下场景需求：冷热数据分层 数据湖投递结合 表格存储 的 数据生命周期 功能，可以快速实现OSS低成本存储全量数据，表格存储 提供热数据的低延迟查询和分析的需求。全量数据备份 数据湖投递可以自动将 表格...
使用前须知
日志服务联合阿里云负载均衡推出CloudLens for ALB，提供ALB 7层日志分析、秒级监控指标分析、实时告警等功能，并提供基于AIOps的自动异常巡检功能。您可以通过CloudLens for ALB了解客户端用户行为、客户端用户的地域分布、请求成功率、...
使用OSS加速器
随着AI、数据仓库、大数据分析等业务发展，越来越多运行在OSS上的业务对于数据的访问延迟和吞吐量有了更高的要求。OSS推出加速器功能，可以将OSS中的热点文件（Object）缓存在NVMe SSD高性能存储介质上，提供毫秒级低延迟和高吞吐量的数据...
概述
您可以通过实时日志推送功能，将点播域名日志实时推送至日志服务，并进行日志分析，便于快速发现和定位视频播放推流问题，或者分析点播观看用户数据为运营策略提供依据。实时日志服务的优势 传统日志：需要您将日志下载后，重新上传至数据...
分析负载均衡7层访问日志
本文基于日志服务的可视化和实时查询分析能力，为您介绍负载均衡（SLB）7层访问日志查询分析的典型案例。前提条件 已采集到SLB 7层负载均衡日志。具体操作，请参见 开通访问日志功能。背景信息 对于大部分云上架构而言，负载均衡是基础设施...
快速开始
本文介绍移动分析的使用流程，以及如何启动运行 App 并查看运行后生成的分析报表。使用流程 在 mPaaS 控制台中创建您的应用。客户端应用使用 mPaaS 中的埋点 SDK 进行埋点，请参考文档 接入 Android SDK 或 接入 iOS SDK。在 mPaaS 控制台...
数据传输与迁移概述
对数据可见延迟容忍度高（可接受偶发小时级别数据可见延迟）。对请求延迟容忍度高（可接受偶发分钟级别请求延迟）。典型场景。类型 典型场景 数据库Binlog采集 数据集成-数据库实时数据同步。DTS。日志采集 数据集成-实时数据同步（SLS）。...
使用限制
数据生效机制 分析功能只对开启统计功能后写入的数据生效。如果您需要分析历史数据，请对历史数据重建索引。更多信息，请参见 重建索引。返回结果 执行分析操作后，默认最多返回100行数据，超出部分不会返回。如果您需要返回更多数据，请...
定时SQL
数据生效机制 分析功能只对开启统计功能后写入的数据生效。如果您需要分析历史数据，请对历史数据重建索引。更多信息，请参见 重建索引。返回结果 执行分析操作后，默认最多返回100行数据，超出部分不会返回。如果您需要返回更多数据，请...
查询和分析Trace数据
日志服务已预设Service、Operation、Duration、Status、Attributes、Resources等字段的查询条件，您只需根据需求选择即可。关于字段的详细说明，请参见 Trace数据格式。说明 查询条件中 Duration 配置项的单位为毫秒，而实际延迟时间...
共享弹性存储系列介绍
适用场景 日志分析场景 具有写入吞吐量高、数据存储量大的特点，使用日志增强版共享弹性存储实例能成倍提升写入性能，降低了一倍的存储成本。高并发查询场景 对稳定性要求高，当高峰流量远高于低峰时，会有弹性扩缩副本的需求。使用日志...
技术架构
PolarFS是中国内地面向DB应用设计的采用了全用户空间I/O栈的低延迟高性能分布式存储系统（参见VLDB 2018 上的文章 PolarFS:An Ultra-low Latency and Failure Resilient Distributed FileSystem for Shared Storage Cloud Database），其...
应用场景
EMR Serverless Spark可以满足企业级用户的多种数据处理与分析需求。本文介绍EMR Serverless Spark的应用场景以及相应的解决方案。建立数据平台 得益于其开放式架构设计，EMR Serverless Spark极大地简化并提升了在数据湖环境中对结构化和...
计算层高可用
同时对于interactive模式下本身目标在于延迟敏感的分析场景，目前对于计算节点异常宕机的场景，计算引擎会通过查询级别重算，保证查询稳定性。Batch模式 对于类似ETL等数据清洗任务，这类任务计算时间长，计算资源消耗大，如果依然查询级别...
使用前须知
日志服务联合传统型负载均衡CLB推出7层访问日志功能，用于记录所有发送到CLB的请求的详细信息，包括请求时间、客户端IP地址、延迟、请求路径和服务器响应等。您可以通过7层访问日志分析了解客户端用户行为、客户端用户地域分布和进行问题...
日志常见问题
在左侧导航栏，选择 日志分析>日志分析 在 日志分析 页签的搜索框输入查询语句，并且设置查询时间为 1天。具体操作，请参见 查询及分析日志。查询语句如下：log_type:internet_log and direction:"in"and app_name:"HTTPS" 导出查询结果。...
成本分析
成本分析为用户提供可视化能力，支持多维度看清云服务资源的消费情况。功能说明“成本分析”功能，可以支持多维度查看资源成本的趋势（最大支持12...成本分析只支持消费账期为2021.08 以后的订账单的摊销数据。摊销成本页面展示的是完整数据。
配置blk-iocost权重限速
对于 blk-iocost 功能，ftrace可以帮助捕捉调度器的决策过程，详细跟踪I/O请求的处理，从而提供深入的性能分析。使用方式如下。将 enable 属性设置为1，开启ftrace工具。sudo sh-c 'echo 1>/sys/kernel/debug/tracing/events/iocost/enable...
使用ping命令丢包或不通时的链路测试方法
可能某些数据包延迟很小（例如25 ms），而另一些延迟却很大（例如350 ms），但最终得到的平均延迟反而可能是正常的。所以此时Avg并不能很好的反应出实际的网络质量情况。综上，建议分析标准如下：如果StDev值很高，则同步观察相应节点的...
数据库自治服务的审计事件
操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户通过OpenAPI或控制台等方式操作云资源时产生的管控事件，数据库自治服务支持在操作审计中查询的事件...
时序分析存储概述
分析存储能够自动同步时序表数据，在数据写入速率稳定的情况下，同步操作的延迟通常在10分钟内，如果业务压力过大，分析存储会优先保证存储稳定性，同步延迟会略微增加。功能特性 分析存储支持的功能特性说明请参见下表。功能特性 说明 ...
使用前须知
日志服务联合阿里云OSS推出CloudLens for OSS，支持Bucket粒度的统一管理视图，支持资源用量、访问分析、异常检测、安全分析等可视化分析能力，提供场景化运维管理，实现Bucket资产的可观测性。本文介绍CloudLens for OSS的功能、资产、...
使用前须知
日志服务联合阿里云负载均衡推出 CloudLens for CLB，提供CLB访问日志分析、配置审计日志分析、云监控事件分析、秒级监控指标分析、实时告警等功能，并提供基于AIOps的自动异常巡检功能。您可以通过 CloudLens for CLB 了解客户端用户行为...
使用前须知
日志服务提供基于原生OpenTelemetry协议的分布式链路追踪功能，支持各类Trace数据的接入、存储、分析、可视化、告警、人工智能运维等。本文介绍日志服务分布式链路追踪功能（Trace服务）相关的背景信息、方案介绍、资产说明、费用等。重要 ...
案例一
本文介绍使用物化视图降低客户查询延迟时间的案例。业务背景 生意参谋是阿里巴巴旗下为千万商家提供的一项重要产品服务，帮助商家及时分析店铺运营情况。尤其是在大促期间，面对突发的流量和海量的数据，数据分析尤为重要。生意参谋基于...
App端性能体验功能说明
已忽略的错误是否在错误列表展示，默认开启计入统计，如果关闭后，则在崩溃分析、ANR分析、自定义异常、卡顿分析、OOM异常、启动崩溃分析中标记为已忽略的错误就不会在错误列表中展示 性能评分 概述 对应用的性能情况进行量化分析，通过...
方案分析
通过对比分析，表格存储在功能、性能、扩展性以及成本方面都要更加适合存储Feed消息。使用表格存储后，系统的架构如图所示：同步 方案选择 Feed消息的同步主要有读扩散和写扩散两种方案：读扩散（拉模式）：用户发送消息时存入自己的发信箱...
查看应用的网格拓扑
通过网格拓扑图，您可以实时监测应用的健康状态，分析服务间的延迟和通信问题，了解流量在应用间的分布和流转，以便您快速发现和解决问题，确保应用的可靠性和高性能水平。前提条件 已添加ACK集群到ASM实例，且ASM实例版本为1.15.3.120及...
应用场景
数据实时分析 传输方式：数据订阅 数据分析在提高企业洞察力和用户体验方面发挥着举足轻重的作用，且实时数据分析能够让企业更快速、灵活地调整市场策略，适应快速变化的市场方向和消费者体验。DTS提供的数据订阅功能，可以在不影响线上...
查询不到日志的排查思路
本文主要介绍在日志服务控制台中使用日志查询功能时，查询不到日志的排查思路。...由于日志预览功能是实时的，但是查询功能存在最多1分钟的延迟，所以您可以在日志产生后等待1分钟再进行查询。如果您的问题仍未解决，请提交 工单。
修改日志存储配置
开通日志分析服务后，如果云防火墙日志分析的默认配置（包括采集的日志类型、存储地域、存储时长）不满足您的业务需求，您可以根据业务需要调整日志存储配置，包括修改采集的日志类型、日志的投递地域以及日志存储时长，确保日志管理方案与...
使用apack插件的物理复制功能
物理复制功能适用于索引有副本、写入数据量大、对数据写入后可见性延迟要求不高的场景，例如日志场景、时序分析场景等，可以大幅度降低CPU开销，提升写入性能。前提条件 创建阿里云Elasticsearch实例，版本为6.7.0且内核版本为1.2.0及以上...
时延洞察
CloudDBA的时延洞察功能可以对 云原生内存数据库Tair 数据库所有命令以及自定义特殊事件进行时延统计，并给出精确到微秒级别的延迟时间。您可以通过该功能排查 Tair 数据库的故障和性能降低的原因。功能简介 原生Redis在2.8.13版引入时延...
监控指标说明
注意事项 Source端的指标表现并不是判断问题根源的充分条件，只反映了Source当前的工作状况，您仍然需要其他辅助指标或工具来判断问题的根源。常见问题的指标表现如下。场景 详情 作业中某些算子存在反压 判断反压最直接的方式是使用Flink ...
背景信息以及准备工作
您可以在DLA中创建OSS对应的Schema和文件表，对OSS中不同类型的文件数据进行清洗，然后将得到的结果数据写入AnalyticDB for MySQL 3.0，使得您可以在毫秒级针对千亿级数据进行即时的多维分析透视和业务探索。在同一地域开通 数据湖分析 DLA...
时延洞察
CloudDBA的时延洞察功能可以对Redis数据库所有命令以及自定义特殊事件进行时延统计，并给出精确到微秒级别的延迟时间。您可以通过该功能排查Redis数据库的故障和性能降低的原因。功能简介 原生Redis在2.8.13版引入时延监控（Latency ...
- 产品推荐
- 这些文档可能帮助您