实时同步任务运维

疲劳度控制:为了避免短时间内产生大量报警,数据集成实时同步还支持疲劳度控制,即为DataWorks支持您设置当前规则在指定时间间隔内发送一次报警信息。使用Logview查看任务运行信息 说明 该功能目前在灰度邀测中,如需使用,请进入 ...

工作原理

文本分析作业按照调度规则定时拉取数据输入文本分析模型,文本分析模型将分析结果写入目标日志库(internal-ml-log)中,并将分析结果绘制为仪表大盘,帮助您快速了解文本分析的结果。配置监控对象:配置待分析的日志字段(字段值为文本...

查看统计图表

执行查询和分析语句后,您可以在 统计图表 页签中查看可视化的查询和分析结果,适用于按照API、HTTPStatus等指定维度统计数据的场景。本文介绍支持在 统计图表 页签对日志进行的常用操作。统计图表界面 统计图表支持展示多个查询分析结果,...

Nginx Ingress访问日志分析与监控

Ingress监控中心 Ingress监控中心主要侧重于网站实时监控数据,一般用于完整实时监控与告警,包括请求成功率、错误比例、5XX比例、请求未转发比例、平均延迟、P95延迟、P99延迟、P999延迟、状态码分布、Ingress压力分布、Service访问TOP10...

Nginx Ingress访问日志分析与监控

Ingress监控中心 Ingress监控中心主要侧重于网站实时监控数据,一般用于完整实时监控与告警,包括请求成功率、错误比例、5XX比例、请求未转发比例、平均延迟、P95延迟、P99延迟、P999延迟、状态码分布、Ingress压力分布、Service访问TOP10...

集群成本洞察

成本分析只统计本集群独享的云产品,对于多集群共享的云产品,不在成本分析的账单统计范围内。成本洞察功能依赖阿里云用户中心标签统计功能,依赖云产品key:ack.aliyun.com value:{{集群ClusterId}}标。如您在阿里云用户中心费用标签页面...

集群成本分析与优化-容器服务ACK

操作说明 登录“用户中心”,进入“成本管理-成本优化”页后,点击“集群成本分析与优化-容器服务ACK”即可进入云原生场景下的集群成本...回答:成本分析只统计本集群独享的云产品,对于多集群共享的云产品,不在成本分析的账单统计范围内。

教育行业模板-多路搜索

介绍 OpenSearch的 多路搜索功能 结合了文本搜索和向量搜索,做到了搜索延迟和计算消耗低于OR逻辑情况下更高的准确性,并在搜题场景已经得到有效验证。多路召回架构还可以使用到:图片向量召回、公式召回、个性化召回等场景中。纯文本查询...

DLA Lakehouse实时入湖

建仓延迟较⻓(T+1天),需要T+10m的低延迟入湖。更新频繁致小文件多,分析性能差,需要Upsert⾃动合并。海量数据在事务库或传统数仓中存储成本高,需要低成本归档。源库⾏存储格式或非分析型格式,分析能力弱,需要⽀持列式存储格式。⾃建...

导入Elasticsearch数据

本文介绍如何将Elasticsearch数据导入到日志服务,实现数据的查询分析、加工等操作。前提条件 已有可用的Elasticsearch集群。已创建Project和Logstore。具体操作,请参见 创建项目Project 和 创建Logstore。创建数据导入配置 登录 日志服务...

管理日志存储空间

控制台中显示的日志存储空间用量并非实时更新,与实际使用情况存在约两个小时的延迟。说明 建议您在全量日志分析服务使用期间,定期关注全量日志存储空间的使用情况。当日志存储空间使用量超过70%时,请及时升级日志存储量规格,避免新产生...

管理日志存储空间

控制台中显示的日志存储空间用量并非实时更新,与实际使用情况存在约两个小时的延迟。说明 建议您在全量日志分析服务使用期间,定期关注全量日志存储空间的使用情况。当日志存储空间使用量超过70%时,请及时升级日志存储量规格,避免新产生...

成本洞察功能说明

集群维度成本分析 命名空间维度成本分析 节点池维度成本分析 应用维度成本分析 集群维度成本分析 筛选维度 功能 序号 描述 集群成本统计选项 ① 集群成本统计指标选项,包含优惠后实际账单成本和原价账单成本统计:优惠后实际账单成本:...

MongoDB只读节点简介

云数据库MongoDB副本集实例提供统一的地址(ReadOnly ConnectionStringURI)连接所有只读节点,您需添加只读节点的个数即可扩展数据库的处理能力,应用程序无需做任何修改。说明 关于ReadOnly ConnectionStringURI地址的更多信息,请参见...

应用场景

通过采集程序将业务数据、日志和埋点数据等投递到EMR Kafka,利用Flink的实时计算功能将数据写入不同的分析系统,例如EMR StarRocks、EMR Hbase和阿里云的实时数仓Hologres,以提供实时分析、点查调用和BI报表分析等操作。数据服务场景 ...

如何选择转码类型

AI处理:对已经上传到点播的视频进行AI处理,如智能审核、内容分析(标签分析、语音文字识别等)、智能首图、新闻拆条等处理。CDN加速:指对内容进行全网分发,加快内容访问速度,提高用户体验。不同规格视频:主要是指视频的分辨率、码率...

设置告警

日志服务已内置 CloudLens for CLB 告警监控规则,您需添加对应的告警规则即可实时监控CLB实例,并可通过钉钉等渠道接收到告警通知。本文介绍设置告警的相关操作。背景信息 CloudLens for CLB 预设了基线告警、同环比告警、智能告警等告...

背景信息以及准备工作

LOG+OSS+DLA+DataV 将业务应用程序产出的业务日志采集到日志服务中,通过定时日志投递(最小5分钟延迟)到OSS中,再通过定时查询,刷新到业务数据大屏中。上述方案有以下优势:日志服务(Log Service,简称LOG/原SLS)是针对实时数据一站式...

Linux实例网站访问丢包延时高的排查方法

说明:高延迟并不一定完全意味着相应节点存在异常,延迟大也有可能是在数据回包链路中引发的,建议结合反向链路测试一并分析。ICMP策略限速也可能会导致相应节点的延迟陡增,但后续节点通常会恢复正常。如前文链路测试结果示例图所示,第3...

2020年功能发布记录

2020年12月 功能名称 变更类型 功能描述 相关文档 CICD部署 新增 函数计算新增CICD部署功能,通过CICD部署功能,您无需管理服务器等基础设置,需编写代码并上传。函数计算已为您准备好计算资源,并以弹性、可靠的方式运行您的代码。无 ...

2020年功能发布记录

2020年12月 功能名称 变更类型 功能描述 相关文档 CICD部署 新增 函数计算新增CICD部署功能,通过CICD部署功能,您无需管理服务器等基础设置,需编写代码并上传。函数计算已为您准备好计算资源,并以弹性、可靠的方式运行您的代码。无 ...

数据集常见问题

目前通过配置方式,支持年累计(YTD)、月累计(MTD)、季累计(QTD)。配置时,需要维度中选择日期类型的 DAY 字段才能配置,如下图所示。通过上述方式只能统计月初或年初、季初开始到所选日期的累计值,如果您需要任意选择一段时间,从...

使用ETL分析实时订单

本文通过案例为您介绍如何使用ETL实现实时订单分析。应用场景 为满足企业处理实时数据的需求,ETL提供了流式数据抽取、加工和加载功能,能够高效整合海量实时数据,支持拖拽式操作和低代码开发方式,帮助企业轻松完成商业决策分析、报表...

通过读写分离提升数据吞吐性能

背景信息 应用层中直接使用代码实现,在进入Service之前,使用AOP来做出判断,是使用写库还是读库,判断依据可以根据方法名判断,例如以query、find、get等开头的就走读库,其他的走写库。优点:多数据源切换方便,由程序自动完成。不需要...

时延洞察

在排查Redis数据库实例的故障和性能降低的原因时,您可以通过时延洞察功能,对数据库所有命令以及自定义特殊事件进行时延统计,得到精确到微秒级别的延迟时间,从事件、时间、时延三个维度对实例进行分析,快速定位和修复故障。前提条件 ...

基于阿里云组件指标的容器水平伸缩

latency_p50 50%请求的延迟 sls.ingress.route sls_ingress_latency_p95 95%请求的延迟 sls.ingress.route sls_ingress_latency_p99 99%请求的延迟 sls.ingress.route sls_ingress_latency_p9999 99.99%请求的延迟 sls.ingress.route sls_...

基于阿里云组件指标的容器水平伸缩

latency_p50 50%请求的延迟 sls.ingress.route sls_ingress_latency_p95 95%请求的延迟 sls.ingress.route sls_ingress_latency_p99 99%请求的延迟 sls.ingress.route sls_ingress_latency_p9999 99.99%请求的延迟 sls.ingress.route sls_...

基本概念

抖动,是指最大延迟与最小延迟的时间差,如最大延迟是 20 毫秒,最小延迟为 5 毫秒,那么网络抖动就是 15 毫秒,它主要标识一个网络的稳定性。网络延迟 指信息从发送到接收经过的延迟时间,一般由传输延迟及处理延迟组成。X 响应次数 某段...

使用前须知

阿里云日志服务联合云安全中心联合推出日志分析功能,提供风险威胁数据的实时采集、查询与分析、加工、消费等一站式服务,帮助您全面了解、有效处理服务器的安全隐患,实现对云上资产的集中安全管理。本文介绍云安全中心日志分析功能相关的...

常见问题

表格存储 单表提供PB级数据存储规模,无需分库分表,同时支持千万QPS,可以轻松满足IoT设备、监控系统等时序数据的存储需求,大数据分析SQL直读以及高效的增量流式读接口让数据轻松完成离线分析与实时流计算。表格存储 提供了各个场景下的...

使用Prometheus监控Nginx Ingress网关

服务统计-请求分析 服务统计最后一部分则是将贯穿Host/域名、Service、URI请求路径上的PV、成功率、4XX比例、5XX比例、延迟情况以表格形式详细呈现。它们的统计范围是当前顶部选择的时间段。如果希望下钻看到更细粒度的URI请求分析统计,...

使用Prometheus监控Nginx Ingress网关

服务统计-请求分析 服务统计最后一部分则是将贯穿Host/域名、Service、URI请求路径上的PV、成功率、4XX比例、5XX比例、延迟情况以表格形式详细呈现。它们的统计范围是当前顶部选择的时间段。如果希望下钻看到更细粒度的URI请求分析统计,...

产品优势

不支持 异常分析/错误分析 提供独立的异常分析以及错误分析视图。不支持 前后端链路串连 与ARMS前端监控集成,实现用户界面与服务端应用的全链路打通,可以在同一个页面看到完整链路。不支持 智能洞察 基于真实业务场景沉淀专家级SRE经验,...

ClickHouse概述

开源大数据平台E-MapReduce(简称EMR)的ClickHouse提供了开源OLAP分析引擎ClickHouse的云上托管服务。EMR ClickHouse完全兼容开源版本的产品特性,同时提供集群快速部署、集群管理、扩容、缩容和监控告警等云上产品功能,并且在开源的基础...

背景信息以及准备工作

数据湖分析 DLA(Data Lake Analytics)作为云上数据处理的枢纽,通过DLA可以读取存储在对象存储服务 OSS(Object Storage Service)中的数据,对其进行清洗后再通过DLA将结果数据写入AnalyticDB for MySQL 2.0,通过AnalyticDB for MySQL ...

配置图表工具栏区

开启 实时查询 后,仪表板图表查询默认有一分钟缓存延迟,开启后无延迟但会增加数据源压力。联动设置:设置开启全局 自动联动功能。请参见 联动。级联条件:配置查询条件间的关联关系,请参见 配置条件级联。全局参数:在配置报表时,可以...

功能特性

您无需修改代码,需为应用安装一个探针,ARMS就能够对应用进行全方位监控,帮助您全面掌控应用运行状态,快速定位出错接口和慢接口,洞察性能瓶颈,重现调用参数、从而大幅提升线上问题诊断的效率。本文介绍ARMS应用监控支持的主要功能。...

全密态数据库性能测试报告

测试步骤 本测试对表中的列进行加密,分析全密态数据库不同场景下的性能。ECS实例安装PostgreSQL客户端。请参见 官方文档。打开PostgreSQL命令行工具连接RDS PostgreSQL数据库。psql-h<数据库连接地址>-U<用户名>-p<端口号>-d postgres ...

数据写入、更新、点查场景压测最佳实践

Hologres是兼容PostgreSQL协议的一站式实时数仓引擎,支持海量数据实时写入、实时更新、实时分析,既支持PB级数据多维分析(OLAP)与即席分析(Ad Hoc),又支持高并发低延迟的在线数据服务(Serving)。本文为您介绍Hologres在数据写入、...

同步MaxCompute

当移动数据分析自带的基础分析报表不能满足App开发者的个性化需求时,App开发者可以将数据一键同步至MaxCompute,结合自己的业务需求来进一步加工、分析自己的数据。操作步骤 使用主账号登录 MaxCompute控制台。单击 个人信息,修改...
共有116条 < 1 2 3 4 ... 116 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
表格存储 全球加速 视频直播 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用