采集策略

常见案例 采集特定区域的实例日志 例如:只采集中国区域的实例日志,采集策略如下所示。only scan cn region keep region == "cn-*"#accept by default accept"*"采集特定标签的实例日志 例如:只采集所有标签打上type值是production(大...

对接DataV

案例:调整不同统计口径下的云栖大会网站访问实时大屏 云栖大会期间有一个临时需求,需要您统计大会网站的全国各地访问量以在实时大屏上显示。此前您已配置采集全量日志数据,并且在日志服务中打开了查询分析,所以只要输入查询分析Query...

HaaS EDU场景式应用整体介绍

场景式案例包括:首页系统信息屏 温湿度计 陀螺仪小球 分歧争端机 电子罗盘 光照信息屏 大气压海拔仪 复古八音盒 贪吃蛇 飞机大战 在每个案例对应的文件夹中有详细打造过程,同时,案例还在不断扩充当中。2.1 首页系统信息屏 这是系统启动...

阿里云电子政务云产品全家福

阿里云电子政务云平台提供弹性计算类、网络、数据库、存储、大数据、中间件、IoT等品类丰富的产品及高标准的安全合规服务,用以支撑多种政务类业务场景,例如:城市大脑,合规应用平台等。截至文档发布时间,阿里云电子政务云共计上线95款...

解决方案与客户案例

本文介绍了异地多活解决方案的架构和应用场景,以及国税总局和联通新客服系统案例的实现架构和效果。异地多活数据库解决方案 方案背景 随着云计算的蓬勃发展,越来越多的信息系统选择部署在云计算环境下,因此基于云产品为信息系统的服务...

浙商证券

截至 2020 年底,公司总资产 911 亿元,净资产 193 亿元,百余家分支机构遍布全国 22 个省份,服务覆盖珠三角、长三角和环渤海三大经济区,在全国最活跃的省份打下了综合投融资服务的基石,形成全国性财富管理网络布局。业务挑战 随着...

事件管理

适用于APP、小程序、网页:Quick Audience支持对接阿里云用户行为洞察分析平台 什么是Quick Tracking,一方应用可以利用Quick Tracking提供的SDK实现事件采集上报,具体方法请参见 数据采集接口。系统默认事件:系统已预定义社交互动等部分...

快速体验

注意事项 本案例中,数据采集和数据加工的部分任务可以通过ETL工作流模板一键导入。在导入模板后,您可以前往目标空间,并自行完成后续的数据质量监控和数据可视化操作。仅 空间管理员 角色可导入ETL模板至目标工作空间,为账号授权空间...

加工数据

本文为您介绍如何将同步至MaxCompute的用户信息表ods_user_info_d及访问日志数据ods_raw_log_d,通过DataWorks的ODPS SQL节点加工得到目标用户画像数据,阅读本文后您可了解到如何通过DataWorks+MaxCompute产品组合来计算和分析已采集的...

采集数据

info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构数据源间的数据同步,完成数仓数据采集操作...

实验介绍

涉及产品 本案例涉及以下产品:一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集,加工,质量监控,与数据可视化展现,您需提前开通该服务。详情请参见 开通DataWorks服务。云原生大数据计算服务MaxCompute 实现底层加工...

接入Kubernetes JVM监控数据

Kubernetes JVM监控基于灵活的Logtail Kubernetes能力,通过自动发现等手段,为Kubernetes中所有基于JVM运行的服务提供灵活且一站式的JVM指标采集方案。前提条件 已创建全栈可观测实例。具体操作,请参见 创建实例。采集原理 Java ...

分析Nginx访问日志

日志服务支持采集Nginx日志,并进行多维度分析。本文介绍分析网站访问情况、诊断及调优网站和重要场景告警的分析案例。前提条件 已采集Nginx访问日志,详情请参见 使用Nginx配置模式采集日志。在日志采集配置向导中,已根据日志字段自动...

案例推理-训练

计算逻辑原理 通过历史数据的采集,整理和挑选形成优质案例库,结合目前工况与历史最优数据进行对比,推荐接近的控 制目标推荐值,该方法适用于历史案例丰富的场景。参数说明 IN端口 参数名 参数描述 是否必填 输入数据类型 数据源类型 ...

Fluentd插件

Fluentd插件 产品介绍 该插件是基于Fluentd开发的输出插件,主要是将采集到的数据写入DataHub。该插件遵守Fluentd输出插件开发规范,安装方便,可以很方便地将采集得到的数据写到DataHub。产品安装 通过Ruby gem安装 注意:RubyGem源建议...

通过自建Metricbeat收集系统指标信息

操作流程 配置阿里云Elasticsearch 配置Metricbeat 在Kibana中查看Dashboard 说明 您也可以参考本案例的操作流程,使用Metricbeat采集一台Linux系统或Windows系统电脑的指标信息,并推送到阿里云Elasticsearch上。配置阿里云Elasticsearch ...

如何选用云服务器

客户案例 某政府用户打算在阿里云电子政务云上搭建属于自己的业务平台,其中包括政府网站,内部移动应用,数据分析平台以及视频直播平台。在这个场景中,根据客户的需求进行区分,一般情况下,在日均访问量5000以内,产品搭配如下:业务...

采集数据

info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构数据源间的数据同步,完成数仓数据采集操作...

加工数据

本文为您介绍如何将同步至MaxCompute的用户信息表ods_user_info_d及访问日志数据ods_raw_log_d,通过DataWorks的ODPS SQL节点加工得到目标用户画像数据,阅读本文后您可了解到如何通过DataWorks+MaxCompute产品组合来计算和分析已采集的...

老板来了:通过HaaS100实现端云一体AI识别示例

通过“老板来了”案例,来给开发者演示如何实现一个端云一体AI的AI识别功能。更正文档 贡献说明 1.案例简介 ucloud_ai_demo是基于云端AI能力实现的AI识别案例,主要有三个部分组成:通过采集WiFi摄像头(ESP32)的数据后得到jpeg图像;上传...

视频总览

功能模块 连接数据源 数据准备 数据集建模 仪表板图表和可视化 制作电子表格 搭建数据门户 移动端查看报表 数据权限 案例演示 业务背景介绍和快速连接数据源 创建数据集和数据建模 销售额和毛利额月度趋势分析 各流量渠道毛利率探索分析 ...

如何选用安全类产品

在阿里云电子政务云上安全产品众多,用户在面对众多安全产品时很难选择或匹配自己的场景,现将主要的安全产品进行对比分析,汇总介绍主要安全产品的描述和使用建议。安全类产品对比介绍 以下表格为各主要安全产品的对比介绍,您可仔细核对...

成本优化指南

根据成本因素,本文通过如下两个案例介绍如何进行成本优化。优化存储结构 如果您持续采集某应用的日志,每天的写入量为100 GB,存储30天并建立全文索引,那么日志服务的成本大约是 2248元/每月。如果您更关心的是其中某一类POD的日志,例如...

最佳实践

时序存储 使用Prometheus采集Kubernetes监控数据 查询与分析 查询和分析网站日志 查询和分析JSON日志 Data Explorer案例 关联Logstore与MySQL数据库进行查询分析 关联Logstore与OSS外表进行查询和分析 查询MNS日志 采集及分析Nginx监控日志...

通过Heartbeat检测ICMP及HTTP服务

配置采集器时,需要在 heartbeat.yml 中配置 heartbeat.monitors 参数设置监视器,本案例使用的配置如下。heartbeat.monitors:type:icmp schedule:'*/5*' hosts:["47.111.xx.xx"]-type:http # List or urls to query urls: [...

教程概述

案例使用阿里云DTS将您的增量数据同步到DataHub上,再通过阿里云实时计算Flink订阅DataHub的数据进行实时计算,并将结果插入到RDS数据库中,最终通过DataV大屏进行展示。说明 本案例仅提供具体的操作指导,业务场景和数据与实际情况会有...

分析Log4j日志

案例的索引如下图所示。背景信息 Log4j是Apache的一个开放源代码项目,通过Log4j可以控制日志的优先级、输出目的地和输出格式。日志级别从高到低为ERROR、WARN、INFO、DEBUG,日志的输出目的地指定了将日志打印到控制台还是文件中,输出...

ETL工作流快速体验

DataWorks推出ETL工作流模板案例集,旨在帮助您快速了解产品的最佳实践。您可以一键将案例导入至指定工作空间,快速还原案例,体验产品能力。教程列表 DataWorks当前支持的ETL工作流模板列表如下:说明 ETL工作流模板载入 数据开发 模块后...

快速入门

本文以采集分析ECS的Nginx访问日志为例,介绍开通日志服务、创建日志项目与Logstore、Logtail采集日志、查询与分析日志等步骤,帮助您快速上手使用日志服务。前提条件 已有可用的ECS。更多信息,请参见 云服务器ECS快速入门。ECS服务器持续...

小程序 SDK

含义 类型 示例 支持平台 setUserid 设置用户ID Function$umapm.setUserid('xxxx')微信 支付宝 setPageFilter 通过设置采集页面黑白名单,过滤采集上报的页面 Function$umapm.setPageFilter({ mode:'match',rules:['/home']})微信 支付宝 ...

阿里云电子政务云架构

阿里云电子政务云依托于阿里云业内先进的技术,提供与其他机房完全物理隔离的专属高规格物理集群、高等级的安全防护,从平台系统架构、网络架构的设计层面开始,保障政务云的独立性、安全性、高可用性。平台系统架构 阿里云电子政务云基于...

规格及选型

案例四:自动驾驶企业 用户为自动驾驶领域企业,需要基于车采数据进行地理位置和时序的采集数据分析,要求对JSON格式的友好兼容和时空数据的分析能力,构建业务看板并支持特征工程。建议:使用 AnalyticDB PostgreSQL版 存储弹性模式,实例...

X-Pack高级特性

X-Pack高级特性(开源Elasticsearch白金版)是基于开源Elasticsearch原X-Pack商业版插件开发的,包含了安全、SQL、机器学习...告警 UPTIME 监控 仪表板 告警 证书检测 合成检测 安全分析 Common Schema 安全分析 时间线事件 案例管理 异常检测

Cost-based SQL诊断引擎

在阿里巴巴集团内部,我们已经对数据库实例上全部SQL进行实时采集和存储,借助阿里巴巴这个大平台业务的丰富性和SQL场景的丰富性,以特征化形式描述为抓手对线上海量全量SQL资源分析搜寻符合指定特征的真实案例,抽取测试案例所需的信息,...

东软案例

将从遍布全国多地域的手机、平板等终端连接应用系统业务服务的数字足迹和客户数字体验数据、云端&数据中心网络抓包分析数据,应用运行代码链路和日志数据全量采集存储于阿里云Lindorm灵动云原生多模数据库,如下图所示。图 2.基于阿里云...

通过DTS采集数据

查看数据采集结果。回到 DataHub控制台,查看通过DTS创建的数据结构是否有缺失。在RDS数据库中插入一条数据,单击 数据抽样,查看增量数据同步结果。注意 DataHub同步的是增量数据,您的数据库中必须插入、删除或更新一条或多条数据后,才...

客户案例

千寻位置基于卫星系统(兼容GPS、GLONASS、Galileo)定位数据,利用遍及全国的超过2400个地基增强站及自主研发的定位算法,通过互联网技术进行大数据运算,为遍布全国的用户提供精准定位及延展服务。客户诉求 提升计算精准度及速度,满足...

自定义模板

本文为您介绍如何基于已有的仪表板、数据大屏、电子表格和数据填报,创建自定义模板。新建模板 登录 Quick BI控制台。在Quick BI首页,按照下图指引,新建模板。在 新建 模板 对话框中,配置以下参数。界面参数说明 参数 说明 模板 类型 ...

采集-IoT/嵌入式日志

分布广:硬件一旦部署后,往往会部署在全国、甚至全球各地。黑盒:难以登录并调试,大部分情况属于不可知状态。资源受限:出于成本考虑,IoT设备硬件较为受限(例如总共只有32MB内存),传统PC领域手段往往失效。C Producer 日志服务量身...

最佳实践

1、企业能源管理 阿里云能耗宝用能管理模块,聚焦于企业能耗数据采集、分析、告警、预测,为企业提供用电优化咨询与建议。能耗宝可以通过MQTT、Modbus协议采集企业的多能源能耗数据(电表、水表、燃气表、逆变器、蒸汽表等),在提供用能...
共有132条 < 1 2 3 4 ... 132 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
物联网平台 视频点播 视觉智能开放平台 智能语音交互 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用