配置学区地图单选框交互
本文档为您介绍通过 单选框 实现不同类型学校的散点层数据的切换展示，以及 Tab列表 和 单选框 的双重触发判断方法。例如 Tab列表 选择 小学，单选框 选择 公办，那么最终实现在可视化应用上展示所有 公办小学 的散点层信息。前提条件 完成...
接入Clickhouse监控数据
本文介绍如何通过日志服务来完成Clickhouse监控数据的采集和可视化。前提条件 Telegraf所在的服务器可通过内网连接ClickHouse服务器。已创建Project和MetricStore。具体操作，请参见 创建项目Project 和 创建MetricStore。使用限制 只有...
接入Redis监控数据
本文介绍如何通过日志服务来完成Redis监控数据的采集和可视化。前提条件 Telegraf所在的服务器可通过内网连接Redis服务器。已创建Project和MetricStore。具体操作，请参见 创建Project 和 创建MetricStore。使用限制 只有Linux Logtail 0....
接入MongoDB监控数据
本文介绍如何通过日志服务来完成MongoDB监控数据的采集和可视化。前提条件 已创建Project和MetricStore。具体操作，请参见 创建Project 和 创建MetricStore。使用限制 只有Linux Logtail 0.16.50及以上版本的Logtail支持采集MongoDB监控...
产品架构
最后，数据通道服务（LTS）负责引擎之间的数据流转和数据变更的实时捕获，以实现数据迁移、实时订阅、数湖转存、数仓回流、单元化多活、备份恢复等能力。分布式文件系统 LDFS（Lindorm DFS，也称为Lindorm文件引擎）是面向云基础存储设施...
接入Elasticsearch监控数据
本文介绍如何通过日志服务来完成Elasticsearch监控数据的采集和可视化。前提条件 Telegraf所在的服务器可通过内网连接Elasticsearch服务器。已创建Project和MetricStore。具体操作，请参见 创建Project 和 创建MetricStore。使用限制 只有...
接入MySQL监控数据
本文介绍如何通过日志服务来完成MySQL监控数据的采集和可视化。前提条件 Telegraf所在的服务器可通过内网连接MySQL服务器。已创建Project和MetricStore。具体操作，请参见 创建Project 和 创建MetricStore。使用限制 仅支持MySQL 5.5及以上...
接入Nginx监控数据
本文介绍如何通过日志服务来完成Nginx监控数据的采集和可视化。前提条件 已创建Project和MetricStore。具体操作，请参见 创建Project 和 创建MetricStore。已配置Nginx Status模块。具体操作，请参见 配置Nginx Status模块。使用限制 只有...
接入NVIDIA GPU监控数据
本文介绍如何通过日志服务来完成NVIDIA GPU监控数据的采集和可视化。前提条件 已创建Project和MetricStore。具体操作，请参见 创建Project 和 创建MetricStore。使用限制 只有Linux Logtail 0.16.50及以上版本的Logtail支持采集NVIDIA GPU...
租户设置
资源使用说明 总的处理单元规格数和总的质量规则数与客户购买的数据处理单元和规则配额有关。详情请参见 查看资源使用情况。新建租户 使用超级管理员或系统管理员账号，登录元仓租户。在Dataphin首页，单击顶部菜单栏的 管理中心。在 管理...
典型场景
在线高性能查询 面对任意维度数据即时探索和数据实时入库更新等挑战，云原生数据仓库AnalyticDB PostgreSQL版 具有如下技术优势：高吞吐数据写入及更新（如INSERT、UPDATE、DELETE）。行存储及多种索引（如B-tree、Bitmap），点查询毫秒级...
配置学区地图Tab列表交互
在 id=2：初中 的 串行数据处理 节点与 公办初中点 和 民办初中 的连线中分别添加两个 串行数据处理 节点，并分别命名为 schooltype=公办 和 schooltype=民办。串行数据处理 节点添加完成后，最终效果实现双重判断标准，部分截图如下所示。...
配置学区地图Tab列表交互
在 id=2：初中 的 串行数据处理 节点与 公办初中点 和 民办初中 的连线中分别添加两个 串行数据处理 节点，并分别命名为 schooltype=公办 和 schooltype=民办。串行数据处理 节点添加完成后，最终效果实现双重判断标准，部分截图如下所示。...
接入Kafka监控数据
本文介绍如何通过日志服务来完成Kafka监控数据的采集和可视化。前提条件 已在服务器上安装Java 1.6或以上版本。已创建Project和MetricStore。具体操作，请参见 创建Project 和 创建MetricStore。使用限制 只有Linux Logtail 0.16.48及以上...
接入Java应用或Tomcat的监控数据
本文以Java应用监控数据为例，介绍如何通过日志服务来完成Java应用数据的采集和可视化。前提条件 已在服务器上安装Java 1.6或以上版本。已创建Project和MetricStore。具体操作，请参见 创建Project 和 创建MetricStore。使用限制 只有Linux...
采集Windows事件日志
您可以通过Logtail插件采集Windows事件日志。本文介绍如何通过日志服务控制台创建Logtail配置采集Windows事件日志。前提条件 已在服务器上安装Windows Logtail 1.0.0.0及以上版本。具体操作，请参见 安装Logtail（Windows系统）。目标...
操作流程
适用于离线类节点 运行开发节点 运行节点，验证处理逻辑和数据的准确性。具体操作，请参见 步骤四：运行开发节点。设置调度信息 当离线计算节点需要按照周期输出数据时，支持通过设置节点的调度信息，实现节点中各数据被周期计算。具体操作...
实时同步能力说明
您可以对输入的数据源进行 数据过滤、字符串替换 和 数据脱敏 处理，再将处理后的数据输出至目标数据库。数据过滤：可以对数据进行规则过滤，例如过滤字段的大小等，符合规则的数据才会被保留。字符串替换：可以通过字符串替换节点替换字符...
环境分类说明
容器环境 考虑到容器集群可能涉及大量数据采集，通常是将单个容器集群定位为一个监控环境。针对此类环境，为 ACK、ACK Serverless集群 以及 ACS 等阿里云容器服务实施了一套自动化管理流程，助力您轻松部署采集探针并处理数据。针对您自建...
环境分类说明
容器环境 考虑到容器集群可能涉及大量数据采集，通常是将单个容器集群定位为一个监控环境。针对此类环境，为 ACK、ACK Serverless集群 以及 ACS 等阿里云容器服务实施了一套自动化管理流程，助力您轻松部署采集探针并处理数据。针对您自建...
实验介绍
实操该实验后，可在DataWorks独立完成数据采集、数据开发和任务运维等数据岗位常见任务。实验时长 采用在线学习的方式，预计耗时1小时。实验费用 本案例运行可能会产生一定的费用。为避免产生过多费用，本案例在创建相关表时，生命周期 已...
通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的...
接入Logstash
Logstash的数据处理流程如下：输入：采集各种格式、大小和来源的数据。在实际业务中，数据往往以各种各样的形式分散或集中地存储在多个系统中，Logstash支持多种数据输入方式，可以在同一时间从多种数据源采集数据。Logstash能够以连续的...
产品概述
产品为客户提供资产建模、数据采集、数据分析、设备监控和数据分析五大产品能力：资产建模：定义设备资产标准模型，管理设备资产数据 提供设备资产全维度数据建模工具 快速构建实体资产数据模型 对设备资产进行全生命周期管理 为数据应用...
播放数据统计常见问题
由于采集、处理方式的不同，目前点播视频的播放数据统计和流量统计都有一定的时间延迟，且延迟时间不一致。因此您在查询最新数据时，看到的播放次数和流量数据在同一时间可能无法完全匹配。在查询大于延迟时间窗口的历史数据时（如查询前一...
什么是阿里云Logstash
Elasticsearch作为实时分布式搜索和分析引擎，Logstash提供了数据采集、转换、优化和输出的能力，Kibana提供了强大的可视化界面，可以被广泛应用于实时日志处理、全文搜索和数据分析等领域。Logstash数据传输原理 数据采集与输入：Logstash...
监控数据与计量数据
然而，在数据采集、计算和展示过程中不可避免地存在一定的延迟。虽然这个延迟很小，仍会导致监控数据与账单计量数据存在一定程度的差异。用作计费的账单计量数据允许有3个小时的延迟。例如在01:00~02:00产生的账单计量数据，正常情况下会在...
采集-通过WebTracking采集日志
日志服务提供Web Tracking、JS、Tracking Pixel SDK用于解决以上轻量级埋点采集场景，可以在1分钟时间内完成埋点和数据上报工作。功能特点 这里引入采集+分析方案基于阿里云日志服务，该服务是针对日志类数据的一站式服务，无需开发就能...
选择网络
公网：使用公网传输日志数据，不仅会受到网络带宽的限制，还可能会因网络抖动、延迟、丢包等影响数据采集的速度和稳定性。全球加速：利用阿里云CDN边缘节点进行日志采集加速，相对公网采集在网络延迟、稳定性上具有很大优势。重要 全球加速...
区域热力层（v3.x版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
查看资源用量大盘
资源用量大盘为您展示当前租户下已使用的数据处理单元总量和按任务类型分别统计的消耗趋势以及按项目粒度统计的消耗增量排行，帮助您了解数据处理单元的消耗情况以及时调整资源规格配置。本文为您介绍如何查看资源用量大盘。前提条件 需...
计费说明
购买示例 举例：某公司有1款应用（年总事件量约为1亿条、性能数据暂无具体概念）需要做用户行为数据采集与分析和性能监控的功能，需要使用SAAS服务，由于自己对埋点、指标体系搭建理解不深，需要咨询服务和按年购买产品，整体的价格如下 ...
服务器数据采集方案概述
针对这些数据，可以根据业务的需求和环境，选择对应的方案进行数据采集并传输到Elasticsearch服务。本文对服务器数据采集方案进行了汇总。相关文档 方案描述 阿里云Elasticsearch数据采集解决方案 本文提供Beats、Logstash、语言客户端和...
外部表概述
该机制使得用户可以无需将数据导入到MaxCompute内部存储，直接对外部数据进行操作，从而提供了数据处理的灵活性和方便性。背景信息 MaxCompute SQL作为分布式数据处理的主要入口，可实现EB级别离线数据的快速处理和存储。随着大数据业务的...
Delta Lake概述
Delta Lake以数据为中心，围绕数据流走向（数据从流入数据湖、数据组织管理和数据查询到流出数据湖）推出了一系列功能特性，协助您搭配第三方上下游工具，搭建快捷、易用和安全的数据湖。背景信息 通常的数据湖方案是选取大数据存储引擎...
Iceberg概述
而Iceberg简化了工作流程，整个数据处理过程是一条完整的、可靠的实时流，其数据的清洗、转换和特征化等操作都是流上的节点动作，无需处理历史数据和实时数据。此外，Iceberg还支持原生的Python SDK，对于机器学习算法的开发者非常友好。
什么是阿里云Elasticsearch
通过各个组件的结合，阿里云Elasticsearch可被广泛应用于实时日志处理、全文搜索和数据分析等领域。X-Pack X-Pack是Elasticsearch的一个商业版扩展包，包含安全Security、警告 Alerting、监控Monitoring、图形Graph和报告Reporting、机器...
概述
Beats和Logstash数据源输入插件 支持采集Beats和Logstash数据源。更多信息，请参见 采集Beats和Logstash数据源。Systemd Journal日志输入插件 支持采集Systemd Journal日志。更多信息，请参见 采集Systemd Journal日志。Docker事件输入插件...
从Oracle迁移应用至阿里云PolarDB全流程指南
数据库和应用采集 登录阿里云官方网站，在 ADAM官网 下载 数据库采集器 和 应用采集器，按照 数据库采集 进行Oracle数据库采集，应用采集 进行Oracle应用采集，生成相应的zip格式的数据压缩包，便于后续上传到阿里云ADAM官网进行分析使用。...
快速入门
通过各个组件 及服务 的结合，阿里云Elasticsearch可以应用于实时日志处理、全文搜索和数据分析等领域。更多产品相关信息，请参见 什么是阿里云Elasticsearch。产品使用 Elasticsearch Elasticsearch作为实时分布式搜索和分析引擎，可以...
- 产品推荐
- 这些文档可能帮助您