东软案例
在互联网服务场景下，运维监控数据量激增，采集监控的数据类型更加多样（时序指标、日志、代码链路等），现有运维系统采用的单模引擎（如RRD数据库、openTSDB时序数据库、ElasticSearch检索类数据库）应对这些实时、高并发采集，且价值密度...
配置安全规则
来源IP非 192.168.0.1，或数据库名称非 User01 或 TestUser01 的访问，数据库审计系统会根据已有的审计规则判断该访问操作是否合法，并确定是否上报告警。时间限制设置：设置例外规则生效的时间段。根据选择的规则类型配置规则内容，然后...
新建指标
引用数据字典 选择已新建的数据字典，或新建新的数据字典后进行选择，新建数据字典的具体操作，请参见 新建数据字典。质量校验函数 选择已创建的质量校验函数。如何创建质量校验函数参见 新建质量校验函数。长度 字段的长度。业务规则 对...
新建指标
引用数据字典 选择已新建的数据字典，或新建新的数据字典后进行选择，新建数据字典的具体操作，请参见 新建数据字典。质量校验函数 选择已创建的质量校验函数。如何创建质量校验函数参见 新建质量校验函数。长度 字段的长度。业务规则 对...
指标对比饼图
事件 事件 说明 当指标对比饼图接口请求完成时 数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据源 页签的 数据响应结果 区域。动作 动作 说明 导入...
DescribeQoeMetricData
调用DescribeQoeMetricData获取单次通信中用户的下行体验质量指标。使用说明 本接口用于获取单次通信中用户的下行体验质量指标。例如：您可以获取影响通信体验的指标类型、音视频指标趋势图等信息。QPS限制 本接口的单用户QPS限制为20次/秒...
产品概述
可视化的数据资产：系统化构建业务数据资产大图，从数据视角还原业务系统、提取业务数据，快速感知业务关键环节及数据。数据使用简单可依赖：通过主题式数据查询服务，您可以快速查询和访问研发构建的数据逻辑表，简化约80%的查询代码。...
创建派生指标
原子指标 选择派生指标的原子指标，系统仅支持选择具有相同数据时效的原子指标。业务限定 选择派生指标的业务限定，系统仅支持选择与所选原子指标具有相同数据时效的业务限定。统计粒度设置 统计粒度 统计粒度的时效，根据已选择的统计周期...
创建派生指标
原子指标 选择派生指标的原子指标，系统仅支持选择具有相同数据时效的原子指标。业务限定 选择派生指标的业务限定，系统仅支持选择与所选原子指标具有相同数据时效的业务限定。统计粒度设置 统计粒度 统计粒度的时效，根据已选择的统计周期...
新建注册上挂指标
您可以将物理表中的指标字段上挂至汇总逻辑表进行数据分析。...参数 描述 数据类型 选择上挂指标的数据类型。度量单位 选择上挂指标的度量单位。业务负责人 选择上挂指标的业务负责人。描述 填写对上挂指标的简单描述。配置完成后单击 确定。
概述
由于已迁移的业务系统和剩余的其他业务之间有数据访问，为了保证业务的正常运转，需要实现 PolarDB PostgreSQL版（兼容Oracle）数据库和ECS自建PostgreSQL数据库之间互访。目前自建PostgreSQL已经支持创建到 PolarDB PostgreSQL版（兼容...
新建注册上挂指标
您可以将物理表中的指标字段上挂至汇总逻辑表进行数据分析。...参数 描述 数据类型 选择上挂指标的数据类型。度量单位 选择上挂指标的度量单位。业务负责人 选择上挂指标的业务负责人。描述 填写对上挂指标的简单描述。配置完成后单击 确定。
业务指标趋势
本文介绍业务指标趋势全量选择时各配置项的含义。图表样式 业务指标趋势是以标题、图标和数值的形式表现业务指标趋势关系的组件。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在搜索配置面板中输入您需要搜索的配置项名称...
按指标关联
根据指标关联对应资源信息，手动选中指标后，系统自动选中该指标对应的逻辑表。说明 工作组若有创建数据标准、数据源和全局变量，不区分创建方式，默认拉取这3个模块的全量数据导入导出。关联项说明 关联项 说明 逻辑表 对应数据建模中创建...
目标占比饼图
数据项配置 说明 数据源 组件的数据源中通过 代码编辑 或 可视化编辑 展示了组件所包含的数据字段。也可以修改 数据类型，灵活配置组件数据。数据映射 当您需要自定义图表字段配置时，可以在 数据映射 模块设置不同的字段映射内容，将这些...
应用场景
实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...
实时同步任务延迟解决方案
但由于总字节数包括任务从上次指定位点启动开始的数据量，如果任务运行时间已经很长，则可能无法反映出最近的数据倾斜情况，您需要继续通过源端系统的监控指标确认是否存在数据倾斜情况。如果写入源端系统的单个分区或者shard数据流量已经...
基本柱状图（v3.0及以上版本）
图表样式 基本柱状图是柱状图的一种，相比弧形柱图，基本柱状图组件支持自定义y轴区间和多个系列的数据配置，能够更加智能地展示多维的数据差异，但在可视化应用中占的空间较大。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在...
基本柱图（v3.0以下版本）
基本柱图是柱状图的一种，相比弧形柱图，基本柱图组件支持自定义y轴区间和多个系列的数据配置，能够更加智能地展示多维的数据差异基本柱图，但在可视化应用中占的空间较大。本文介绍基本柱图各配置项的含义件。配置 重要 本文介绍v3.0以下...
数据质量：全流程的质量监控
DataWorks的全流程数据质量监控功能为您提供35种预设表级别、...数据质量为您解决以下问题：数据库频繁变更问题 业务频繁变化问题 数据定义问题 业务系统的脏数据问题 系统交互导致质量问题 数据订正引发的问题 数据仓库自身导致的质量问题
克隆快照
您可以基于已有的快照克隆出新的数据库文件系统。控制台上克隆快照 在数据库文件存储控制台左侧导航栏点击 快照 进入 数据库文件系统快照 页面。在顶部菜单栏左上角处，选择地域。选择需要克隆的快照，在右侧 操作 列中单击 克隆。设置文件...
数据采集
计算节点的主要时序指标包括CPU使用率等相关信息。存储节点相关的时序指标主要包括CPU使用率、IO相关指标等。日志数据采集 内部的各类日志会被采集并发送到SLS日志服务系统中进行统一的存储和加工，日志数据主要包括：审计日志：用于记录...
系统流程
通过系统流程图，便于直观的了解到数据资产中心展示的各资产信息以及资产来源...资产目录 展示在运营工作台资产对象管理中公开的数据资产，包括指标、数据表、标签和API资产。以表资产为例，更多信息，请参见 查看表资产详情 和 申请表资产。
创建数据源
公有云实例中创建数据源：公有云的实例中，单击 登录数据库，输入用户名，跳转至 ODC 后输入密码，会自动创建以该实例和用户名命名的数据源。操作步骤 方法一：ODC 首页中创建数据源 重要 拥有 AdministratorAccess 或者 ...
网络资源
网络资源需要支持安全的数据传输和通信协议，以保护分布式系统的敏感数据和通信内容的机密性和完整性。网络资源还需要提供高带宽、低延迟和稳定的网络连接，以确保节点之间的通信和数据传输的效率和可靠性。网络资源是流量入口和数据交互的...
产品简介
DLA Ganos是基于云原生数据湖分析（Data Lake Analytics，DLA）系统设计开发的，面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos打通了阿里云各个存储系统，如...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
可观测性能力
背景信息 可观测性是以系统的指标、日志、链路追踪三大数据支柱为基础，衍生出如数据监控、问题分析、系统诊断等一系列的能力。指标（Metrics）：记录一段时间内各个维度的量化信息，用来观察系统的某些状态和趋势。日志（Logs）：记录程序...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
创建Kudu数据源
Kudu适用HTAP场景（例如物联网），对于数据处理系统的复杂性提出了更高的要求。从早期的OLTP、OLAP拆分，到后来的Lambda架构，都存在数据复制和同步的复杂性，而Kudu的单一数据架构，规避了传统架构数据复制和同步的复杂性。更多详情请参见...
导出指标
通过导出指标功能，搭配导入功能，您可以快速实现工作组间的指标数据迁移。本文介绍如何导出指标。前提条件 已完成指标导入或新建，具体操作，请参见 新建指标 或者 导入指标。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标...
导出指标
通过导出指标功能，搭配导入功能，您可以快速实现工作组间的指标数据迁移。本文介绍如何导出指标。前提条件 已完成指标导入或新建，具体操作，请参见 新建指标 或者 导入指标。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，...
基本概念
Mongos MongoDB分片集群请求入口，所有的请求都通过Mongos进行协调，Mongos是一个请求分发中心，它负责把对应的数据请求转发到对应的Shard服务器上。用户可以选择多个Mongos作为请求的入口，防止其中一个挂掉所有的MongoDB请求都无法操作。...
可观测性能力介绍
背景信息 可观测性是以系统的指标、日志、链路追踪三大数据支柱为基础，衍生出如数据监控、问题分析、系统诊断等一系列的能力。指标（Metrics）：记录一段时间内各个维度的量化信息，用来观察系统的某些状态和趋势。日志（Logs）：记录程序...
存储说明
E-MapReduce可以方便的读写OSS上的数据，所有使用HDFS的代码经过简单的修改即可以访问OSS的数据。例如：读取HDFS中的数据。sc.textfile("hdfs:/bucket/path")更改存储类型为OSS。sc.textfile("oss:/bucket/path")对于MR或Hive作业，HDFS...
典型使用场景
通常需要实时获取业务系统产生的数据，基于数据更新进行实时计算。HBase具有高吞吐，低延迟，schemaFree，水平扩展等能力，被很多大数据类应用选择。而接合LindormStreams+Blink/Spark，可以构建出一套完整的实时数据系统：应用解耦-实时...
简介
应用场景 应用场景 描述 主动运维 实时监测端到端通信质量指标数据，全面掌握用户的通话体验，并统计每个频道的参与人数、质量变化情况。服务感知 查询通信的用量和质量大盘数据，还可以查看整体的趋势变化，为业务规划提供决策支撑。异常...
产品功能
监控运维 TSDB 提供实例运维系统，让您可以实时的掌握实例的运行情况、性能指标和存储空间使用情况，并通过设置报警通道，实时发现资源瓶颈。数据和实例安全 TSDB 提供以下方案保证您的数据和实例的安全：提供 VPC 的实例访问方式，充分...
应用场景
同时MongoDB动态模式存储方式也非常适合存储多重系统的异构数据，满足移动App应用的需求。物联网应用 云数据库MongoDB具有高性能和异步数据写入功能，特定场景下可达到内存数据库的处理能力。同时，云数据库MongoDB中的分片集群实例，可按...
管理数据分级
查看数据分级 在 数据分级 页面，查看系统中的数据分级及每个数据分级的详细信息。区域 描述 ① 搜索区 您可以根据数据分级的名称关键字，快速搜索数据分级。② 数据分类信息 为您展示数据分级、数据分级的名称、更新人、更新时间、分级...
- 产品推荐
- 这些文档可能帮助您