上游应用
对于某个应用而言，上游应用是指向该应用发送数据的应用。本文说明如何查看上游应用情况，包括响应时间、请求数、错误数等信息。前提条件 接入应用监控 功能入口 登录 ARMS控制台，在左侧导航栏选择 应用监控>应用列表。在 应用列表 页面...
划分数据域
数据仓库是面向主题（数据综合、归类并进行分析利用的抽象）的应用。数据仓库模型设计除横向的分层外，通常也需要根据业务情况进行纵向划分数据域。数据域是联系较为紧密的数据主题的集合，是业务对象高度概括的概念层次归类，目的是便于...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
准备工作概述
OpenTelemetry 版 通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过...
应用画像
应用画像功能针对单个应用进行多维度分析，输出应用画像分析报告，包括对应用的软件栈、系统信息、对象详情、SQL和调用栈等的评估分析。新建应用画像 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>异构数据库迁移（ADAM...
快速上手可观测链路 OpenTelemetry 版
OpenTelemetry 版 通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过...
名词解释
docker」Docker 可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中，然后发布到任何流行的 Linux 机器上，也可以实现虚拟化。k8s/kubernetes」建于 Docker 之上的 Kubernetes 可以构建一个容器的调度服务，其目的是让用户...
概述
以下是常见的应用场景：数据存储与计算安全场景：在不可信环境中（如第三方平台），Spark全密态计算引擎 可以为关键的数据分析应用（如投资和财务分析）提供数据保护，保证用户数据在存储与计算过程中的安全，降低明文数据泄露风险。...
系统配置
您可在数据保护伞的系统配置页面，设置数据保护伞的识别内容、识别范围，水印文件保存时间，是否展示风险识别的数据安全等级，以及告警信息的接收邮件及WebHook地址，以便及时发现并处理潜在安全风险。进入系统配置页面 进入数据开发页面。...
划分数据域
数据仓库是面向主题（数据综合、归类并进行分析利用）的应用。数据仓库模型设计除横向的分层外，通常也需要根据业务情况纵向划分数据域。数据域是联系较为紧密的数据主题的集合，是业务对象高度概括的概念，目的是便于管理和应用数据。通常...
数据治理
数据地图 为什么数据地图数据总览页存储量和存储趋势图相差较大？数据地图血缘展示延迟问题 数据地图新建表搜不到 当前表业务逻辑变更如何通知下游？哪些类型的Hive表支持在数据地图中预览？数据保护伞 数据保护伞为什么有时候查询脱敏有...
流量监控
SAG实例的应用加速带宽包流量 包含以下内容：流入流量（Bytes）：客户端通过智能接入网关绑定的应用加速带宽包加速访问目标应用时发送的数据量。流出流量（Bytes）：目标应用通过智能接入网关绑定的应用加速带宽包向客户端发送返回数据时...
应用场景
大数据场景 云数据库HBase支持海量全量数据的低成本存储、快速批量导入和实时访问，具备高效的增量及全量数据通道，可轻松与Spark、MaxCompute等大数据平台集成，完成数据的大规模离线分析。优势如下：低成本：高压缩比，数据冷热分离，...
使用自定义镜像创建服务器
如果自定义镜像中包含数据盘数据，则数据盘的大小也不能小于自定义镜像中数据盘数据的大小。在轻量应用服务器创建完成前，请注意不要进行以下操作，否则将导致服务器创建失败：删除对应的自定义镜像。删除自定义镜像来源的快照。对自定义...
退款说明
如果您购买轻量应用服务器后需要退订，阿里云将基于退订规则退还资源并退还相应的款项，您可以通过退订管理对轻量应用服务器进行退订操作。本文为您介绍轻量应用服务器的退款说明及退订流程。注意事项 在退款时只退还您的实付金额，不包含...
数据质量管理流程
数据质量管理是通过划分数据资产等级和分析元数据的应用链路，对不同资产等级的数据采取相对应的质量管理方式。数据质量管理流程图如下。数据管理流程说明如下：分析业务场景，根据应用的影响程度，确定当前以及生产链路上的数据资产等级。...
概述
您可以将数据库中的表或单条SQL查询结果作为数据集，在仪表盘或大屏中对数据集中的数据以表格、交叉表、折线图、柱条形图、饼图、双轴图等图形或组件展现出来，并对这些图形或组件进行自由组合、布局，以某种分析思路对业务进行直观呈现。...
应用评估改造摘要
1.核心功能 提供迁移数据库的应用改造点，包括改造具体位置（调用栈），改造SQL的内容；梳理应用的框架，性能等使用信息；大规模集群迁移的架构梳理，提供架构迁移指南；2.使用流程 应用采集 应用画像 应用评估 应用静态改造 说明 应用动态...
数据库调用
本文说明如何查看数据库调用，从而了解应用的数据库调用情况，包括概况、SQL调用、异常、调用来源、调用链列表等信息。前提条件 接入应用监控 功能入口 登录 ARMS控制台，在左侧导航栏选择 应用监控>应用列表。在 应用列表 页面顶部选择...
MSHA应用双活架构接入Helloworld
北京单元的数据库显示如下图：数据保护规则如下图：测试步骤 北京单元的应用执行数据库读操作（即查询商品详情）、写操作（即下单），应该访问到北京数据库。杭州单元的应用执行数据库读操作（即查询商品详情）、写操作（即下单），应该...
快速体验
说明 本次实验数据仅作为阿里云大数据开发治理平台DataWorks数据应用实操使用，所有数据均为人工Mock数据。技术选型 数据建模：大数据开发治理平台 DataWorks数据建模（可选），标准版及以上版本可使用，需要单独购买。原始数据存储：云...
Pod监控
本文说明如何查看Pod监控，从而了解应用的Pod情况，包括CPU、物理内存、网络流量、网络数据包等信息。应用限制 EDAS标准版不支持Pod监控，专业版和铂金版支持Pod监控。功能入口 登录 EDAS控制台。在左侧导航栏，单击 应用管理>应用列表，在...
常见问题概述
本章节汇总了使用ARMS应用监控时的常见问题。手动安装Agent相关 如何排查手动安装探针失败的问题？如何排查ARMS探针日志错误？如何支持单机多实例？ACK应用安装Agent相关 如何安装ack-...使用OpenFeign组件的应用在ARMS中数据不完整怎么办？
数据建模：智能数据建模
智能数据建模是阿里云DataWorks自主研发的智能数据建模产品，沉淀了阿里巴巴十多年来数仓建模方法论的最佳实践，包含数仓规划、数据标准、维度建模及数据指标四大模块，帮助企业在搭建数据中台、数据集市建设过程中提升建模及逆向建模的...
集群版-单副本
集群版-单副本采用代理（proxy）集群模式，数据分...对Redis协议不敏感的应用 集群版的架构引入了多个组件，在对Redis协议的支持上相比标准版有一定限制。详情请参见 集群架构实例的命令限制。创建实例 控制台：创建实例 API：CreateInstance
创建应用
本文介绍如何创建数字孪生应用。操作步骤 登录 DataV-TwinFabric控制台。在 孪生搭建 页签下，单击 创建应用。在创建应用窗口中输入 应用名称，选择 应用类型 后，单击 确定。返回应用列表，即可查看创建成功的孪生应用。如何选择应用类型...
应用评估
迁移分组评估结果 迁移分组是迁移数据库包含的应用的最小子集，迁移单个应用分组不会对其他分组的数据库节点产生数据依赖。迁移分组包括 应用节点 以及 数据库节点。单击应用节点可以查看单个应用节点的评估改造内容。单应用评估主要分为...
典型使用场景
实时计算-HBase增强版（Lindorm）+Blink/Spark 基于数据的应用，如算法、智能运营、监控大屏等系统。通常需要实时获取业务系统产生的数据，基于数据更新进行实时计算。HBase具有高吞吐，低延迟，schemaFree，水平扩展等能力，被很多大数据...
基本概念
本文将为您介绍数据服务的Dataphin数据源服务、API服务、分组、服务单元和应用等基本概念。基本概念 说明 Dataphin数据源 配置数据表生成Dataphin数据源。服务单元 对数据表进行统一的元数据配置。应用 消费数据服务（调用API或Dataphin...
通过Prometheus监控获取ARMS应用监控数据
阿里云 可观测监控 Prometheus 版 默认集成了ARMS应用监控数据源，您可以直接在 可观测监控 Prometheus 版 下获取应用监控相关数据、查看应用监控预置大盘，并根据需求进行二次开发。前提条件 已为应用安装探针，具体操作，请参见 应用监控...
减灾与应急时空解决方案与案例
方案背景 华宁环球（北京）减灾与应急科技有限公司专注于自然灾害风险、灾害应急预警领域全栈数据、模型及平台研发，面向保险等行业及各级政府提供技术服务，数据及模型研发及成果应用处于行业领先水平。公司主营OpenRIS灾害风险大数据平台...
Spark概述
使用场景 离线ETL 离线ETL主要应用于数据仓库，对大规模的数据进行抽取（Extract）、转换（Transform）和加载（Load），其特点是数据量大，耗时较长，通常设置为定时任务执行。在线数据分析（OLAP）在线数据分析主要应用于BI（Business ...
产品简介
服务内容 服务大类 服务类型 服务内容 大数据专家咨询服务 大数据技术架构方案咨询 为客户提供构建和优化大数据体系的技术架构方案咨询服务，覆盖离线/实时数仓体系建设管理、数仓建模管理，数据开发管理，数据安全管理、数据质量管理、...
管理配置
SAE应用不支持MSE的服务治理功能。SAE默认支持的ACM进入下线状态，但不影响您现有的使用。建议您直接使用MSE提供的Nacos 2.0配置服务。更多信息，请参见 Nacos版本特性。创建配置 登录 SAE控制台。在左侧导航栏，选择 应用管理>分布式配置...
受众与核心能力
产品受众 从事数据开发、算法开发等岗位的技术人员 从事销售运营、商业智能分析等岗位的业务人员 从事数据安全与合规工作的管理人员 从事数据应用开发的开发人员 把控公司核心数据资产的管理人员 核心能力 基于DataWorks，您可以获得如下...
应用部署失败
这种错误有多种可能，分别如下：资源超过限额：目前平台限制最多部署2个应用实例，单个应用最多不能超过4C16G。应用节点之间是否连线：在编排界面，节点之间必须要连线才能保证节点的先后部署关系，否则可能会导致部署失败。数据库连接失败...
创建配置
数据加密 数据加密包含两种密钥管理服务（KMS）加密方式。KMS加密：直接调用KMS服务对配置进行加解密，加解密数据的大小不超过6 KB，对特殊符号如and（&）会解密错误，不推荐使用。KMS AES-128加密：使用KMS的信封加解密方法，配置内容可以...
如何使用DataV Proxy
DataV Proxy应用是一个可视化的DataV Proxy（DataV数据代理服务）配置工具，您可以通过DataV Proxy应用访问本地或内网等不对外开放且无外网访问地址的数据库，保证数据的安全性。本文档为您介绍DataV Proxy应用的启动方法和相关功能，帮助...
数据清理
背景信息 ODC 支持在源数据库中的数据归档到目标数据库后，删除源数据库中的数据，以提高数据库查询性能，降低在线存储成本。本文档旨在介绍如何通过提交数据清理工单实现归档数据。原理介绍 前提条件 清理的表中必须包含主键。注意事项 ...
创建自定义镜像
通过创建自定义镜像，您可以保存一台轻量应用服务器的数据。创建完成的自定义镜像可用于共享到云服务器ECS或者创建相同配置的轻量应用服务器。前提条件 您已创建了一份轻量应用服务器的系统盘快照。具体操作，请参见 管理快照。说明 如果您...
- 产品推荐
- 这些文档可能帮助您