数据质量管理流程
数据管理流程说明如下：分析业务场景，根据应用的影响程度，确定当前以及生产链路上的数据资产等级。详情请参见 数据资产等级定义。在各个加工环节上根据不同资产等级对数据采取不同的质量管理方式。详情请参见 数据加工过程卡点校验。对...
数据质量管理流程
数据质量管理的流程图如下。数据质量管理的流程说明如下：分析业务场景，对数据流转链路上的整个依赖关系，进行资产定级。详情请参见 数据资产定级。在业务系统的数据生成过程中进行卡点校验。详情请参见 离线数据加工卡点校验。对数据风险...
数据质量管理流程
数据质量管理的流程图如下。数据质量管理的流程说明如下：分析业务场景，对数据流转链路上的整个依赖关系，进行资产定级。详情请参见 数据资产定级。在业务系统的数据生成过程中进行卡点校验。详情请参见 离线数据加工卡点。对数据风险点...
创建和管理业务流程
关于如何关联子流程，请参见 使用业务流程图设计器。在 新建业务流程 面板，完成以下参数配置后，单击 创建。配置项 说明 业务流程名称 自定义业务流程的名称。名称长度不得超过100个字符。编码 字符、数字的组合，需以大写字母开头。编码...
实时数据API
实时数据业务流程。在实时数据业务场景中，最常见的链路是将实时采集的数据，通过实时计算初步清洗，实时写入数据至数据库，再对接BI工具实现数据的可视化分析。数据处理流程如下图所示。实时数据业务痛点。处理实时数据业务的整个链路中，...
基于MaxCompute进行大数据BI分析
方案介绍 基于MaxCompute进行大数据BI分析的流程如下：通过数据集成同步业务数据和日志数据至MaxCompute。通过MaxCompute、DataWorks对数据进行ETL处理。同步处理后的结果数据至AnalyticDB MySQL。通过Quick BI可视化建立用户画像。方案...
通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。...数据展现与分享：数据提取成功后，可以通过报表、地理信息系统等多种展现方式，展示与分享大数据分析、处理后的成果。
快速入门
产品使用 Elasticsearch Elasticsearch作为实时分布式搜索和分析引擎，可以快速地、近乎于准实时地存储、查询和分析超大数据集，可以快速构建日志分析、异常监控、企业搜索和大数据分析等各业务应用。Elasticsearch快速入门 Logstash ...
阿里云智能质检
基本业务流程 图1所示为智能对话分析服务的基本业务流程。首先，语音数据和文本数据共同构成待检数据，结合业务人员输入的质检规则，智能对话分析服务会产生出匹配结果并通知质检结果处理人，支持处理人进行在线人工校验并保存复核结果，...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
数据服务入门
步骤三：新建业务流程 数据服务基于业务流程实现以业务为单元的数据服务API开发，并通过业务流程对API及创建API所使用的函数等文件进行组织管理。因此，在数据服务创建API前，需先新建业务流程。步骤四：生成API 业务流程创建完成后，您可...
基本概念
每个项目都是一个数据分析地图，拥有独立的数据源和分析图层。数据源 用户可以在项目中添加数据表，这些数据表可以从已经连接的数据库中选择添加。表类型 项目中支持多种表格类型，每种表格的显示图标都不相同，包括但不限于矢量、栅格、...
大数据AI公共数据集分析
本教程通过DataWorks，联合云原生大数据计算服务MaxCompute，使用大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等公共数据），指导您如何快速进行大数据分析，快速熟悉DataWorks的操作界面与最基础的数据分析能力。DataWorks的更...
新建数据元
数据元管理通过分析业务流程，抽象关键业务对象和业务对象属性，并把关键业务对象新建为数据元，并配置数据元的类型、长度、质量校验函数和引用数据字典，为模型标准化设计及数据治理过程中的质量监控提供规则依据。本文介绍如何新建数据元...
新建数据元
数据元管理通过分析业务流程，抽象关键业务对象和业务对象属性，并把关键业务对象新建为数据元，并配置数据元的类型、长度、质量校验函数和引用数据字典，为模型标准化设计及数据治理过程中的质量监控提供规则依据。本文介绍如何新建数据元...
快速体验
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
数据开发功能索引
本文为您介绍DataWorks数据开发（DataStudio）界面的整体布局，以及进行开发操作的主界面（业务流程和节点）中各组件、按钮的功能作用，方便您快速了解及使用数据开发模块。进入数据开发 登录 DataWorks控制台，单击左侧导航栏的 数据建模...
流程简介
数据探索的业务流程如下图所示。数据探索的流程说明如下表所示。流程 说明 首页 提供新手引导及用户登录、模型情况的运行看板。接入数据 配置模型编排中使用到的数据表、本地数据及API。接入算子 配置模型编排中使用到的算子。系统支持的...
数据分析概述
数据分析是数据辅助决策的最后一公里，是最终的数据可视化展示与探索分析的部分，选择使用最适合的数据展示方式，可以帮助分析人员大大提升分析效率。...数据分析流程图 仪表板制作 仪表板管理 监控指标 电子表格 数据门户
Napatech案例
云原生多模数据库 Lindorm 助力Napatech大幅提升存储、索引性能。生态合作伙伴介绍 Napatech公司（OSE：NAPA.OL）是一家提供FPGA解决方案的丹麦公司，成立于2003年。公司总部位于丹麦，销售和支持的...集成第三方大数据系统，助力业务分析。
互联网、电商行业离线大数据分析
方案介绍 实现互联网、电商行业离线大数据分析的流程如下：同步用户订单等数据至MaxCompute。通过DataWorks对原始数据进行处理，并形成开放API。以API的形式通过DataV在大屏上展示结果数据。方案优势 大规模存储：超大规模存储且自动扩容，...
使用场景
业务流程自动化 结合DMS任务编排的调度和依赖管理功能，可以实现业务流程的自动化处理，提高工作效率和数据处理的准确性。数据治理与数据管控 DMS任务编排提供了数据源的配置和管理功能，支持对数据源进行统一管理和控制，保证数据的安全性...
RPA机器人方案咨询及实施指导服务内容说明
2.2 方案咨询及实施指导服务范围 明确项目背景，了解客户需求，探讨业务流程范围，共同梳理业务流程图。对于不可行流程，说明不可行原因，并与客户达成一致意见。确定交付内容及交付周期，制定项目交付计划。指导客户通过可视化配置方式...
数据开发概述
您可通过目录树创建所需对象，或使用业务流程可视化面板拖拽组件，快速构建数据加工流，并支持通过解决方案对业务流程进行进一步的管理。对象管理：支持使用可视化方式创建及管理节点、表、资源及函数。更多详情请参见 创建业务流程、任务...
基本概念
本文为您介绍DataWorks中，工作空间、业务流程、解决方案、组件、任务、实例、业务日期、定时时间、提交、脚本开发、资源、函数和输出名称等基本概念。工作空间 工作空间 是DataWorks管理任务、成员，分配角色和权限的基本单元。工作空间...
服务支持
自定义域名常见问题 DataV-TwinFabric 孪生仿真 配置了RAM账号后，为什么搜不到 DataV-Atlas 可视分析地图 数据源问题 DataV-Card可视分析创作间 数据集常见问题 数据集数据源问题 分区值格式说明 如何在钉钉中配置长图作品的订阅推送 ...
排查内存使用率高的问题
大Key分析示例 根据业务需求，设置合理的数据逐出策略（即调整 maxmemory-policy 参数的值）。具体操作，请参见 设置实例参数。说明 Tair 默认的数据逐出策略为 volatile-lru，更多信息，请参见 参数支持。根据业务需求，设置合理的过期Key...
使用ETL分析实时订单
维表：更新不频繁（非实时更新）的表，一般用于结合实时数据拼装成宽表进行数据分析。转换格式 ETL在处理数据时会将流转换为动态表，在该动态表上进行持续查询（即动态表会被INSERT、UPDATE、DELETE操作持续更改），产生一个新的动态表。...
项目分配与安全
在为企业级大数据平台创建项目时，建议您对ODS层、DWD及DWS层的数据按照业务板块的粒度建立项目，对于ADS层的数据，按照应用的粒度建立项目。项目分配 在本教程中，建议参考下图建立您的MaxCompute项目，图中的每一个方块代表一个项目。...
项目分配与安全
在为企业级大数据平台创建项目时，建议您对ODS层、DWD及DWS层的数据按照业务板块的粒度建立项目，对于ADS层的数据，按照应用的粒度建立项目。项目分配 在本教程中，建议参考下图建立您的MaxCompute项目，图中的每一个方块代表一个项目。...
漏斗图
漏斗图可以分析具有规范性、周期长和环节多的业务流程。通过漏斗图比较各环节业务数据，能够直观地发现问题。漏斗图还可以展示各步骤的转化率，适用于业务流程多的流程分析，例如通过漏斗图可以清楚地展示用户从进入网站到实现购买的最终...
查看周期实例
业务流程运维操作 您可以对业务流程进行如下操作：DAG图：用于查看该业务流程DAG图。业务流程视角下，将默认对该业务流程下的小时分钟任务进行成组展示，业务流程视角下单个实例的操作与周期实例视角的操作一致。详情请参见 周期实例DAG。...
概述
本文介绍DMS数据分析的基本概念、设计理念和主要应用场景。背景信息 DMS数据分析提供典型的数据集、仪表盘和大屏模型，在仪表盘或大屏中提供丰富的可视化图表和组件来展示数据。您可以将数据库中的表或单条SQL查询结果作为数据集，在仪表盘...
确定需求
例如，用户可能分为数据分析、运营、维护部门，各个部门对数仓的需求不同，您需要对不同部门分别进行调研。用户的整体业务架构，各个业务模块之间的联系与信息流动的流程。梳理出整体的业务数据框架。各个已有的业务系统的主要功能及获取的...
DataWorks模块使用说明
使用流程概览：参考文档：数据质量概述 数据分析 子模块：数据分析 功能说明：DataWorks数据分析可帮助您在线洞察分析、编辑和分享数据。包括SQL查询、电子表格等功能。使用流程概览：参考文档：数据分析概述 数据治理 子模块：数据地图 ...
IoT数据自动化同步至云端解决方案
大数据分析是大数据完成数据价值化的重要手段之一，而进行大数据分析的第一步是让数据成功上云。解决方案 IoT数据自动化同步至云端解决方案主要包括存储原始数据和同步数据至分析系统两部分。IoT设备大量的数据通常以半结构化的形式存储。...
场景：节点成环
节点成环产生原因与解决方案 当某节点为上游节点但又同时依赖了自己的下游节点，导致依赖关系成环，您需要分析业务流程，及时去除成环依赖。例如，当下游节点依赖某上游节点上一周期产出的表数据，并且将加工结果写回该表时，若下游节点...
什么是Quick BI
帮助企业构建自上而下的决策分析体系 实现业务流程和数据分析直接协同 提升企业内各种人员的数据分析效率 形成数据消费和价值洞察的企业文化 Quick BI有什么产品优势？企业数据分析全场景覆盖 从管理层决策分析和驾驶舱，到业务专题分析...
数据开发与运行
如果您希望查看业务节点提交状态，可以选择 数据开发>业务流程，展开对应的业务流程列表，即可查看当前业务流程下所有节点状态。如果节点名称左侧存在 图标，表示该节点已提交；如果节点名称左侧不存在 图标，表示该节点未提交。当业务流程...
聚合支付方案
阿里云从业务扩展性、数据流动性、服务高可用三方面入手，通过多款云数据库产品为利楚扫呗制定聚合支付方案，解决利楚扫呗在业务扩展期遇到的数据存储空间不足、读写性能下降以及大数据分析空缺等问题。业务痛点 武汉利楚商务服务有限公司...
- 产品推荐
- 这些文档可能帮助您