创建元数据

列字段配置 新建列字段 字段名称:配置为业务数据中实际的字段名称,且后续需要基于该字段创建服务单元。支持多层嵌套,使用点(.)分隔。字段类型:根据业务数据的字段类型选择对应的字段类型。支持选择的字段类型包括Double、Float、...

混合存储型(已停售)

实例性能 混合存储型实例的性能与实例规格以及业务中数据被访问的概率有很大的关系:实例规格越高,内存数据的访问比重越高,性能就越强。理想的场景中,所有的访问都命中内存,此时实例性能与Redis社区版实例基本一致;反之,在内存命中率...

规范定义最佳实践

创建业务过程,即从顶层视角,规范业务中的事务内容的类型及唯一性。例如电商订单是一个业务过程,业务过程由下单、支付、发货和确认收货等不可拆分的事件组成,每个事件就是一个业务过程。统计周期 统计的时间范围,也可以称为时间周期。...

规范定义最佳实践

创建业务过程,即从顶层视角,规范业务中的事务内容的类型及唯一性。例如电商订单是一个业务过程,业务过程由下单、支付、发货和确认收货等不可拆分的事件组成,每个事件就是一个业务过程。统计周期 统计的时间范围,也可以称为时间周期。...

资产安全概述

应用场景 基于Dataphin实现数据安全保护的一些典型的场景:场景1:业务数据中敏感数据保护 您可以使用资产安全的敏感数据识别和保护功能,脱敏明文敏感数据,保证业务数据安全。例如,姓名张三脱敏后*三。场景2:开发环境数仓建设 敏感数据...

资产安全概述

应用场景 基于Dataphin实现数据安全保护的一些典型的场景:场景1:业务数据中敏感数据保护 您可以使用资产安全的敏感数据识别和保护功能,脱敏明文敏感数据,保证业务数据安全。例如,姓名张三脱敏后*三。场景2:开发环境数仓建设 敏感数据...

新零售:特步

解决方案 通过 PolarDB-X+RDS的分布式数据库解决方案支撑O2O全渠道业务中台系统上线,通过垂直拆分剥离各业务中心,使不同类型的业务数据可以存储在不同的RDS上,确保资源和访问隔离,从物理上使整个数据库架构具备了扩展性。通过这套架构...

规格及选型

案例七:大型互联网企业 用户为大型互联网企业,各业务线具有各自独立的业务中台,企业存在统一的数据中台,希望可以快速部署独立资源支持不同的业务负载,且未来不会产生数据孤岛。建议:使用 AnalyticDB PostgreSQL版 Serverless版本,...

概述

维度建模 DataWorks的数据建模理念遵循维度建模思想,使用DataWorks的维度建模功能进行数据仓库建模设计时:维度表 结合业务的数据域的规划,提取出各业务数据进行数据分析时可能存在的维度,并将维度及其属性通过维度表的方式存储下来...

维度建模概述

维度表 结合业务的数据域的规划,提取出各业务数据进行数据分析时可能存在的维度,并将维度及其属性通过维度表的方式存储下来。例如,在进行电商业务数据分析时,可用的维度及其属性有:订单维度(属性包括订单ID、订单创建时间、买家...

创建单物理表服务单元

单物理表服务单元用于对业务数据源的单个物理表进行元数据配置。后续您可以基于该单物理表服务单元开发访问该物理表数据的API。本文为您介绍如何创建单物理表服务单元。前提条件 已完成服务单元分组的创建。具体操作,请参见 创建服务项目...

赛盒广告精细化管理方案

解决方案 针对以上问题,阿里云通过 分析型数据库MySQL(AnalyticDB MySQL)和Quick BI制定了解决方案。方案采用 AnalyticDB MySQL 存放业务数据,AnalyticDB MySQL 的配置为集群版16个C8节点,可支撑上万TPS(Transactions-per-second)...

背景信息以及准备工作

LOG+OSS+DLA+DataV 将业务应用程序产出的业务日志采集到日志服务,通过定时日志投递(最小5分钟延迟)到OSS,再通过定时查询,刷新到业务数据大屏。上述方案有以下优势:日志服务(Log Service,简称LOG/原SLS)是针对实时数据一站式...

产品简介

主要包括:大数据技术架构方案咨询、大数据解决方案POC、大数据搬站迁云方案咨询、跨地域迁移支持服务、大数据专家高阶培训、专家运维保障综合服务、AI算法建模咨询、AI算法方案POC、AI标注人力服务等。阿里云大数据专家服务在金融、电商、...

数据引入层(ODS)

业务数据系统的数据通常为非常细节的数据,经过长时间累积,且访问频率很高,是面向应用的数据。说明 在构建MaxCompute数据仓库的表之前,您需要首先了解MaxCompute支持的 数据类型版本说明。数据引入层表设计 本教程,在ODS层主要包括...

数据引入层(ODS)

业务数据系统的数据通常为非常细节的数据,经过长时间累积,且访问频率很高,是面向应用的数据。说明 在构建MaxCompute数据仓库的表之前,您需要首先了解MaxCompute支持的 数据类型版本说明。数据引入层表设计 本教程,在ODS层主要包括...

案例介绍

业务中台系统覆盖整个零售体系的会员(人)与商品/库存(货),并且集中处理订单与营销内容。电商系统与门店系统分别对应线上零售与线下零售。ERP系统主要是用于供应链管理。规划数仓 规划业务板块。某公司实行的是事业部制,各事业部之间...

版本发布记录

计费项 数据字典 支持控制配置数据字典,当业务中有常量数据或者业务数据可以划分为业务事实表和业务维度表,通过数据字典来替代维度表,直接查询字典获得维度数据,增加查询效率。数据字典 资源队列 解决开源版中单个大查询消耗资源过多...

数据中台建设架构咨询服务内容说明

2.服务范围 通过阿里云数据中台产品和建设实施方法论,建设【XXX】集团数据中台数据资产目录,基于资产盘点设计数据中台技术规范及总体架构,指导客户构建数据中台建设框架,并按需完成数据中台详细设计。数据中台建设咨询内容包括【业务...

创建HDFS数据

如果您使用的是HDFS,在引入HDFS的业务数据至Dataphin或将Dataphin数据导出至HDFS的场景,您需要先完成HDFS数据源的创建。更多HDFS信息,请参见 HDFS官方介绍。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理...

高压缩引擎(X-Engine)介绍

解决方案:PolarDB 高压缩引擎(X-Engine)为应对如上历史数据归档存储方面的挑战和诉求,PolarDB 基于如下技术创新和突破,推出了 高压缩引擎(X-Engine)产品系列:阿里巴巴自研的基于LSM-tree架构的存储引擎X-Engine提供了强大的数据...

数据治理

敏感数据保护 对于业务中数据保护的需求,您可以将数据进行动态或静态脱敏,在当前实验中,会将表(retail_e_commerce_2.dim_ec_mbr_user_info)中的手机号码、IP地址等敏感字段进行动态脱敏处理。具体操作请参见下文指导,更多数据保护...

客户案例

基于飞天大数据平台产品DataWorks+MaxCompute大大提高了数据业务的开发效率,构建大润发的数据中台体系。新金融行业:某互联网金融公司湖仓一体案例 客户架构如下。客户简介 公司的第一代数据湖是基于Hadoop+OSS搭建的,同时引入的数据中台...

数仓规划概述

数据域 数据域是一个较高层次的数据归类标准,是对企业业务过程进行抽象、提炼、组合的集合,是企业业务人员在使用数据时第一个分组入口,可以帮助企业业务人员快速的从海量的数据快速圈定到自己的业务数据。详情请参见 数据域。业务过程...

分析业务过程

用户在业务系统,通过埋点或日常积累的方式,获取了充足的业务数据。为梳理数据之间的逻辑关系和流向,需要理解用户的业务过程及数据系统。您可以采用过程分析法,列出整个业务过程涉及的每个环节,包括技术、数据、系统环境等。分析完...

伯俊软件

上海伯俊软件科技有限公司 公司介绍 伯俊软件是国内老牌数字化服务商,创立20余年,已为3000多家大中型企业提供数字化管理产品、解决方案、“业务+数据中台、培训及专业的技术服务,客户覆盖零售、制造、金融、互联网及政府机构等领域。...

分析业务过程

用户的业务系统,通过埋点或日常积累,通常已经获取了充足的业务数据。为理清数据之间的逻辑关系和流向,首先需要理解用户的业务过程,了解过程涉及到的数据系统。您可以采用过程分析法,将整个业务过程涉及的每个环节一一列清楚,包括...

分析业务过程

用户的业务系统,通过埋点或日常积累,通常已经获取了充足的业务数据。为理清数据之间的逻辑关系和流向,首先需要理解用户的业务过程,了解过程涉及到的数据系统。您可以采用过程分析法,将整个业务过程涉及的每个环节一一列清楚,包括...

典型使用场景

典型的数据源包括:MySQL/SQL Server/PostgreSQL/Oracle等OLTP业务数据库,业务App产生的日志数据,在OSS/Hadoop上的归档数据,以及来自Kafka/Flink等系统的流式数据。在库对ODS层数据进行加工,形成CDM(Common Data Model)和ADS...

应用场景

场景二:Redis作为存储数据库使用 游戏部署架构相对简单,主程序部署在ECS上,所有业务数据存储在Redis,作为持久化数据库。云数据库Redis版 支持持久化功能,主备双机冗余数据存储。Redis的服务可靠性至关重要,一旦Redis服务不可用,将...

应用场景

您可以将模式固定的结构化数据存储在 RDS(Relational Database Service),模式灵活的业务存储在MongoDB,高热数据存储在 云数据库Redis 或 云数据库Memcache ,实现对业务数据高效存取,降低存储数据的投入成本。移动应用 云数据库...

什么是DataV-Card可视分析创作间

本文为您介绍可视分析创作间的产品...产品优势 业务数据自动洞察,探索数据商机。可视化数据趋势、特征、统计分析,精准把控业务进度。轻松调整可视化风格,适配多种汇报场景,讲述数据故事。灵活渠道分享,增强数据价值讨论,方便协同办公。

受众与核心能力

本文为您介绍DataWorks的产品定位、产品受众和产品的核心能力。产品定位 DataWorks致力于为数据开发者、数据分析师、数据资产管理者,打造一个具备...让数据从采集到展现、从分析到驱动应用得以一站式解决,真正实现数据业务化、业务数据化。

应用场景

实时通道 通过数据总线,业务数据能够实时汇入大数据系统,缩短数据分析周期。2.实时数据清洗和分析 2.1 接入多种异构数据,实时清洗并归一化 通过数据总线和实时计算,您可以把多种数据源的异构数据实时清洗成统一的结构化数据,为进一步...

概述

对接实时计算,用于业务数据驱动的智能运营、IoT、监控大屏等数据应用。数据同步,比如更新cache,同步到搜索引擎、数仓、冷存储等。LindormStreams支持实时获取HBase表的数据变更,您可以基于LindormStreams的这个功能构建自己的数据应用...

确定需求

举例:数据分析师需要了解A公司电商业务中厨具类目的成交金额。当获知这个需求后,您需要分析:根据什么(维度)汇总、汇总什么(度量)以及汇总的范围多大(粒度)。例如,类目是维度,金额是度量,范围是全表。此外,还需要思考明细数据...

确定需求

举例:数据分析师需要了解A公司电商业务中厨具类目的成交金额。当获知这个需求后,您需要分析:根据什么(维度)汇总、汇总什么(度量)以及汇总的范围多大(粒度)。例如,类目是维度,金额是度量,范围是全表。此外,还需要思考明细数据...

自动SQL限流

说明 自动SQL限流的解决方案应运而生,该服务已经在阿里巴巴集团内部运行了2年多,并且在2020年2月在阿里云上发布,您可以在数据库自治服务DAS进行体验和使用。解读 整体流程:监控指标采集:在阿里云申请的RDS实例默认开启主机和引擎的...

使用场景

本文为您介绍任务编排的应用场景。包含但不限于如下场景:数据迁移与同步 使用DMS任务编排配置和管理数据...数据归档与清理 将业务数据周期性地归档至低价存储并进行分析。任务调度 对定时、定期或事件触发的任务进行调度,保证任务按时执行。

构建数据仓库

方案优势:阿里巴巴大数据最佳实践,高性能、低成本、Serverless服务,免运维、全托管模式,让企业的大数据研发人员更聚焦在业务数据的开发、生产、治理。产品组合:MaxCompute+Flink+DataWorks。场景说明 用户数据来源丰富,包括来自云端...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据库备份 DBS 云数据库 Redis 版 云服务器 ECS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用