背景信息以及准备工作

LOG+OSS+DLA+DataV 将业务应用程序产出的业务日志采集到日志服务,通过定时日志投递(最小5分钟延迟)到OSS,再通过定时查询,刷新到业务数据大屏。上述方案有以下优势:日志服务(Log Service,简称LOG/原SLS)是针对实时数据一站式...

创建元数据

列字段配置 新建列字段 字段名称:配置为业务数据中实际的字段名称,且后续需要基于该字段创建服务单元。支持多层嵌套,使用点(.)分隔。字段类型:根据业务数据的字段类型选择对应的字段类型。支持选择的字段类型包括Double、Float、...

创建元数据

列字段配置 新建列字段 字段名称:配置为业务数据中实际的字段名称,且后续需要基于该字段创建服务单元。支持多层嵌套,使用点(.)分隔。字段类型:根据业务数据的字段类型选择对应的字段类型。支持选择的字段类型包括Double、Float、...

什么是云数据库Redis版

数据持久化不依赖传统磁盘,保证每个操作持久化的同时提供近乎Redis社区版的吞吐和延时,极提升业务数据可靠性。云盘(ESSD)型:基于云盘ESSD研发,兼容Redis核心数据结构与接口,可提供容量、低成本、强持久化的数据库服务,适用于...

什么是云原生数据湖分析

云原生数据湖分析(简称DLA)是新一代大数据解决方案,采取计算与存储完全分离的架构,支持数据库(RDS\PolarDB\NoSQL)与消息实时归档建仓,提供弹性的Spark与Presto,满足在线交互式查询、流处理、批处理、机器学习等诉求,也是传统...

数据治理

敏感数据保护 对于业务中数据保护的需求,您可以将数据进行动态或静态脱敏,在当前实验中,会将表(retail_e_commerce_2.dim_ec_mbr_user_info)中的手机号码、IP地址等敏感字段进行动态脱敏处理。具体操作请参见下文指导,更多数据保护...

伯俊软件

所属行业:互联网、软件 网站地址:上海伯俊软件科技有限公司 公司介绍 伯俊软件是国内老牌数字化服务商,创立20余年,已为3000多家中型企业提供数字化管理产品、解决方案、“业务+数据中台、培训及专业的技术服务,客户覆盖零售、制造...

赛盒广告精细化管理方案

方案中采用 AnalyticDB MySQL 存放业务数据,AnalyticDB MySQL 的配置为集群版16个C8节点,可支撑上万TPS(Transactions-per-second),TB级数据复杂查询秒级响应,同时支持弹性扩展节点数和存储空间。客户价值 基于 AnalyticDB MySQL 和...

应用场景

实时通道 通过数据总线,业务数据能够实时汇入数据系统,缩短数据分析周期。2.实时数据清洗和分析 2.1 接入多种异构数据,实时清洗并归一化 通过数据总线和实时计算,您可以把多种数据源的异构数据实时清洗成统一的结构化数据,为进一步...

应用场景

数据分析业务数据库 Memcache 版搭配大数据计算服务 MaxCompute。实现对大数据的分布式分析处理,适用于商业分析、挖掘等大数据处理场景。通过数据集成服务可自助实现数据在云数据库 Memcache 版与 MaxCompute 间的同步,简化数据操作...

混合存储型(已停售)

业务中的数据访问完全随机。冷热数据的性能和延迟要求 热数据访问场景对性能要求很高。冷数据访问场景对延迟的敏感度不高。业务对性能的要求极高。业务对延迟的敏感度高。Key的访问规律 业务中没有Key。业务中有Key,且Key的访问率...

新零售:上海百胜软件股份有限公司

是国内知名的全渠道新零售解决方案服务商,为鞋服、运动、家居、日化、美妆、珠宝、食品等品牌企业提供管理咨询和信息化解决方案业务涵盖全渠道中台、零售分销、供应链、电子商务、移动应用、大数据等领域。目前,百胜软件与旗下22家分子...

数仓规划概述

数据域 数据域是一个较高层次的数据归类标准,是对企业业务过程进行抽象、提炼、组合的集合,是企业业务人员在使用数据时第一个分组入口,可以帮助企业业务人员快速的从海量的数据快速圈定到自己的业务数据。详情请参见 数据域。业务过程...

分析业务过程

用户在业务系统,通过埋点或日常积累的方式,获取了充足的业务数据。为梳理数据之间的逻辑关系和流向,需要理解用户的业务过程及数据系统。您可以采用过程分析法,列出整个业务过程涉及的每个环节,包括技术、数据、系统环境等。分析完...

分析业务过程

用户的业务系统,通过埋点或日常积累,通常已经获取了充足的业务数据。为理清数据之间的逻辑关系和流向,首先需要理解用户的业务过程,了解过程涉及到的数据系统。您可以采用过程分析法,将整个业务过程涉及的每个环节一一列清楚,包括...

分析业务过程

用户的业务系统,通过埋点或日常积累,通常已经获取了充足的业务数据。为理清数据之间的逻辑关系和流向,首先需要理解用户的业务过程,了解过程涉及到的数据系统。您可以采用过程分析法,将整个业务过程涉及的每个环节一一列清楚,包括...

划分数据

例如A公司电商营销业务板块可以划分为如下数据域,数据每一部分都是实际业务过程经过归纳抽象之后得出的。数据业务过程 会员店铺域 注册、登录、装修、开店、关店 商品域 发布、上架、下架、重发 日志域 曝光、浏览、单击 交易域 下...

划分数据

例如A公司电商营销业务板块可以划分为如下数据域,数据每一部分都是实际业务过程经过归纳抽象之后得出的。数据业务过程 会员店铺域 注册、登录、装修、开店、关店 商品域 发布、上架、下架、重发 日志域 曝光、浏览、点击 交易域 下...

DML无锁变更概览

背景信息 当业务累积了大量数据时,需要定期清除表数据,或对在线数据和历史数据进行分隔管理。您可能会遇到以下问题:单条SQL影响行数过多,日志超过阈值导致任务执行失败。SQL没有使用索引导致锁表,数据库负载增加,甚至造成业务...

功能简介

通过统一的数据资产目录,沉淀数据供给方生产的各类型数据,帮助数据使用者快速了解和获取业务需要的高质量数据资产,促进数据资产发挥更业务价值。同时,通过查看数据资产全局血缘,清晰的了解数据资产的上下游关联。概览 对数据资产...

功能简介

通过统一的数据资产目录,沉淀数据供给方生产的各类型数据,帮助数据使用者快速了解和获取业务需要的高质量数据资产,促进数据资产发挥更业务价值。同时,通过查看数据资产全局血缘,清晰的了解数据资产的上下游关联。概览 对数据资产...

概述

优势 云原生数据仓库AnalyticDB PostgreSQL版 向量数据库通过自研向量引擎FastANN提供的向量分析能力目前已经在诸多业务中得到了广泛应用,包括阿里巴巴数据中台,阿里巴巴电商新零售业务,阿里云城市大脑,通义千问模型搭建的问答服务等...

通用数据开发

通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图,虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示:数据产生:业务系统每天会产生大量结构化的...

新建补数据计划

在 补数据 对话框,设置补数据名称、业务日期选择、是否并行、备注,选择任务节点。设置完成后,单击 确定。在 补数据计划 页面,可查看新建的计划。在离线计算任务新建补数据计划 登录企业数据智能平台。在页面左上角,单击 图标,...

发现

通过统一的数据资产目录,沉淀数据供给方生产的各类型数据,帮助资产运营管理者进行高价值、可共享的数据资源的注册、编目分类和公开运营,帮助数据使用者快速了解和获取业务需要的高质量数据资产,促进数据资产发挥更业务价值。...

数据质量管理流程

数据质量的管理流程包括业务数据资产定级、加工卡点、风险点监控和及时性监控,您可以构建属于自己的数据质量保障体系。数据质量管理的流程图如下。数据质量管理的流程说明如下:分析业务场景,对数据流转链路上的整个依赖关系,进行资产...

数据质量管理流程

数据质量的管理流程包括业务数据资产定级、加工卡点、风险点监控和及时性监控,您可以构建属于自己的数据质量保障体系。数据质量管理的流程图如下。数据质量管理的流程说明如下:分析业务场景,对数据流转链路上的整个依赖关系,进行资产...

产品简介

适用场景 如果您在大数据业务场景遇到如下问题,可以通过阿里云数据专家获取专属服务:受限于传统数据工作开展方式及组织管理模式,数字化转型遇难到数据各方面瓶颈;根据业务发展,难以从全局构建稳定的、变化的、集成的数据...

新零售:特步

解决方案 通过 PolarDB-X+RDS的分布式数据库解决方案支撑O2O全渠道业务中台系统上线,通过垂直拆分剥离各业务中心,使不同类型的业务数据可以存储在不同的RDS上,确保资源和访问隔离,从物理上使整个数据库架构具备了扩展性。通过这套架构...

数据质量保障原则

一致性 一致性通常体现在跨度很数据仓库。例如,某公司有很多业务数仓分支,对于同一份数据,在不同的数仓分支必须保证一致性。例如,从在线业务库加工到数据仓库,再到各个数据应用节点,用户ID必须保持同一种类型,且长度也要...

上传数据

上传数据操作入口 您可以在数据开发的头部菜单栏、业务流程下的表分组或表管理页面进行上传数据的操作,入口如下所示。在 数据开发 页面的头部菜单栏。在 数据开发 页面业务流程下的表分组。标准模式下,在 表管理 页面,对开发表...

客户案例

基于飞天数据平台产品DataWorks+MaxCompute大大提高了数据业务的开发效率,构建大润发的数据中台体系。新金融行业:某互联网金融公司湖仓一体案例 客户架构如下。客户简介 公司的第一代数据湖是基于Hadoop+OSS搭建的,同时引入的数据中台...

大数据用户画像解决方案

进入互联网,特别是移动互联网时代,用户随时随地都会在...多维度&复杂查询:原生全局二级索引、Lindorm Search满足多维度查询需求 方案详情&专家服务 解决方案详情参见:基于Lindorm的大数据用户画像解决方案 任何问题,欢迎联系 技术支持。

概念建模概述

概念建模是Dataphin提供构建业务模型的工具,您可通过Dataphin的建模能力直接在Dataphin构建业务模型,快速将业务理解落地到中台,实现建模/数仓一体化。同时有利于数据消费者更好理解数据数据对应的业务。本文为您介绍Dataphin数仓规划...

自媒体:易撰

自媒体 网站地址:易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商,其旗下知名品牌易撰,基于新媒体大数据挖掘技术及NLP算法分析,为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构解决方案。...

使用创建反向任务功能

前提条件 已创建存储空间大于业务数据库已使用的灾备数据库,建议灾备数据比业务数据大10%。已在业务数据库和灾备数据库创建用于数据同步的账号。权限要求,请参见 RDS MySQL实例间的同步 或 RDS SQL Server间的同步。重要 灾备数据库的...

基于MaxCompute进行大数据BI分析

方案介绍 基于MaxCompute进行数据BI分析的流程如下:通过数据集成同步业务数据和日志数据至MaxCompute。通过MaxCompute、DataWorks对数据进行ETL处理。同步处理后的结果数据至AnalyticDB for MySQL。通过Quick BI可视化建立用户画像。...

某新能源汽车造车新势力

解决方案 采用 云原生多模数据库 Lindorm 后的数据链路。采用 云原生多模数据库 Lindorm 作为底层存储,得益于其存储计算分离架构,从而具备了优秀的弹性伸缩能力,从容应对业务的快速增长或由于指标采集变更带来的业务峰值变化。使用ZSTD...

概述

由于这些不同的业务数据之间需要交互,为了实现这两个数据库之间双向的数据访问,您可以创建 PolarDB PostgreSQL版(兼容Oracle)(A)到 PolarDB PostgreSQL版(兼容Oracle)(B)的DBLink和 PolarDB PostgreSQL版(兼容Oracle)(B)到 ...

创建达梦(DM)数据

通过创建达梦(DM)数据源能够实现Dataphin读取达梦(DM)的业务数据或向达梦(DM)写入数据。本文为您介绍如何创建达梦(DM)数据源。背景信息 达梦(DM)属于OLTP类型数据库,被集成在业务系统。达梦(DM)数据库吸收借鉴当前先进新...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 云数据库 Redis 版 数据库备份 云服务器 ECS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用