大数据云平台架构-大数据云平台架构文档介绍内容-阿里云

金融大数据

业务架构架构说明：基于阿里云大数据平台强大的计算能力（离线数据处理、交互式OLAP分析能力、实时流处理）以及分布式可视化算法平台PAI，有机集成了批量和实时多模式计算能力，支持实时信用评分和风险预警。实时决策引擎，通过DTBoost...

什么是阿里云Cloudera CDP

Cloudera CDP企业数据云平台 Cloudera企业数据云是社区版CDH的全新商业化升级产品，是阿里云和Cloudera联合打造阿里云上的大数据平台。该平台可以灵活地运行各种企业工作负载（包括实时摄取和分析、批处理、交互式SQL、企业搜索、高级分析...

RAM角色授权

首先进行RAM角色授权：说明使用CDP企业数据云产品之前需要主账号或权限管理员创建如下服务关联角色角色名称：AliyunServiceRoleForCDP 角色权限策略：AliyunServiceRolePolicyForCDP Cloudera企业数据云平台集群实例创建需要访问云服务器...

服务关联角色

本文介绍Cloudera企业数据云平台服务关联角色AliyunServiceRoleForCDP以及如何删除该角色。背景信息 Cloudera企业数据云平台服务关联角色AliyunServiceRoleForCDP是Cloudera企业数据云平台在某些情况下，为了完成自身的某个功能，需要获取...

快速体验

大数据存储与计算：云原生大数据计算服务 MaxCompute（必选）、实时数仓Hologres（可选）、开源大数据平台E-MapReduce（可选），您可根据需要开通MaxCompute、Hologres或E-MapReduce。数据开发与调度：大数据开发治理平台 DataWorks数据...

限制说明

数据大小 云数据库 Memcache 版支持的单条缓存数据的 Key 最大不超过 1 KB，Value 最大不超过 1 MB，过大的数据不适合存储。事务支持 云数据库 Memcache 版不支持事务，有事务性要求的数据不适合写入，而应该直接写入数据库。使用场景当...

典型场景

基于湖构建数据平台，支持BI、挖掘等业务对象存储OSS可以作为湖存储，DLA基于OSS构建一站式的大数据平台。具体包括构建数据湖、数据ETL、交互式查询、机器学习等功能。构建数据湖实时数据湖：支持DB的CDC与消息数据（如Kafka）入湖，构建...

在大数据平台中集成Tair

本文介绍如何在不同大数据分析平台中接入云原生内存数据库Tair。常见大数据分析平台集成 Tair 的方法如下：大数据开发治理平台DataWorks：请参见配置Redis Writer插件。说明 Tair 完全兼容Redis，您可以参考该文档配置 Tair 实例信息，但...

物联网数据处理分析架构参考

本文以一个企业案例介绍如何基于阿里云物联网平台的数据服务，搭建企业物联网大数据应用架构。背景信息随着物联网应用场景的深入，企业开始挖掘设备上传的数据，用于客户端应用扩展和服务营收，用于数字化运营、风控，帮助企业高效治理，...

云数据库RDS的系统架构及RDS实例的访问方式

本文主要介绍云数据库RDS的系统架构及RDS实例的访问方式。RDS系统架构 云数据库RDS提供全数据链路服务，包括DNS、负载均衡、Proxy等。因为RDS使用原生的数据库引擎，故对数据库的操作高度相似。RDS的两种模式如下：RDS高安全模式 RDS标准...

企业版及社区兼容版功能对比

本文将介绍 云数据库ClickHouse 企业版和社区兼容版的产品架构、内核版本的对比。产品架构对比企业版架构 云数据库 ClickHouse 企业版采用云原生存储与计算资源分离架构，且存储资源和计算资源均采用Serverless模式，该模式下可按需弹性...

入门概述

本文介绍云数据库MongoDB实例从创建到连接使用的整体流程，指引您快速掌握创建云数据库MongoDB实例、配置实例信息及连接实例的方法。部署架构 云数据库MongoDB具有可灵活部署的架构，能够满足不同的业务场景。具体如下：单节点架构适用于...

网商银行

解决方案网商银行云架构体系主要分为四层：IAAS（Infrastructure as a Service）层提供低成本的服务器、网络设备、存储等物理设施，通过虚拟化和云计算技术使得基础资源具备成本低廉、安全、可伸缩的特性。PAAS（Platform as a Service）...

受众与核心能力

工作空间管理（公共云）/平台管理（专有云）：从系统层面，为管理者提供对使用DataWorks的用户（成员）权限、DataWorks底层计算引擎配置的管理能力。总之，使用DataWorks，您不仅可以进行海量数据的离线加工分析，还能完成数据的汇聚集成、...

产品架构与功能特性

云游戏平台架构 阿里云游戏架构图如下图所示。阿里云游戏平台主要功能模块包括：管控中心：定位于游戏调度管理和游戏运维监控，通过认证、调度和运维管理，帮助您快捷接入云游戏PaaS服务，保障您的业务发展范围内都能得到优质服务，提高...

什么是云迁移中心

大数据上云与数据中台建设针对于企业用户云下的大数据迁移上云来构建云上数仓和数据中台，云迁移中心提供了辅助用户快速新建大量数据迁移任务的工具，自动化完成云下数据源的探查和模型分析，并且批量配置数据迁移上云的任务，一站式管理...

全场景解决方案

方案优势基于分布式服务化理念进行应用解耦，使用柔性事务确保数据一致性，实现大平台、微应用。主要特色是 7*24 小时随时在线，尤其能适应小额订单频发、促销秒杀等突发性的弹性服务场景要求。金融级高可靠性深度集成 OceanBase 分布式...

云产品集成

常见云产品如下：大数据开发治理平台 DataWorks 实时计算 Flink 版数据库管理 DMS DataV 数据可视化 Quick BI 数据分析与展现前提条件已获取 OceanBase 数据库的基本连接信息，详细步骤请参见获取连接参数。大数据开发治理平台 ...

简介

系统兼容开源GeoMesa、GeoServer等生态，内置了高效的时空索引算法、空间拓扑几何算法、遥感影像处理算法等，结合云数据库HBase强大的分布式存储能力以及Spark分析平台能力，广泛应用于空间、时空、遥感大数据存储、查询、分析与数据挖掘...

产品简介

大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户构建和持续优化的大...

客户案例

互联网行业：快狗打车云上大数据仓库客户架构如下。客户简介快狗打车则一直坚持通过“连接网络化”、“运力共享化”、“过程数据化”、“匹配智能化”等数字信息化解决方案，将闲散运力统一整合到平台上，通过大数据将运力精准匹配市场...

云数据库ClickHouse企业版兼容性指导

企业版架构 云数据库 ClickHouse 企业版极大地简化了运营开销，并降低了大规模运行ClickHouse的成本。您不需要提前部署集群规格、设置高可用性的副本以及手动数据分片，当工作负载增加时扩展服务器或者工作负载降低时缩减服务器，这些都是...

HDFS云原生上云方案

Lindorm文件引擎是面向海量非结构化数据的分布式文件存储服务，具有弹性、低成本的优势，提供100%的HDFS协议和使用体验，支持企业大数据中的HDFS无缝平滑上云，构建云原生时代的存储计算分离的大数据架构。方案总览方案优势简单：...

保险行业解决方案与案例

该公司依托云计算技术和互联网技术构建了分层清晰的数字化平台，推动技术架构和技术标准的统一，实现系统间整合和内通外联，同时，基于大后台+小前端移动互联布局，联合信创合作方，攻克多项技术难题，在业内率先建设信创混合云，其中数据...

未来规划

云计算架构的核心逻辑就是通过虚拟化技术带来池化资源，云原生数据库采用分布式数据库架构，实现大规模扩展，每套数据库系统横跨多台服务器和虚拟机，带来了全新的系统管理挑战。其中最核心的挑战就是如何实现弹性以及高可用，实现按需按量...

升级数据库大版本

云数据库MongoDB版（单节点架构）全量迁移至云数据库MongoDB版（所有架构）云数据库MongoDB版（副本集架构）迁移至云数据库MongoDB版（副本集架构或分片集群架构）自建数据库MongoDB版（分片集群架构）迁移至云数据库MongoDB版（副本集架构...

专有云通用架构

当金融用户需要更好的私密性和专属性，或者有定制化安全策略，内网访问的安全需求时，可采用专有云架构。专有云有四类：Apsara Stack Enterprise、Apsara Stack Insight、ZStack for Alibaba Cloud和Apsara Stack Agility。Apsara Stack ...

前言

阿里云卓越架构包含以下五个架构最佳实践支柱：安全合规：识别企业内部、外部的安全要求和监管诉求，在云环境中针对网络安全、身份安全、主机安全、数据安全等全方位地进行规划和实施，同时持续对威胁进行检测和快速响应。稳定性：无论在何...

什么是混合云存储

阿里云提供针对私有云、容器、数据库、海量数据存储、HPC、AI和大数据等业务场景，基于混合云架构，提供云上弹性空间、软硬件一体集成的混合云存储服务。本文介绍混合云存储的基本信息等，帮助您选择最适合您业务场景和需求的混合云存储...

典型客户案例

客户收益转型：在安全生产的基础上，加速实现企业的数字化转型，以低成本完成银行核心业务系统迁移上云，实现自主可控的云平台架构。创新：通过对全行业务能力的统一规划布局，解除信息能力孤岛，提高产品创新效率，完善服务品质，提升...

Napatech案例

Lindorm支持海量数据的低成本存储、快速批量导入和实时访问，具备高效的增量及全量数据通道，可轻松与各类大数据平台集成，完成数据的大规模离线分析。基于Lindorm的解决方案，用户在采用到100Gbps+流量产生的大量数据包元数据直接通过...

什么是阿里云电子政务云

阿里云电子政务云可为您提供：混合云架构：提供云上独立安全区域，同时支持物理专线以及VPN的方式与线下IDC或其他云平台打通，实现混合云架构，保护用户核心数据和业务。高安全防护：提供全链路加密、全链路审计功能，支持国密加密能力，...

PolarDB Serverless实现了哪些突破

以亚马逊Aurora和阿里云 PolarDB 为代表的第一代云原生数据库，第一次对数据库架构进行了改造，实现了存储和计算分离，并基于此实现了一写多读，一定程度上适配云架构。存储完成了池化和按量付费，这对云数据库的发展有了非常大的促进作用...

云平台配置检查常见问题

云平台配置检查：从网络访问控制、数据安全、日志审计等多个维度提供针对数据库的安全配置检查，及时发现数据库配置风险并提供相应的修复方案。例如，检查数据库访问控制白名单、自动备份功能、日志审计功能、访问控制策略等。基线检查：...

客户案例

MaxCompute已被广泛应用于各大领域处理云上大数据，帮助众多企业解决了海量数据分析问题，同时降低企业运维成本，...在混合云架构下，机密数据在专有云内完成，云端的大规模数据的计算则通过MaxCompute完成，定位数据的播发在公共云上完成。

MongoDB数据库大版本升级说明

云数据库MongoDB版（单节点架构）全量迁移至云数据库MongoDB版（所有架构）云数据库MongoDB版（副本集架构）迁移至云数据库MongoDB版（副本集架构或分片集群架构）自建数据库MongoDB版（分片集群架构）迁移至云数据库MongoDB版（副本集架构...

客户案例

阿里妈妈公司介绍阿里妈妈广告业务主要是一种 P4P（Pay for Performance）形式的广告业务系统，而报表中心作为阿里妈妈向广告主透出广告效果数据的唯一平台，在阿里巴巴大平台丰富多样的商业场景下，为客户提供优质，高效，可靠的数据...

什么是云数据库MongoDB版

云数据库MongoDB版（ApsaraDB for MongoDB）完全兼容MongoDB协议，基于飞天分布式系统和高可靠存储引擎，提供多节点高可用架构、弹性扩容、容灾、备份恢复、性能优化等功能。MongoDB的数据结构 MongoDB是面向文档的NoSQL（非关系型）数据库...

政务云迁移实践

例如评估业务系统迁移阿里云平台的可行性，设计业务系统的产品选型和应用架构，以及应用系统、存储、数据库等迁移方案。迁移实施服务：阿里云迁移团队可为企业提供实施迁移任务的服务，助力企业高效、安全的完成上云迁移。例如通过技术支持...

大数据云平台架构

新品推荐