最佳实践概览

Pack角色管理实现用户权限管控 配置Active Directory身份认证 日志全观测应用 通过Elastic实现Kubernetes容器全观测 基于Indexing Service实现数据流管理 通过OpenStore实现海量数据存储 数据管理可视化 基于Terraform管理阿里云...

常见问题

本文为您介绍数据构建的常见问题。如何申请数据构建产品的公测资格?数据构建如何收费?...目前DLF支持阿里云E-MapReduce产品组合实现Spark数据的读取,详细请参考:EMR+DLF数据解决方案,暂不支持自建Hadoop/Spark集群的集成。

云效客户声音

——南京银行配置管理负责人 吴*云效助力新金融DevOps转型——南京银行实践之路“云效帮助我们实现了从代码编译构建、部署、测试到最终交付上线的整个研发过程的一站式、标准化管理,有效保证了产品的快速创新迭代,跨区域团队的研发协同;...

搭建管理(基于Hadoop

通过MaxCompute与Hadoop构建湖仓一体方案旨在实现对海量数据的统一管理、存储和分析,提供了一个既能处理结构化、半结构化数据,又能满足高并发分析需求的一体化数据平台。本文为您介绍如何通过MaxCompute与Hadoop构建湖仓一体,以及管理湖...

全场景解决方案

平滑迁移异构治理 方案架构 双模微服务平台通过 SOFA 微服务和 Service Mesh 微服务,提供了既支持 SOFA 框架又支持 Service Mesh 架构的微服务管理和治理能力,解决用户在技术转型期间未改造的遗留系统相互之间的打通和过渡问题,帮助...

容器云原生

本文列举了容器挂载文件系统的最佳实践及容器云原生存储解决方案。容器挂载 使用NAS动态存储卷创建有状态应用 存储管理-CSI NAS卷使用说明 存储管理-CSI 通过NFS使用NAS静态存储卷 存储管理-CSI 通过NFS使用NAS动态存储卷 容器应用 阿里...

典型客户案例

解决方案 2017 年,南京银行引入蚂蚁金服(去掉)金融级分布式交易架构能力——分布式架构 SOFAStack、分布式数据库 OceanBase,以及大数据平台能力,构建新的互联网金融核心,并于同年 11 月上线互联网金融平台“鑫云+”。客户收益“鑫云+...

什么是云消息队列 Confluent 版?

云消息队列 Confluent 版 阿里云和Apache Kafka的原厂创始公司Confluent合作,在ApacheKafka能力基础上支持消息流式处理以及大数据系统的集成的一站式解决方案—— 云消息队列 Confluent 版。您可以购买适合您生产集群规模的企业版Kafka ...

Iceberg概述

您可以借助Iceberg快速地在HDFS或者阿里云OSS上构建自己的数据湖存储服务,并借助开源数据生态的Spark、Flink、Hive和Presto等计算引擎来实现数据湖的分析。核心能力 Apache Iceberg设计初衷是为了解决Hive数仓上云的问题,经过多年迭代...

2023年

使用do-while节点实现复杂的数据分析 2023-09-20 新增通过跨项目数据访问实现不同地域MaxCompute项目数据迁移 新说明 本文为您介绍如何通过跨项目数据访问实现不同Region的MaxCompute项目数据迁移,包括两种使用场景:同云账号内不同Region...

客户案例

解决方案 友盟+联合MaxCompute构建开发者数据银行,为企业提供面向分析的、实现友盟域数据与企业私域数据全面融合的自助分析服务“U-DOP数据开放”。该服务通过订阅数据包返还数据到MaxCompute,预置分析模板并结合可视化分析BI工具来快速...

2022年

基于MaxCompute的智能推荐解决方案 基于MaxCompute+开放搜索的电商、零售行业搜索开发实践 基于MaxCompute+PAI的用户增长方案实践 基于MaxCompute的实时数据处理实践 基于MaxCompute分布式Python能力的规模数据科学分析 基于MaxCompute+...

概述

为了面向在线业务场景构建一套完整的数据库+缓存的解决方案实现对在线业务场景的数据访问、存储和加速,为客户提供一站式的解决方案,PolarDB MySQL版 推出了数据与缓存一站式的功能。技术原理 PolarDB MySQL版 数据与缓存一站式的功能中...

快速玩转Tablestore入门实战

TableStore时序数据存储-架构篇 基于Tablestore实现海量运动轨迹数据存储 药品监管系统架构揭秘:海量溯源数据存储查询 基于Tablestore实现海量摩托车的轨迹管理 超级快递——如何用系统来保证快递准时送达 科学大数据 多维的网格数据是...

南京银行

解决方案 2017 年,南京银行引入蚂蚁集团金融级分布式交易架构能力——分布式架构 SOFAStack、分布式数据库 OceanBase,以及大数据平台能力,构建新的互联网金融核心,并于同年 11 月上线互联网金融平台“鑫云+”。客户价值 新平台开创“1+...

什么是云原生内存数据库Tair

读写分离架构 读写分离实例通过主从(Master-Replica)架构实现高可用,主节点挂载只读副本(Read Replica)实现数据复制,支持读性能线性扩展。只读副本可以有效缓解热点key带来的性能问题,适合高读写比的业务场景。读写分离实例有两种...

客户案例

同时阿里云合作启动数据中台项目,可以帮助大润发降低TCO的同时,更好的依托云上生态,实现数据资产业务化闭环。客户需求 基于Hadoop开源生态打造,软硬件维护成本高昂,稳定性问题不断,严重影响业务经营分析。线上业务爆发,需求积压...

什么是 SOFAStack

提供项目管理、微服务应用开发、部署发布、监控运维、容灾高可用等全栈式解决方案,并兼容 Dubbo、Spring Cloud 等微服务运行环境,助力客户各类应用轻松转型分布式架构。SOFAStack 的名称来自蚂蚁内部发展十多年的金融级分布式中间件 SOFA...

数据湖管理FAQ

本文汇总了数据湖管理相关的常见问题及解决方案。Lakehouse相关问题 什么是Lakehouse?Lakehouse数据入湖时,对线上RDS有压力吗?如何控制建仓的限流能力?Lakehouse工作负载为什么运行失败,又没有S park Log 日志可以看?元数据发现相关...

应用场景

该场景可实现:支持多数据源接入 支持数据库(RDS、PolarDB-X(原DRDS)、PolarDB、Oracle、SQL Server等),大数据(Flink、Hadoop、EMR、MaxCompute)、OSS、日志数据(Kafka、SLS等)以及本地数据导入。支持一键建仓 通过简单几步配置...

快速入门

背景信息 在阿里云Elastic Stack产品生态下,Elasticsearch作为实时分布式搜索和分析引擎,Logstash采集、转换、优化和输出数据,Beats从各个机器和系统采集数据高级监控报警服务提供Elasticsearch集群各类指标信息的监控,帮助您及时...

上海新能源汽车车辆基础数据

客户感言 2019年开始上海市新能源汽车大数据平台从自建Hadoop集群迁移至阿里云Lindorm+DLA Spark产品,有效解决了我们平台存储和计算的横向动态扩容瓶颈,同时借助其产品中间件LTS实现了我们平台数据的冷热分离,有效降低了数据存储成本,...

PolarDB MySQL推出数据与缓存一站式功能

为了面向在线业务场景构建一套完整的数据库+缓存的解决方案实现对在线业务场景的数据访问、存储和加速,为客户提供一站式的解决方案,PolarDB MySQL版 推出了数据与缓存一站式的功能。发布日期 2024年3月12日 说明 该功能当前为灰度发布...

交通

H5 容器、动态发布管理——借助 mPaaS H5 容器,“Metro 都会”App 成功打造出真正的“移动前台”,实现 App 内各个业务模块代码完美隔离,实现真正高并发协同开发、动态更新发布服务,全面提升研发效率。移动 API 网关保障服务高可用...

什么是MaxCompute

MaxCompute提供离线和实时的数据接入,支持规模数据计算及查询加速能力,为您提供面向多种计算场景的数据仓库解决方案及分析建模服务。MaxCompute还为您提供完善的数据导入方案以及多种经典的分布式计算模型,您可以不必关心分布式计算和...

什么是云原生数据湖分析

云原生数据湖分析(简称DLA)是新一代大数据解决方案,采取计算存储完全分离的架构,支持数据库(RDS\PolarDB\NoSQL)消息实时归档建仓,提供弹性的SparkPresto,满足在线交互式查询、流处理、批处理、机器学习等诉求,也是传统...

应用场景

阿里云开源大数据平台E-MapReduce(简称EMR)具有广泛的应用场景。本文为您介绍EMR的主要应用场景。数据湖场景 DataLake集群类型提供了数据湖分析场景所需的服务和相关湖格式,包括Hadoop、OSS-HDFS、Hive、Spark、Presto等。通过选择OSS-...

如何对JSON类型进行高效分析

针对海量半结构化数据计算分析,本文将以半结构化数据JSON为例,首先简述传统数据与数据仓库的解决方案,然后详细描述 PolarDB IMCI列式JSON、虚拟列、秒级加减列表列数扩展等技术点,最后给出 PolarDB IMCI列式JSON实时分析扩展流...

2019年

概述 通过Tunnel迁移日志数据至MaxCompute 通过DataHub迁移日志数据至MaxCompute 通过DataWorks数据集成迁移日志数据至MaxCompute 通过LogHub迁移日志数据至MaxCompute 2019-12-25 新增开源地理空间UDF。新功能 您可以将开源地理空间UDF...

基本概念

M MaxCompute 大数据计算服务MaxCompute(原名ODPS)是一种快速、完全托管的TB、PB级数据仓库解决方案,提供了完善的数据导入方案以及多种经典的分布式计算模型,能够快速地解决海量数据计算问题。通过数据集成服务,可将Lindorm数据导入...

功能特性

数据库MongoDB版(ApsaraDB for MongoDB)完全兼容MongoDB协议,基于飞天分布式系统和高可靠存储引擎,提供多节点高可用架构、弹性扩容、容灾、备份回滚、性能优化等解决方案。本文介绍云数据库MongoDB版的功能特性。架构灵活 云数据库...

数据构建之MaxCompute湖仓一体最佳实践

MaxCompute+DLF湖仓一体方案打破数据与数据仓库割裂的体系,架构上将数据湖的灵活性、生态丰富与数据仓库的企业级能力进行融合,构建数据湖和数据仓库融合的数据管理平台。本文介绍湖仓一体的具体方案。背景信息 大数据计算服务...

功能概览

订阅方案概览 数据集成 数据同步 帮助您实现数据源之间的数据实时同步,适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、查询报表分流、云BI及实时数据仓库等多种业务场景。数据同步方案概览 离线集成 离线集成是一种低...

概览

为了更好地指导您使用数据管理DMS(Data Management),DMS推出解决方案系列文档,旨在通过最佳实践(Step by Step)的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 DMS为在线流程化系统,可统一管理企业内...

产品简介

大数据专家服务 大数据专家服务(Bigdata Expert Service)是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、...,帮助用户构建和持续优化的大数据体系架构...

JindoData版本说明

JindoData是阿里云开源大数据团队自研的数据湖存储加速套件,面向大数据和AI生态,为阿里云和业界主要数据湖存储系统提供全方位访问加速解决方案。本文为您介绍JindoData各版本支持的功能。背景信息 JindoData是原阿里云EMR SmartData组件...

2021年

诊断功能主要支持7天以内的SQL、MapReduce类型的作业诊断,基于作业运行时产生的各个阶段状态信息,作业历史运行数据进行对比分析,得出作业相比历史在某些环节或诊断维度上的缺陷和问题,并针对问题给出相应的原因和解决方案。...

功能特性

计算 MaxCompute向用户提供了多种经典的分布式计算模型,提供TB、PB、EB级数据计算能力,能够更快速的解决用户海量数据计算问题,有效降低企业成本。功能集 功能 功能描述 参考文档 SQL开发 DDL语句 DDL语句 DDL DML操作 DML操作 DML操作 ...

常见术语

云原生数据湖分析(简称DLA)是新一代大数据解决方案,采取计算存储完全分离的架构,支持数据库(RDS\PolarDB)消息实时归档建仓,提供弹性的SparkPresto,满足在线交互式查询、流处理、批处理、机器学习等诉求,也是传统Hadoop方案...

注册EMR集群至DataWorks

背景信息 开源大数据开发平台 E-MapReduce(简称EMR),是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark,让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理数据。EMR还...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 云原生大数据计算服务 MaxCompute 开源大数据平台 E-MapReduce 云服务器 ECS 商标服务 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用