Napatech案例
Lindorm支持海量数据的低成本存储、快速批量导入和实时访问，具备高效的增量及全量数据通道，可轻松与各类大数据平台集成，完成数据的大规模离线分析。基于Lindorm的解决方案，用户在采用到100Gbps+流量产生的大量数据包元数据直接通过...
Delta Lake概述
Delta Lake以数据为中心，围绕数据流走向（数据从流入数据湖、数据组织管理和数据查询到流出数据湖）推出了一系列功能特性，协助您搭配第三方上下游工具，搭建快捷、易用和安全的数据湖。背景信息 通常的数据湖方案是选取大数据存储引擎...
解决方案与客户案例
异地多活数据库解决方案 方案背景 随着云计算的蓬勃发展，越来越多的信息系统选择部署在云计算环境下，因此基于云产品为信息系统的服务能力和数据质量提供保障尤为重要。为了防止灾难性的故障如火灾、洪水、地震、区域电力中断或者人为破坏...
数据分析整体趋势
随着Google等互联网企业崛起，以Hadoop为代表的基于传统x86服务器集群的大数据技术迅速发展，同时开源分布式数据库如Greenplum等也成为相应替代方案，为广大中小企业，尤其是互联网行业大大降低了数据分析的技术和成本门槛，还有分布式技术...
部署数据库
Oracle：云市场镜像部署Oracle数据库 SQL Server：部署SQL Server数据库 MySQL：创建并连接云数据库RDS MySQL 部署MySQL数据库（Linux）部署MySQL数据库（Windows）迁移自建数据库到云数据库RDS 如果您希望更方便地管理数据库，并享有高...
JindoFS实战演示
云上计算云下数据：HDFS缓存加速 云上计算云下数据：HDFS缓存加速 2021-06-29 随着云计算越来越成熟，带来弹性扩容、运维方便、节省成本等优点，越来越多企业开始将大数据平台搬到云上。云下的HDFS集群存在历史数据，其中可能包含敏感数据...
新零售行业解决方案
方案价值：基于阿里云ADAM和 PolarDB PostgreSQL版（兼容Oracle）替代商业版数据库，优化IT的成本结构，每年不但节省大量License授权费用，并且极大地提升了系统可用性 应用和数据库都部署在云上，可以充分利用云资源的弹性能力，解决网络...
应用场景
该方案优势如下：全托管免运维 弹性扩展能力 开放数据湖架构 一站式的数据开发平台 数据查询与分析场景 在传统数据平台下，数据仓库工程师和数据分析师通常面临两个不同的环境，甚至使用不同的引擎和语法，导致数据指标和算子行为存在差异...
客户案例
阿里妈妈 公司介绍 阿里妈妈广告业务主要是一种 P4P（Pay for Performance）形式的广告业务系统，而报表中心作为阿里妈妈向广告主透出广告效果数据的唯一平台，在阿里巴巴大平台丰富多样的商业场景下，为客户提供优质，高效，可靠的数据...
如何对JSON类型进行高效分析
传统数仓解决方案 数据仓库的处理流程通常包括以下步骤：数据抽取（Extraction）：从各个数据源中抽取需要的数据，包括数据库、文件、Web服务等，并进行清洗、转换和过滤。数据转换（Transformation）：对抽取的数据进行转换，使其符合数据...
什么是数据资源平台
阿里云数据资源平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据标准、数据建模、数据加工、质量评估、业务模型构建、资产管理、数据服务等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据...
准备工作：获取CDH或CDP集群信息并配置网络连通
背景信息 CDH是Cloudera的开源平台发行版，提供开箱即用的集群管理、集群监控、集群诊断等功能，并支持使用多种组件，助力您执行端到端的大数据工作流程。CDP是跨平台收集和整合客户数据的公共数据平台，可帮助您收集实时数据，并将其构建...
概述
EMR数据开发于2022年2月21日停止功能更新，2023年9月30日停止全面支持。如果您在2022年2月21日21点前未使用过数据开发功能，推荐您通过EMR Workflow进行...您也可以迁移到大数据开发治理平台DataWorks，详情请参见 EMR数据开发停止更新公告。
Hadoop集群迁移至DataLake集群
在新平台上，EMR提供了更加灵活的Gateway部署方案，允许您在已有的ECS实例上部署Gateway，并自动同步计算集群的配置。为简化Gateway环境的部署过程，EMR推出了一个名为EMR-CLI的工具，该工具可协助您在已有的阿里云ECS实例上轻松布置...
规格及选型
16C128G ESSD云盘 PL2 适合企业级平台建设，适用于高并发场景，大规模企业核心数据平台推荐选择。高性能（基础版）2C8G ESSD云盘 PL0 POC测试。个人学习使用，体验测试产品能力。4C16G ESSD云盘 PL0 ESSD云盘 PL1 适合计算存储均衡场景，...
将云消息队列 Kafka 版的数据迁移至MaxCompute
本文介绍如何使用DataWorks数据同步功能，将 云消息队列 Kafka 版 集群上的数据迁移至阿里云大数据计算服务MaxCompute，方便您对离线数据进行分析加工。前提条件 在开始本教程前，确保您在同一地域中已完成以下操作：云消息队列 Kafka 版 ...
经济版（ARM架构）性能&价格力观测
技术实现 本次观测在解决方案PLG体系下，基于瑶池控制台解决方案和资源编排ROS快速完成PoC测试平台的自动搭建、部署、运行及释放。方案的架构图如下所示。本次进行性能对比的产品是RDS MySQL和ECS MySQL，RDS MySQL是经济版（基于ARM架构）...
什么是EMR Notebook
EMR Notebook是一个Serverless化的交互式数据分析和探索平台，满足大数据和AI融合下的数据处理需求，为数据工程师、数据分析师和数据科学家提供了可视化的应用程序开发环境。通过EMR Notebook可以完成对SQL、Python、Markdown等多种语言...
跨境SaaS:深圳市易仓科技有限公司
存在资源碎片，资源利用率低 痛点5:业务快速发展，租户数据越来越大，存储成本越来越高 痛点6:传统主从架构数据库模式，实例众多，数据集成成本高 痛点7:租户数据量越来越大，单租户维度查询性能遇瓶颈 解决方案 PolarDB多主集群助力易仓跨...
百华悦邦
解决方案 采用阿里云ADAM（Advanced Database&Application Migration）智能分析平台云端通过场景化、流程化、自动化的完成业务代码的分析和调整形成去O方案。采用 PolarDB PostgreSQL版（兼容Oracle）代替Oracle RAC数据库，数据库性能大幅...
基本概念
多可用区 云原生多模数据库 Lindorm 支持将一个实例部署在多个可用区，这种部署方案可以使实例具备更高的容灾能力。如果Lindorm宽表的一致性是最终一致，Lindorm实例会在多个可用区之间自动路由请求，从而提高业务的单可用区抗抖动能力。更...
免费试用阿里云产品
实时数仓 Hologres 查询Hologres数据 大数据开发治理平台 DataWorks 大数据AI公共数据集分析 数据可视化分析平台 Quick BI 搭建仪表板报表 AI与机器学习 人工智能平台 PAI PAI-DSW免费试用：教程指南 EAS Freetier快速免费部署AI绘画...
新零售：上海百胜软件股份有限公司
PolarDB 采用存储和计算分离的架构，提供分钟级的配置升降级、秒级的故障恢复、全局数据一致性和免费的数据备份容灾服务，既融合了商业数据库稳定可靠、高性能、可扩展的特征，又具有开源云数据库简单开放、自我迭代的优势。本文介绍上海...
DataWorks On CDP/CDH使用说明
支持的数据源及同步方案 数据开发、数据分析 环境准备 基于DataWorks进行计算引擎任务周期性调度前，您需先将集群添加至DataWorks。添加后，才可使用该集群进行相关数据开发、数据分析、周期性调度运行任务等操作。注册CDH或CDP集群至...
客户案例
阿里云完善的最佳实践平台，为其提供了丰富的技术方案参考和实操指导，可以更好地服务客户，查看详情>>最佳实践助力飞络网络推动新零售时代数字化转型《企业上云等保三级》《云速搭快速部署 CEN-TR》更多客户案例请查看>>最佳实践客户案例
Serverless Spark概述
传统Spark集群版的方案架构图如下所示：但是对于传统Spark集群版，用户首先需要部署一套开源大数据基础组件：Yarn、HDFS、Zookeeper等，可能会存在以下问题：使用门槛高：开发者需要同时熟悉多种大数据组件，才能完成开发与运维相关工作，...
云数据库RDS简介
MaxCompute 大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，提供了完善的数据导入方案以及多种经典的分布式计算模型，能够快速地解决海量数据计算问题。通过数据集成服务，可将RDS数据导入...
PingCAP与阿里云计算巢联合方案深度解析：数据库软件...
PingCAP 和阿里云计算巢的联合解决方案，就是为了解决传统模式下数据库软件使用过程中的“繁”：云上一键部署数据库集群；通过云上极致弹性能力，保障数据库集群自动扩缩容；同时，提供安全审计，提升系统的运维透明性；此外，在资源账单上...
文本内容风控解决方案
构建文本分类模型 在可视化建模平台 Designer 中，基于海量大数据语料预训练获得的NLP迁移学习模型，构建文本内容风控场景的文本分类模型。部署及调用模型服务 通过模型在线服务 EAS，您可以将训练好的文本风控模型部署为在线服务，并在...
自助建站方式汇总
搭建Magento电子商务网站 Magento是一款开源的电子商务网站，其丰富的模块化架构体系及拓展功能可为大中型站点提供解决方案。Magento使用PHP开发，并使用MySQL存储数据。网站类型 部署方式 说明 搭建Magento电子商务网站 使用云市场镜像...
迁云服务内容说明
迁移技术方案设计不包含Oracle上云方案设计、微服务设计方案、应用容器化方案、大数据上云方案内容，如有需求请购买对应单独服务。迁云咨询服务是以客户当前待迁移系统上云为基础的迁移技术方案设计和云上架构设计服务，不负责客户全局的云...
方案选择
数据纵向（数据规模）膨胀：采用分库分表方案，MySQL在部署时需要预估分库规模，数据量一旦达到上限后，重新部署并做数据全量迁移。数据横向（字段维度）膨胀：schema需预定义，迭代新增新字段变更复杂。而维度到达一定量后影响数据库性能...
技术架构
基于阿里巴巴集团十余年的数据库服务平台的云版本，提供免安装、免运维、即开即用、多种数据库类型与多种环境统一的Web数据库管理终端，可以为企业用户快速复制搭建与阿里集团同等安全、高效、规范的数据库DevOps研发流程解决方案。...
产品架构
计算资源包括云原生资源（灵骏计算资源和通用计算资源）和大数据引擎资源（MaxCompute和Flink）。平台工具层（灵骏智算服务&人工智能框架）：人工智能框架：包括Alink、TensorFlow、PyTorch、Megatron、DeepSpeed及RLHF等智能框架，用于...
创建集群
实时数据流（DataFlow）：是EMR平台上提供的实时计算一站式解决方案，拥有分布式、高吞吐量和高可扩展性的消息系统Kafka和基于Apache Flink官方产品Ververica提供的Flink商业内核两大组件，专注于解决实时计算端到端的各类问题，广泛应用于...
智能边缘一体机产品介绍
一、产品概要 边缘应用是指部署在用户现场的应用，常见于一些用户对数据处理实时性、安全性和运行可靠性要求比较高的场景下。如门禁系统、楼宇自动化BA系统、视频算法应用等。EdgeBox是一种现场应用部署模式的变革，通过Kubernetes技术，将...
功能发布记录（2024年）
所有DataWorks用户 数据治理中心概述 数据治理中心新增物化视图功能 当您在面对大数据计算任务频繁且存在大量相似子查询场景时，DataWorks支持自动化治理，智能推荐物化视图，为您提供了一种智能化、自动化的解决方案。当您启用此功能时，...
通过模拟部署能力评估合适的集群资源配置
解决方案 将产品在验证环境部署之后，ADP平台将自动统计该产品的实际部署开销，基于该数据，通过平台提供的 模拟部署 功能，对拟定的节点资源规格进行 仿真调度实验，得出实际的部署效果，如果因资源紧张而导致部署失败，可查看调度失败的...
DataWorks各版本详解
个人资产-收藏功能 支持 支持 支持 支持 我的数据 支持 支持 支持 支持 安全中心 平台安全诊断 MaxCompute数据访问权限控制 数据使用诊断 敏感数据管理 支持 支持 支持 支持 全部DataWorks部署地域 审批中心 计算引擎审批策略 不支持 不...
应用场景
适用场景 OLAP多维分析 用户行为分析 用户画像、标签分析、圈人 高维业务指标报表 自助式报表平台 业务问题探查分析 跨主题业务分析 财务报表 系统监控分析 实时数仓 电商大促数据分析 教育行业的直播质量分析 物流行业的运单分析 金融行业...
- 产品推荐
- 这些文档可能帮助您