金融大数据
业务架构 架构说明：大数据仓库调用外部数据和数据集市的信息，通过数据获取层、数据模型层、数据加工层、数据应用层和分析集市的层层筛选、分析、加工，由大数据服务接口向内部源数据输出适用于多种用户场景的有效数据。大数据仓库功能...
应用场景
读写分离应用 云数据库MongoDB采用三节点副本集的高可用架构，三个数据节点位于不同的物理服务器上，自动同步数据。Primary节点和Secondary节点提供服务，两个节点分别拥有独立域名，配合MongoDB Driver实现读取压力分配。关于架构说明的...
限制说明
数据大小 云数据库 Memcache 版支持的单条缓存数据的 Key 最大不超过 1 KB，Value 最大不超过 1 MB，过大的数据不适合存储。事务支持 云数据库 Memcache 版不支持事务，有事务性要求的数据不适合写入，而应该直接写入数据库。使用场景 当...
技术架构选型
本教程中使用阿里云大数据产品MaxCompute配合DataWorks，完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中，DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
将云消息队列 Kafka 版的数据迁移至MaxCompute
本文介绍如何使用DataWorks数据同步功能，将 云消息队列 Kafka 版 集群上的数据迁移至阿里云大数据计算服务MaxCompute，方便您对离线数据进行分析加工。前提条件 在开始本教程前，确保您在同一地域中已完成以下操作：云消息队列 Kafka 版 ...
关于我们
阿里云隐私计算产品是源于阿里集团内部数据安全流通的最新解决方案和实践，所以她的提出是基于解决实际的数据安全问题和大数据场景需要，这就决定了她的基因里面就是贴身于实际产业应用。目前团队中拥有全职博士4名，研究型密码学博士实习...
混合云应用场景
当金融用户部分上云或逐步上云时，可将传统IT资产放置在客户IDC数据中心，互联网业务放置在金融云或公共云，专用设备放入云托管数据中心，构成多地整合的架构体系，实现混合云场景下的应用。即混合资源的统一管理及跨数据中心的DevOps交付...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
快速体验
说明 本次实验数据仅作为阿里云大数据开发治理平台DataWorks数据应用实操使用，所有数据均为人工Mock数据。技术选型 数据建模：大数据开发治理平台 DataWorks数据建模（可选），标准版及以上版本可使用，需要单独购买。原始数据存储：云...
应用场景
大数据场景 云数据库HBase支持海量全量数据的低成本存储、快速批量导入和实时访问，具备高效的增量及全量数据通道，可轻松与Spark、MaxCompute等大数据平台集成，完成数据的大规模离线分析。优势如下：低成本：高压缩比，数据冷热分离，...
典型使用场景
HBase具有高吞吐，低延迟，schemaFree，水平扩展等能力，被很多大数据类应用选择。而接合LindormStreams+Blink/Spark，可以构建出一套完整的实时数据系统：应用解耦-实时同步到消息队列 通常业务发生之后，应用系统产生的数据需要被其他...
客户案例
MaxCompute已被广泛应用于各大领域处理云上大数据，帮助众多企业解决了海量数据分析问题，同时降低企业运维成本，企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息，请参见 行业客户案例...
备份大小
本文介绍如何查看和管理云数据库专属集群MyBase MySQL的备份大小。备份大小=数据备份的大小+日志备份的大小 查看备份大小 登录 云数据库专属集群控制台。在页面左上角，选择目标地域。在左侧导航栏中，选择 实例列表>MySQL。找到目标实例，...
阿里云MaxCompute数据源
本文介绍 云数据库 SelectDB 版 与阿里云MaxCompute数据源进行对接使用的流程，帮助您对阿里云MaxCompute数据源进行联邦分析。概述 云原生大数据计算服务(MaxCompute)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供...
实验介绍
云数据库RDS MySQL版 本案例中用于存储用户信息数据。案例已默认提供该MySQL数据源基本信息，您无需单独开通该服务。对象存储OSS 本案例中用于存储网站访问记录数据，案例已默认提供该OSS数据源基本信息，您无需单独开通该服务。涉及模块 ...
版本发布记录
深度集成的生态 接入融合分析和数据回流能力 目前支持如下数据源的接入融合分析和数据回流能力，包括对象存储OSS上7种以上结构化、半结构化、以及多种压缩格式的数据文件，表格存储，AnalyticDB，云数据库版或自建数据库（MySQL、...
时序引擎应用开发简介
5.连续查询 连续查询应用于大数据查询的场景。通过创建连续查询对新写入的数据预聚合处理，减少实时查询的数据量，从而减少计算量并降低查询延迟。6.预降采样 预降采样应用于较长时间范围的数据查询场景。在数据写入时按照设置的规则将原始...
新建集群
本文介绍如何新建 云数据库ClickHouse 集群。前提条件 已注册阿里云账号。具体操作，请参见 注册阿里云账号。通过RAM用户（子账号）创建 云数据库ClickHouse 集群时，该RAM用户（子账号）必须拥有AliyunClickHouseFullAccess和...
新建集群
当您面对业务扩展需要构建 云数据库ClickHouse 集群时，本文档为您提供了在 云数据库ClickHouse 控制台上新建集群的详细步骤，帮助您快速搭建起 云数据库ClickHouse 集群。前提条件 已注册阿里云账号。具体操作，请参见 注册阿里云账号。...
功能概览
这些系统可以广泛应用于云计算、高性能计算、大数据分析、媒体处理和其他需要处理大型数据集的场景。本文介绍 云备份 大规模文件系统（除NAS以外）备份的功能概览，包括优势、工作原理、操作流程和费用等。NAS备份请使用 云备份 的阿里云...
动态过滤器（Dynamic Filter）
应用场景 动态过滤器功能是利用等值JOIN的特性，基于运行时动态生成过滤器，以便在Shuffle或JOIN之前提前过滤数据，实现加速查询运行。该功能适用于维度表和事实表执行JOIN的场景。动态范围过滤器或布隆过滤器（Dynamic Range|Bloom Filter...
使用自定义ECS应用角色访问同账号云资源
本文介绍在E-MapReduce控制台上，通过创建集群时在基础配置页面的高级设置区域设置ECS应用角色，实现以免密的方式访问同账号下的其它资源。例如，对象存储OSS和日志服务SLS。背景信息 您在创建集群时可以使用自定义的角色，通过给该角色...
支持的云服务
AnalyticDB for MySQL 云原生数据仓库 AnalyticDB MySQL 版（AnalyticDB for MySQL）是海量数据实时高并发在线分析（Realtime OLAP）云计算服务，与MaxCompute结合应用于大数据驱动业务系统的场景。通过MaxCompute离线计算挖掘，产出高质量...
案例集合
HBase典型场景 HBase八大应用场景请参见 再谈全局网HBase八大应用场景。存储场景 具体请参见 云Hbase数据库在亿方云实践之路。车联网场景 车纷享请参见 基于阿里云HBase构建车联网平台实践。HBase在新能源汽车监控系统中的应用场景请参见 ...
金融云产品列表
部署 部署 部署 云数据库 MariaDB 部署 部署 部署 部署 云原生数据库 PolarDB 部署 部署 部署 部署 云数据库 HBase 部署 部署 部署 无 企业级分布式应用服务 EDAS 部署 部署 部署 无 云原生数据库 PolarDB分布式 部署 部署 部署 无 云消息...
创建实例
云原生多模数据库Lindorm 提供Lindorm、Lindorm轻量版、LindormTunnel通道服务。您需要基于实例来使用 云原生多模数据库Lindorm 的功能。控制台、OpenAPI或SDK都支持创建实例。本文介绍如何在控制台创建Lindorm各种商品类型的实例，并提供...
什么是阿里云Cloudera CDP
企业数据云平台Cloudera Data Platform（简称阿里云CDP），是阿里云和Cloudera联合打造的阿里云上的大数据平台。Cloudera CDP企业数据云平台 Cloudera企业数据云是社区版CDH的全新商业化升级产品，是阿里云和Cloudera联合打造阿里云上的大...
使用限制
如果您的业务中集合加索引的数量可能会超过此限制，建议在创建实例时选择数据库版本为云数据库MongoDB 4.0或4.2，也可以升级数据库版本至云数据库MongoDB 4.0或4.2，升级方法请参见 升级数据库大版本。云数据库MongoDB副本集实例的4.4及...
发展历程
产品荣誉 年份 产品荣誉 2023年 进入Gartner云数据库、数据分析第一象限Leader象限。2022年 自研一体化大数据计算平台和数据仓库产品ODPS获世界互联网领先科技成果奖。在TPCx-BB 100TB标准测试中，连续6次获得全球冠军，保持性能和性价比第...
本地盘最佳实践
相比云盘，本地盘具有较高的存储I/O性能，但同时也有更大的数据风险。本文介绍如何正确选择本地盘，以及如何降低本地盘数据风险。什么是本地盘 本地盘是ECS实例所在物理机上的本地硬盘设备，能够为ECS实例提供本地存储访问能力，具有低时延...
什么是云数据库HBase
云数据库HBase是低成本、高扩展、云智能的大数据NoSQL，兼容标准HBase访问协议，提供低成本存储、高扩展吞吐、智能数据处理等核心能力，是为淘宝推荐、花呗风控、广告投放、监控大屏、菜鸟物流轨迹、支付宝账单、手淘消息等众多阿里巴巴...
应用场景
云数据库Redis版 适用于多种场景，尤其是请求并发量大场景中的数据存储。游戏行业应用 游戏行业通常将云数据库Redis版作为重要的部署架构组件，用于缓存或数据持久化。场景一：Redis作为缓存加速应用访问 Redis作为缓存层，加速应用访问。...
新功能发布记录
2023-01-03 管理用户 应用监控 查看云应用和用户行为统计数据 借助监控功能模块，您可以查看各种维度的云应用使用情况数据统计，包括实时数据、按日期聚合的统计数据、按用户聚合的统计数据等。2023-01-03 查看云应用和用户行为统计数据 ...
MongoDB产品生命周期策略
兼容性 云数据库 MongoDB 版 不承诺大版本之间的兼容性，但会尽最大努力保持产品在不同大版本间的语法、接口、功能等兼容性，并对可能出现的不兼容问题通过文档或售后服务进行告知，更多信息请参见 MongoDB数据库大版本升级说明。云数据库 ...
备份费用
云盘实例跨地域备份存储费用 BackupStorageSize 数据库备份DBS 跨地域备份网络流量费用 NetworkOutDuplicationSize 数据库备份DBS 备份下载外网流量费用 NetworkOutSize 数据库备份DBS 下载备份 云盘实例备份转换费用 BackupAnalyticSize ...
什么是云消息队列 Kafka 版？
应用生态 云消息队列 Kafka 版 具有丰富的应用生态，主要包括以下方面：大数据领域：网站行为分析、日志聚合、应用监控、流式数据处理、在线和离线数据分析等领域。数据集成：将消息导入MaxCompute、OSS、RDS、Hadoop、HBase等离线数据仓库...
高级应用：实现复杂作业逻辑
您也可以灵活使用DataWorks已有的通用节点，例如虚拟节点、分支和归并节点、循环类节点等，与MaxCompute的其他节点联合使用可实现更复杂的业务效果，本文为您概要介绍常用的通用节点和典型应用场景。实现有循环或遍历逻辑的作业 DataWorks...
简介
系统兼容开源GeoMesa、GeoServer等生态，内置了高效的时空索引算法、空间拓扑几何算法、遥感影像处理算法等，结合云数据库HBase强大的分布式存储能力以及Spark分析平台能力，广泛应用于空间、时空、遥感大数据存储、查询、分析与数据挖掘...
- 产品推荐
- 这些文档可能帮助您