客户案例

大数据处理能力:随着阿里巴巴集团业务的高速发展,推广营销在商业引流上的重要越发明显,报表作为营销产品的闭环,其诉求也越发的多样化、个性化,报表数据在近几年的发展中在量级上已经增长到TB甚至数十 TB 的规模。这个时候存储系统的...

图扑案例

阿里 云原生多模数据库 Lindorm 针对工业物联网数据高并发写入,实时存取等特点,创新地融合时序、索引、宽表等多模引擎能力,为存储、分析低价值密度、高通量、高实时的工业物联网监控数据提供了高价比的最优解决方案,幅度降低了...

DataWorks on EMR数据安全方案

工作空间:通过DataWorks的工作空间规划可以实现工作空间的人员管理、设置大数据作业可见和可运维。工作空间的规划与操作请参见 工作空间管理概述。安全中心:通过DataWorks的安全中心可以设置DLF表的访问权限。操作详情请参见 DLF数据...

SSL连接RDS PostgreSQL数据库

Require、Verify-CA和Verify-Full含义如下:Require:只对数据链路加密,并不验证数据库的真实性。Verify-CA:加密数据链路,同时验证数据库的真实性。Verify-Full:加密数据链路,验证数据库的真实性,同时比对证书内的CN或DNS与连接时...

Tair选型指南

云盘存储:数据分布在 ESSD云盘,容量可达百TB级别,拥有高数据可靠规格优化:解决了Redis社区版固有的fork问题而预留部分内存的问题。高兼容性:兼容大部分Redis社区版的数据结构和命令。各系列支持的命令与参数,请参见 Tair命令...

云数据库Redis版产品选型必读

云盘存储:数据分布在 ESSD云盘,容量可达百TB级别,拥有高数据可靠规格优化:解决了Redis社区版固有的fork问题而预留部分内存的问题。高兼容性:兼容大部分Redis社区版的数据结构和命令。大存储、低访问密度、低访问延迟要求,且...

什么是云原生内存数据库Tair

云盘存储:数据分布在 ESSD云盘,容量可达百TB级别,拥有高数据可靠规格优化:解决了Redis社区版固有的fork问题而预留部分内存的问题。高兼容性:兼容大部分Redis社区版的数据结构和命令。实例架构 云原生内存数据库Tair 支持灵活的...

深度解析Lindorm搜索索引(SearchIndex)特性

强一致 数据在多个引擎间流转必然会涉及到一致性问题,通常只能提供最终一致性的语义,数据的正确性和访问延迟无法有效保障。Lindorm SearchIndex提供了最终一致性和强一致性两种语义,对于访问量、数据延迟性要求不高的场景采用最终...

产品简介

大数据专家服务 大数据专家服务(Bigdata Expert Service)是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障,帮助用户...

应用场景

如何保证在跨链传递中不丢失链上数据真实性,为厂家及终端客户提供商品的全生命周期信息,成为需要解决的问题。生产商、加工商、供应商及采购商可以组建各自区块链溯源平台,通过ODATS服务,能够安全可信地进行区块链之间的数据流通,全...

标准架构

Tair 作为持久化数据存储使用的业务 标准架构提供持久化机制及备份恢复机制,极地保证数据可靠。单个 Tair 性能压力可控的业务 由于Redis原生采用单线程机制,性能在10万QPS以下的业务建议使用。如果需要更高的性能要求,请选用集群...

查询和修改数据复制方式

本文介绍如何查询和修改RDS PostgreSQL实例的数据复制方式,提高云数据库性能或可用。前提条件 实例为PostgreSQL高可用系列(云盘)。如需修改 数据复制方式 为 半同步,则需要实例内核版本为20220228及以上版本。如何升级内核小版本,请...

持久内存型

单实例成本对比云数据库Redis社区版最高可降低30%,且数据持久化不依赖传统磁盘,保证每个操作持久化的同时提供近乎Redis社区版的吞吐和延时,极提升业务数据可靠。购买方式 创建实例 背景信息 由于内存的价格相对昂贵且容量具备较的...

持久内存型

单实例成本对比 Redis社区版 最高可降低30%,且数据持久化不依赖传统磁盘,保证每个操作持久化的同时提供近乎Redis社区版的吞吐和延时,极提升业务数据可靠。购买方式 创建Tair实例 背景信息 由于内存的价格相对昂贵且容量具备较的...

常见问题

1.售前咨询渠道 尊敬的“准”大数据专家服务用户您好:如果您准备购买阿里云大数据专家服务,但是遇到如服务范围、规格、服务选择等售前方面的问题,您可以通过钉钉与我们联系,您将“当面”获得阿里云大数据专家咨询专家的建议。...

应用场景

实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线,您可以实时接入APP、WEB、IoT和数据库等产生的异构数据,统一管理,并投递到下游的分析、归档等系统,构建清晰的数据流,让您更好的释放数据的价值。...

跨境SaaS:深圳市易仓科技有限公司

数据库架构演进过程中,也遇到诸多痛点:痛点1:单实例海量表,运维管理困难,数据库稳定挑战 痛点2:多租户共享一个数据库实例,数据,资源抢占 痛点3:租户版本升降、合并、打散时,租户数据迁移效率低 痛点4:传统主从数据库架构...

什么是DataWorks

DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎,为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。从2009年起,DataWorks不断沉淀阿里巴巴大数据建设方法论,支撑数据中台建设,同时与...

使用限制

如果您的业务可能会超过此限制,您可以在创建实例时选择数据库版本为MongoDB 4.0或MongoDB 4.2,也可以升级数据库版本至MongoDB 4.0或MongoDB 4.2,升级方法请参见 升级数据版本。数据安全 不支持设置透明加密数据TDE。支持开通审计...

互联网、电商行业离线大数据分析

概述 电商网站的销售数据通过大数据进行分析后,可以在屏幕展示销售指标、客户指标、销售排名和订单地区分布等业务指标数据。DataV大屏支持可视化动态展示销售数据,触控大屏支持您自助查询数据,极地提高数据的可读性。应用场景 电商...

应用场景

数据分析业务 云数据库 Memcache 版搭配大数据计算服务 MaxCompute。实现对大数据的分布式分析处理,适用于商业分析、挖掘等大数据处理场景。通过数据集成服务可自助实现数据在云数据库 Memcache 版与 MaxCompute 间的同步,简化数据操作...

升级数据库版本

支持升级到的数据版本 不同产品架构、不同版本的云数据库MongoDB实例支持升级到的数据版本如下:产品架构 规格类型 实例的数据版本 可升级到的数据版本 单节点架构 通用型云盘版 MongoDB 4.0 暂无更高的数据版本可升级...

什么是云数据库Redis版

数据持久化不依赖传统磁盘,保证每个操作持久化的同时提供近乎Redis社区版的吞吐和延时,极提升业务数据可靠。云盘(ESSD)型:基于云盘ESSD研发,兼容Redis核心数据结构与接口,可提供容量、低成本、强持久化的数据库服务,适用于...

技术架构选型

本教程中使用阿里云大数据产品MaxCompute配合DataWorks,完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中,DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...

基于MaxCompute进行大数据BI分析

本实践以电商行业为例,通过MaxCompute、DataWorks对业务数据和日志数据进行ETL处理,并同步至分析型数据库MySQL(AnalyticDB for MySQL)进行实时分析,再通过Quick BI进行可视化展示。背景信息 MaxCompute:用于进行规模数据计算,详情...

如何对JSON类型进行高效分析

半结构化数据通常存在于Web页面、XML、JSON、NoSQL数据库等场景中,其灵活和易扩展使其成为大数据时代中不可或缺的一部分。PolarDB MySQL版 本身是一个关系型数据库管理系统,其存储的数据通常是结构化数据,但也原生支持存储和查询半...

数据组织优化

Clustering 当前痛点 Transactional Table 2.0支持分钟级近实时增量数据导入,高流量场景下可能会导致增量小文件数量膨胀,从而引发存储访问压力、成本高,并且大量的小文件还会引发meta更新以及分析执行慢,数据读写IO效率低下等问题,...

通用数据开发

通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中,虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示:数据产生:业务系统每天会产生大量结构化的...

相关的云服务

DataWorks作为阿里云一站式大数据开发与治理平台,通常会与计算引擎产品联合使用,此外使用DataWorks进行数据集成时通常联合进行数据传输的数据源产品一起使用。本文为您介绍典型场景下,使用DataWorks时通常会使用到的其他云产品。计算...

账单数据订阅及查询分析

DataWorks及MaxCompute:DataWorks基于MaxCompute等大数据引擎,支持您在线进行SQL分析、业务洞察、编辑和分享数据,以及将查询结果保存为可视化图表卡片,快速搭建可视化数据报告。订阅账单数据后,用户中心会将相关账单数据同步至指定...

数据标准

数据是由特定的环境产生的,这些环境因素包括生产者、时间、系统等,从而造成了同一个语义的数据,有...说明 目前使用DDM进行数据建模可以进行逻辑建模和物理建模,但物理建模仅支持MaxCompute和Hive两种大数据引擎,不支持自定义数据源类型。

代码评审报告

是 数据完整 数据获取是否完整 代码中的数据获取逻辑是否完整。例如累计客户数,是否完整包含了历史上有效存在,但当前不存在的客户。是 边界值检查 代码中对于边界值的处理是否正确。例如最近30天包含今天但不包含第前30天的。例如日期...

数据模型概述

DDM目前支持逻辑模型和物理模型建模,其中物理模型又分为关系型数据模型和非关系型数据模型,支持的大数据引擎为MaxCompute、Hive。说明 Hadoop的MR调优参数属于底层,DDM是数据建模工具,支持设置表、字段等物理属性。

云产品集成

您可以使用 DMS 录入云数据库 OceanBase 的数据,通过 DMS 的全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能,帮助企业高效、安全地挖掘数据价值,助力企业数字化转型。什么是数据管理DMS 支持的数据库...

数据集成概述

背景信息 面对各行各业对大数据的应用,数据集成会有很多的诉求,包括能够简单高效的配置大量数据表的同步任务、能够集成多种异构数据源、能够实现对数据源的数据进行轻度预处理、能够实现数据同步任务的调优(例如容错,限速,并发)等。...

大数据AI公共数据集分析

本教程通过DataWorks,联合云原生大数据计算服务MaxCompute,使用大数据AI公共数据集(淘宝、飞猪、阿里音乐、Github、TPC等公共数据),指导您如何快速进行大数据分析,快速熟悉DataWorks的操作界面与最基础的数据分析能力。DataWorks的更...

概述

解决方案 T+1全量同步一键建仓是指通过DLA控制台配置数据源(RDS、PolarDB for MySQL、MongoDB数据源、ECS自建数据数据)和目标OSS数据仓库,系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中,...

离线集成支持的数据

离线集成支持的数据数据源 读取 写入 大数据存储型数据源 MaxCompute 支持 支持 Hologres 支持 支持 Impala 支持 支持 StarRocks 支持 支持 Hudi 支持 支持 Doris 支持 支持 GreenPlum 支持 支持 文件数据源 FTP 支持 支持 OSS 支持 ...

受众与核心能力

产品定位 DataWorks致力于为数据开发者、数据分析师、数据资产管理者,打造一个具备开放自主开发与全栈数据研发能力的一站式、标准化、可视化、透明化的智能大数据全生命周期云研发平台。DataWorks赋予用户仅通过单一平台,即可实现数据...

典型场景

基于湖构建数据平台,支持BI、挖掘等业务 对象存储OSS可以作为湖存储,DLA基于OSS构建一站式的大数据平台。具体包括构建数据湖、数据ETL、交互式查询、机器学习等功能。构建数据湖 实时数据湖:支持DB的CDC与消息数据(如Kafka)入湖,构建...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据库备份 云服务器 ECS 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用