Hive数据

背景信息 Hive是基于Hadoop的数据仓库工具,用于解决海量结构化日志的数据统计。Hive可以将结构化的数据文件映射为一张表,并提供SQL查询功能。Hive的本质是一个SQL解析引擎,其底层通过MapReduce实现数据分析,使用HDFS存储处理的数据,将...

什么是MaxCompute

以Serverless架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您可以经济并高效地分析处理海量数据。随着数据收集手段不断丰富,行业数据大量积累,数据规模已增长到了...

典型使用场景

实时计算-HBase增强版(Lindorm)+Blink/Spark 基于数据的应用,如算法、智能运营、监控大屏等系统。通常需要实时获取业务系统产生的数据,基于数据更新进行实时计算。HBase具有高吞吐,低延迟,schemaFree,水平扩展等能力,被很多大数据...

2023年

支持用户通过SQL、PyODPS、Python等进行数据分析、探索,挖掘数据的价值,完成大数据AI的融合应用开发。本文为您介绍如何使用Notebook功能。(邀测)MaxCompute Notebook使用说明 2023-09-12 新增在本地环境上使用PyODPS 新说明 PyODPS是...

公开数据集概述

TPC-H 10GB性能测试集 TPC-H 100GB性能测试集 TPC-H 1TB性能测试集 TPC-H 10TB性能测试集 tpch_10g tpch_100g tpch_1t tpch_10t TPCx-BB TPCx-BB Express Benchmark BB(TPCx-BB)是一个大数据基准测试,衡量基于Hadoop的数据系统的性能...

应用场景

云服务器ECS具有广泛的应用场景,既可以作为Web服务器或者应用服务器单独使用,又可以其他阿里云服务集成提供丰富的解决方案。说明 云服务器ECS的典型应用场景包括但不限于本文描述,您可以在使用云服务器ECS的同时发现云计算带来的技术...

E-MapReduce弹性低成本离线大数据分析

数据是一项涉及不同业务和技术领域的技术和工具的集合,海量离线数据分析可以应用于多种商业系统环境,例如,电商海量日志分析、用户行为画像分析、科研行业的海量离线计算分析任务等场景。离线大数据分析概述 主流的三大分布式计算框架...

阿里云电子政务云产品全家福

阿里云电子政务云平台提供弹性计算类、网络、数据库、存储、大数据、中间件、IoT等品类丰富的产品及高标准的安全合规服务,用以支撑多种政务类业务场景,例如:城市大脑,合规应用平台等。截至文档发布时间,阿里云电子政务云共计上线95款...

JindoFS实战演示

数据迁移 文档链接 视频链接 视频发布时间 描述 高效迁移HDFS海量文件到OSS 高效迁移HDFS海量文件到OSS 2021-05-11 通过Hadoop DistCp将HDFS海量文件同步到OSS存在很多问题,例如文件数量太大造成内存溢出、同步效率慢、无法保证数据一致性...

引擎类型

流引擎是面向流式数据处理的引擎,提供了流式数据的存储和轻计算功能,帮助您轻松实现将流式数据存储至 云原生多模数据库 Lindorm,满足基于流式数据的处理和应用需求。结合宽表引擎的Ganos时空服务,可以实现基于流式数据的实时轨迹分析...

计算设置概述

设置Dataphin实例的计算引擎为Hadoop CDH5.x Hadoop CDH6.x Hadoop 全球应用较广的分布式系统基础架构,核心为HDFS和MapReduce,提供了海量数据存储计算。全球应用较广的分布式系统基础架构,核心为HDFS和MapReduce,提供了海量数据存储...

MapReduce

海量数据挖掘:非结构化数据、时空数据和图像数据挖掘。机器学习:监督学习、无监督学习和分类算法(例如决策树、SVM)。自然语言处理:基于数据的训练和预测。基于语料库构建单词同现矩阵,频繁项集数据挖掘、重复文档检测等。广告推荐...

使用SQL管理外部项目

基于数据湖构建DLF和对象存储OSS的外部项目操作 基于Hadoop外部数据源的外部项目操作 创建外部数据源中表结构相同的表 基于数据湖构建DLF和对象存储OSS的外部项目操作 在创建External Project后,您可以通过 MaxCompute客户端 进入创建的...

行业趋势背景

行业趋势 数据库系统至关重要 数据库操作系统、中间件并称为系统软件的三驾马车,是企业IT系统不可或缺的组件,也是互联网应用级企业信息管理系统存储数据和管理数据的核心平台。数据库系统是一切应用软件的数据处理及交换核心,是所有...

数据分析整体趋势

近些年来,随着业务数据量的增多,企业需要能够对数据进行分析,助力商业决策,更好地发挥数据价值,而传统开源及商业关系型数据库通常为单机版,在海量数据分析场景下扩展能力有限,性能无法满足需求。以Teradata,Oracle Exadata为代表的...

产品优势

您可以像使用文件一样方便地上传、下载、检索、管理用于Web网站或者移动应用海量数据。不限制存储空间大小。您可以根据所需存储量无限扩展存储空间,解决了传统硬件存储扩容问题。支持流式写入和读取。适合视频等大文件的同步读写业务...

最佳实践概览

Pack角色管理实现用户权限管控 配置Active Directory身份认证 日志全观测应用 通过Elastic实现Kubernetes容器全观测 基于Indexing Service实现数据流管理 通过OpenStore实现海量数据存储 数据管理可视化 基于Terraform管理阿里云...

概述

Web应用防火墙WAF(Web Application Firewall)日志服务帮助您采集并存储接入WAF防护的网站域名的Web访问和攻击的防护日志,基于阿里云日志服务,输出查询分析、统计图表、报警服务、下游计算对接投递等功能,帮助您专注于分析,远离琐碎...

什么是Web应用防火墙

Web应用防火墙(Web Application Firewall,简称WAF)对网站或者App的业务流量进行恶意特征识别及防护,在对流量进行清洗和过滤后,将正常、安全的流量返回给服务器,避免网站服务器被恶意入侵导致性能异常等问题,从而保障网站的业务安全...

什么是Web应用防火墙

Web应用防火墙(Web Application Firewall,简称WAF)为您的网站或App业务提供一站式安全防护。WAF可以有效识别Web业务流量的恶意特征,在对流量清洗和过滤后,将正常、安全的流量返回给服务器,避免网站服务器被恶意入侵导致性能异常等...

什么是云数据库 Memcache 版

云数据库 Memcache 版是基于内存的缓存服务,支持海量数据的高速访问。云数据库 Memcache 版可以极大缓解对后端存储的压力,提高网站应用的响应速度。云数据库 Memcache 版支持 Key-Value 的数据结构,兼容 Memcached 协议的客户端都可...

RDS术语

数据库 在一个RDS实例下创建的逻辑单元,以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合,可以简单理解为存放数据的仓库。一个实例可以创建多个数据库,数据库在实例内的命名唯一。数据库...

RDS术语

数据库 在一个RDS实例下创建的逻辑单元,以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合,可以简单理解为存放数据的仓库。一个实例可以创建多个数据库,数据库在实例内的命名唯一。数据库...

日志管理概述

Web应用防火墙(WAF)日志服务帮助您采集并存储WAF防护对象(云产品实例、域名)的Web访问及攻击防护日志,并基于阿里云日志服务,输出查询分析、统计图表、报警服务、下游计算对接投递等能力,帮助您专注于分析,远离琐碎的查询和整理...

RDS术语

数据库 在一个RDS实例下创建的逻辑单元,以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合,可以简单理解为存放数据的仓库。一个实例可以创建多个数据库,数据库在实例内的命名唯一。数据库...

RDS术语

数据库 在一个RDS实例下创建的逻辑单元,以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合,可以简单理解为存放数据的仓库。一个实例可以创建多个数据库,数据库在实例内的命名唯一。数据库...

RDS术语

数据库 在一个RDS实例下创建的逻辑单元,以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合,可以简单理解为存放数据的仓库。一个实例可以创建多个数据库,数据库在实例内的命名唯一。数据库...

迁移HBase至Hologres

联通数据孤岛,海量数据实时查询及分析,弹性扩展集群,完整SQL支持。开发方式 应用开发复杂,需要将业务分析的指标、维度、表、聚合等概念,转化为存储的KeyValue概念,将应用层查询过滤场景翻译为对Key的字节过滤操作,系统效率严重依赖...

2023年

【计费变更】ARMS上线新版计费模式 应用监控 eBPF 版 应用监控 eBPF 版 新增 全新上线 应用监控 eBPF 版,基于eBPF技术提供零入侵、语言无关、高性能的应用可观测体验。什么是阿里云应用监控 eBPF 版 应用监控 探针 新增 支持Spring Boot 3...

应用评估

应用评估用于衡量应用与数据库整体迁移改造的情况,可以展示应用需要改造的地方,并给出改造建议。前提条件 全部应用采集包都已创建应用画像。背景信息 迁移数据库和应用的过程中存在以下几个难点问题:难以估算应用改造的工作量。难以制定...

2021年

2021-09-14 华南1金融云(深圳)无 MaxCompute 支持访问开启Kerberos 认证授权机制的 Hadoop集群 大部分企业的Hadoop的生产集群开启了 Kerberos认证授权机制,本次功能升级能够利用MaxCompute访问开启Kerberos认证授权机制的 Hadoop集群,...

客户案例

客户需求 基于Hadoop开源生态打造,软硬件维护成本高昂,稳定性问题不断,严重影响业务经营分析。线上业务爆发,需求积压严重,期望有整体解决方案,能够快速灵活支持业务发展所需的技术扩展。价值体现 通过MMA工具,15天完成400TB+历史...

功能发布记录

自定义防护规则组 2018-11-16 支持长达一年的业务日志存储 Web应用防火墙支持通过日志服务SLS的集成功能实时采集已接入Web应用防火墙防护的网站业务日志,并提供日志实时检索分析服务。概述 2018-10-24 支持流量标记功能 Web应用防火墙...

自助建站方式汇总

它用于构造提供多种功能和服务的动态网站,能支持从个人博客到大型社区等各种不同应用的网站项目。您可以根据需求,选择使用云市场镜像和手动搭建Drupal电子商务网站。网站类型 部署方式 说明 搭建Drupal网站 云市场镜像搭建Drupal网站 本...

客户案例

基于金融云计算平台以及 OceanBase 的海量存储,网商银行拥有处理高并发金融交易、海量大数据和弹性扩容的能力,可以利用互联网和大数据的优势,给更多小微企业提供金融服务。唐家才 网商银行 CTO“网商银行选择 OceanBase 三地五中心部署...

数据上云场景

MaxCompute平台提供了丰富的数据上传下载工具,可以广泛应用于各种数据上云的应用场景,本文为您介绍三种经典数据上云场景。Hadoop数据迁移 您可使用MMA...具体场景示例请参见 Flume收集网站日志数据到MaxCompute 和 海量日志数据分析与应用

管理用户

您可以维护用户的基本信息,例如用户名、邮箱,还可以执行重置用户密码、锁定用户、查看用户的应用使用统计数据等操作。创建用户 登录 无影云应用 控制台。在左侧导航栏中,单击 用户。在 用户 页面,单击左上角的 创建用户。在 创建用户 ...

基于MaxCompute进行大数据BI分析

通过MaxCompute、AnalyticDB for MySQL强大的数据加工和分析能力,降低大数据平台建设的门槛,轻松解决了海量数据的计算问题。同时有效降低企业成本,并保障数据安全。第三方开源生态无缝对接,在不侵入用户应用的情况下,传输日志至日志...

应用场景

云消息队列 Kafka 版 用于数据聚合具备以下优势:应用与分析解耦:构建应用系统和分析系统的桥梁,并将它们之间的关联解耦。高可扩展性:具有高可扩展性,即当数据量增加时可通过增加节点快速水平扩展。在线或离线分析系统:支持实时在线...

快速玩转Tablestore入门实战

Tablestore结合Spark的流批一体SQL实战 Tablestore+Blink实战:交易数据的实时统计 百亿级全网舆情分析系统存储设计 海量监控日志基于EMR Spark Streaming SQL进行实时聚合 物联网 表格存储 单表提供PB级数据存储规模,无需分库分表,同时...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 云数据库 RDS 商标服务 域名 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用