[帮助文档] Spark的架构及使用场景(新)

Spark是一个通用的大数据分析引擎,具有高性能、易用和普遍性等特点。

【Spark】(三)Spark 架构原理和RDD使用详解2

【Spark】(三)Spark 架构原理和RDD使用详解2

四、RDD编程APISpark支持两个类型(算子)操作:Transformation和Action4.1 Transformation4.2 Action4.3 Spark WordCount代码编写使用maven进行项目构建(1)使用scala进行编写查看官方网站,需要导入2个依赖包详细代码Spa...

大数据实战项目:反爬虫系统(Lua+Spark+Redis+Hadoop框架搭建)第一阶段

33 课时 |
283 人已学 |
免费

大数据实战项目:反爬虫系统(Lua+Spark+Redis+Hadoop框架搭建)第二阶段

28 课时 |
248 人已学 |
免费

大数据实战项目:反爬虫系统(Lua+Spark+Redis+Hadoop框架搭建)第三阶段

25 课时 |
92 人已学 |
免费
开发者课程背景图
【Spark】(三)Spark 架构原理和RDD使用详解1

【Spark】(三)Spark 架构原理和RDD使用详解1

文章目录一、Spark 架构原理1.1 Spark架构核心组件1.2 各部分功能图二、RDD概述2.1 什么是RDD?2.2 RDD具体包含了一些什么东西?2.3 RDD的五大特性2.4 RDD可以从哪来2.5 WordCount粗图解RDD三、RDD的创建方式3.1 通过读取文件生成的3.2 通过...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

社区圈子

Apache Spark 中国技术社区
Apache Spark 中国技术社区
阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!
4459+人已加入
加入
相关电子书
更多
云HBaseSQL及分析 ——Phoenix&Spark
R AND SPARK
Spark Autotuning
立即下载 立即下载 立即下载