Python+大数据学习笔记(一)

Python+大数据学习笔记(一)

PySpark使用pyspark:• pyspark = python + spark• 在pandas、numpy进行数据处理时,一次性将数据读入 内存中,当数据很大时内存溢出,无法处理;此外,很多执行算法是单线程处理,不能充分利用cpu性能spark的核心概念之一是shuffle,它将数据集分成...

大数据开发工程师基本功修炼之Linux学习笔记(四)

大数据开发工程师基本功修炼之Linux学习笔记(四)

1 挂载新的硬盘1.1 目标虚拟机 增加一块 硬盘1.2 路径第一步: 了解linux系统分区的原理第二步: 查看系统分区情况第三步: 虚拟机 增加 硬盘第四步: 分区第五步: 格式化第六步: 挂载第七步: 设置重启后 挂载不失效1.3 实现第一步: 了解linux系统分区的原理一个硬盘可以分成多个...

阿里云大数据工程师ACA认证(2023版)

21 课时 |
807 人已学 |
免费

基于MaxCompute的热门话题分析

8 课时 |
329 人已学 |
免费

独家揭秘当下大数据体系

4 课时 |
331 人已学 |
免费
开发者课程背景图
数据治理专业认证CDMP学习笔记(思维导图与知识点)- 第14章大数据与数据科学篇

数据治理专业认证CDMP学习笔记(思维导图与知识点)- 第14章大数据与数据科学篇

大家好,我是独孤风,一名曾经的港口煤炭工人,目前在某国企任大数据负责人,公众号大数据流动作者。在最近的两年的时间里,因为公司的需求,还有大数据的发展趋势所在,我开始学习数据治理的相关知识。数据治理需要进行系统的学习才能真正掌握,也需要进行专业的考试认证才能证明自己在数据治理方面的学习能...

大数据 SRE 体系能力建设(二)| 学习笔记

大数据 SRE 体系能力建设(二)| 学习笔记

开发者学堂课程【大数据SRE体系能力建设 :大数据 SRE 体系能力建设(二)】学习笔记,与课程紧密联系,让用户快速学习知识。课程地址:https://developer.aliyun.com/learning/course/1203/detail/18170大数据 SRE 体系能力建设​...

大数据的学习笔记第一次学习

前言大数据的时代:我们已经进入了大数据的时代,大数据涉及到我们的生活方方面面,例如:汽车,在线教育,饮食,传媒,医疗,金融,零售业,农业等等的方方面面。正文那大数据给我们带来了哪些好处呢?1.大数据帮助我们购物2.大数据帮助我们避...

如何将  PolarDB-X  与大数据等系统互通|学习笔记

如何将 PolarDB-X 与大数据等系统互通|学习笔记

开发者学堂课程【PolarDB-X 动手实践:如何将  PolarDB-X  与大数据等系统互通】学习笔记,与课程紧密联系,让用户快速学习知识。课程地址:https://developer.aliyun.com/learning/course/944/detail/14752如何...

开源大数据 OLAP 引擎最佳实践 | 学习笔记(二)

开源大数据 OLAP 引擎最佳实践 | 学习笔记(二)

开发者学堂课程【大数据知识图谱系列—如何选择合适的OLAP引擎进行数据湖分析:开源大数据 OLAP 引擎最佳实践】学习笔记(二),与课程紧密连接,让用户快速学习知识。课程地址:https://developer.aliyun.com/learning/course/1064/detail/15370...

湖仓一体新能力解读| 学习笔记

湖仓一体新能力解读| 学习笔记

开发者学堂课程【云原生一体化数仓新能力解读课程:湖仓一体新能力解读】学习笔记,与课程紧密联系,让用户快速学习知识。课程地址:https://developer.aliyun.com/learning/course/1193/detail/18113湖仓一体新能力解读主要内容:一、基于 Max Com...

如何将 PolarDB-X 与大数据等系统互通|学习笔记(一)

如何将 PolarDB-X 与大数据等系统互通|学习笔记(一)

开发者学堂课程【如何将PolarDB-X与大数据等系统互通:如何将 PolarDB-X 与大数据等系统互通】学习笔记,与课程紧密联系,让用户快速学习知识。 课程地址:https://developer.aliyun.com/learning/course/984/detail/14937如何将 Po...

Hadoop 数据如何同步至 MaxCompute | 学习笔记(三)

Hadoop 数据如何同步至 MaxCompute | 学习笔记(三)

开发者学堂课程【SaaS 模式云数据仓库实战:Hadoop 数据如何同步至MaxCompute 】学习笔记,与课程紧密联系,让用户快速学习知识。课程地址:https://developer.aliyun.com/learning/course/761/detail/13345Hadoop ...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

社区圈子

阿里巴巴大数据计算
阿里巴巴大数据计算
阿里大数据官方技术圈
347749+人已加入
加入
相关电子书
更多
Lindorm一站式车联网数据平台
Lindorm一站式AI数据平台实战
Lindorm:打造AI时代的 一体化数据平台
立即下载 立即下载 立即下载