《深入理解大数据:大数据处理与编程实践》一一导读

前 言 2012年以来,大数据(Big Data)技术在全世界范围内迅猛发展,在全球学术界、工业界和各国政府得到了高度关注和重视,掀起了一场可与20世纪90年代的信息高速公路相提并论的发展热潮。 大数据技术如此重要,已经被我国政府提升到国家重大发展战略的高度。2014年我国政府工作报告中指出:“设立...

《深入理解大数据:大数据处理与编程实践》一一3.5 HDFS基本编程接口与示例

本节书摘来自华章计算机《深入理解大数据:大数据处理与编程实践》一书中的第3章,第3.5节,作者 主 编:黄宜华(南京大学)副主编:苗凯翔(英特尔公司),更多章节内容可以访问云栖社区“华章计算机”公众号查看。 3.5 HDFS基本编程接口与示例 除了上一节提到的命令之外,Hadoop提供了可用于读写、...

阿里云大数据工程师ACA认证(2023版)

21 课时 |
807 人已学 |
免费

基于MaxCompute的热门话题分析

8 课时 |
329 人已学 |
免费

独家揭秘当下大数据体系

4 课时 |
331 人已学 |
免费
开发者课程背景图

《深入理解大数据:大数据处理与编程实践》一一3.4 HDFS文件系统操作命令

本节书摘来自华章计算机《深入理解大数据:大数据处理与编程实践》一书中的第3章,第3.4节,作者 主 编:黄宜华(南京大学)副主编:苗凯翔(英特尔公司),更多章节内容可以访问云栖社区“华章计算机”公众号查看。 3.4 HDFS文件系统操作命令 通过之前章节的学习,相信各位读者对HDFS已经有了一个基本...

《深入理解大数据:大数据处理与编程实践》一一3.3 HDFS文件存储组织与读写

本节书摘来自华章计算机《深入理解大数据:大数据处理与编程实践》一书中的第3章,第3.3节,作者 主 编:黄宜华(南京大学)副主编:苗凯翔(英特尔公司),更多章节内容可以访问云栖社区“华章计算机”公众号查看。 3.3 HDFS文件存储组织与读写 作为一个分布式文件系统,HDFS内部的数据与文件存储机制...

《深入理解大数据:大数据处理与编程实践》一一3.2 HDFS可靠性设计

本节书摘来自华章计算机《深入理解大数据:大数据处理与编程实践》一书中的第3章,第3.2节,作者 主 编:黄宜华(南京大学)副主编:苗凯翔(英特尔公司),更多章节内容可以访问云栖社区“华章计算机”公众号查看。 3.2 HDFS可靠性设计 Hadoop能得到如此广泛的应用,和背后默默支持它的HDFS是分...

《深入理解大数据:大数据处理与编程实践》一一3.1 HDFS的基本特征与构架

本节书摘来自华章计算机《深入理解大数据:大数据处理与编程实践》一书中的第3章,第3.1节,作者 主 编:黄宜华(南京大学)副主编:苗凯翔(英特尔公司),更多章节内容可以访问云栖社区“华章计算机”公众号查看。 3.1 HDFS的基本特征与构架 HDFS被设计成在普通的商用服务器节点构成的集群上即可运行...

《深入理解大数据:大数据处理与编程实践》一一第3章 大数据存储——分布式文件系统HDFS

第3章 大数据存储——分布式文件系统HDFS 大数据处理面临的第一个问题是,如何有效存储规模巨大的数据?对于大数据处理应用来说,依靠集中式的物理服务器来保存数据是不现实的,容量也好,数据传输速度也好,都会成为瓶颈。要实现大数据的存储,需要使用几十台、几百台甚至更多的分布式服务器节点。为了统一管理这些...

《深入理解大数据:大数据处理与编程实践》一一2.5 集群远程作业提交与执行

本节书摘来自华章计算机《深入理解大数据:大数据处理与编程实践》一书中的第2章,第2.5节,作者 主 编:黄宜华(南京大学)副主编:苗凯翔(英特尔公司),更多章节内容可以访问云栖社区“华章计算机”公众号查看。 2.5 集群远程作业提交与执行 2.5.1 集群远程作业提交和执行过程Hadoop程序开发与...

《深入理解大数据:大数据处理与编程实践》一一2.4 Hadoop MapReduce程序开发过程

本节书摘来自华章计算机《深入理解大数据:大数据处理与编程实践》一书中的第2章,第2.4节,作者 主 编:黄宜华(南京大学)副主编:苗凯翔(英特尔公司),更多章节内容可以访问云栖社区“华章计算机”公众号查看。 2.4 Hadoop MapReduce程序开发过程 Hadoop MapReduce程序的...

《深入理解大数据:大数据处理与编程实践》一一2.3 集群分布式Hadoop系统安装基本步骤

本节书摘来自华章计算机《深入理解大数据:大数据处理与编程实践》一书中的第2章,第2.节,作者 主 编:黄宜华(南京大学)副主编:苗凯翔(英特尔公司),更多章节内容可以访问云栖社区“华章计算机”公众号查看。 2.3 集群分布式Hadoop系统安装基本步骤 Hadoop安装时对HDFS和MapReduc...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

社区圈子

阿里巴巴大数据计算
阿里巴巴大数据计算
阿里大数据官方技术圈
347749+人已加入
加入
相关电子书
更多
Lindorm一站式车联网数据平台
Lindorm一站式AI数据平台实战
Lindorm:打造AI时代的 一体化数据平台
立即下载 立即下载 立即下载