《Hadoop实战第2版》——3.5节Hadoop Pipes
3.5 Hadoop PipesHadoop Pipes提供了一个在Hadoop上运行C++程序的方法。与流不同的是，流使用的是标准输入输出作为可执行程序与Hadoop相关进程间通信的工具，而Pipes使用的是Sockets。先看一个示例程序wordcount.cpp： #include "hado...
《Hadoop实战第2版》——3.4节Hadoop流
3.4 Hadoop流 Hadoop流提供了一个API，允许用户使用任何脚本语言写Map函数或Reduce函数。Hadoop流的关键是，它使用UNIX标准流作为程序与Hadoop之间的接口。因此，任何程序只要可以从标准输入流中读取数据并且可以写入数据到标准输出流，那么就可以通过Hadoop流使用其他...
《Hadoop实战第2版》——2.4节安装和配置Hadoop集群
2.4 安装和配置Hadoop集群 2.4.1 网络拓扑通常来说，一个Hadoop的集群体系结构由两层网络拓扑组成，如图2-3所示。结合实际应用来看，每个机架中会有30~40台机器，这些机器共享一个1GB带宽的网络交换机。在所有的机架之上还有一个核心交换机或路由器，通常来说其网络交换能力为1GB或更...
《Hadoop实战第2版》——2.3节在Windows上安装与配置Hadoop
2.3 在Windows上安装与配置Hadoop 2.3.1 安装JDK 1.6或更高版本相对于Linux，JDK在Windows上的安装过程更容易，你可以在http://www.java.com/zh_CN/download/manual.jsp下载到最新版本的JDK。这里再次申明，Hadoop的...
《Hadoop实战第2版》——2.2节在Mac OSX上安装与配置Hadoop
2.2 在Mac OSX上安装与配置Hadoop 由于现在越来越多的人使用Mac Book，故笔者在本章中增加了在Mac OS X上安装与配置Hadoop的内容，供使用Mac Book的读者参考。 2.2.1 安装HomebrewMac OS X上的Homebrew是类似于Ubuntu下apt的一种...
《Hadoop实战第2版》——2.1节在Linux上安装与配置Hadoop
2.1 在Linux上安装与配置Hadoop在Linux上安装Hadoop之前，需要先安装两个程序：1）JDK 1.6（或更高版本）。Hadoop是用Java编写的程序，Hadoop的编译及MapReduce的运行都需要使用JDK。因此在安装Hadoop前，必须安装JDK 1.6或更高版本。2）SS...
《Hadoop实战第2版》——1.7节Hadoop集群安全策略
1.7 Hadoop集群安全策略众所周知，Hadoop的优势在于其能够将廉价的普通PC组织成能够高效稳定处理事务的大型集群，企业正是利用这一特点来构架Hadoop集群、获取海量数据的高效处理能力的。但是，Hadoop集群搭建起来后如何保证它安全稳定地运行呢？旧版本的Hadoop中没有完善的安全策略，...
《Hadoop实战第2版》——1.6节Hadoop数据管理
1.6 Hadoop数据管理前面重点介绍了Hadoop及其体系结构与计算模型MapReduce，现在开始介绍Hadoop的数据管理，主要包括Hadoop的分布式文件系统HDFS、分布式数据库HBase和数据仓库工具Hive。 1.6.1 HDFS的数据管理HDFS是分布式计算的存储基石，Hadoop...
《Hadoop实战第2版》——1.5节Hadoop计算模型—MapReduce
1.5 Hadoop计算模型—MapReduceMapReduce是Google公司的核心计算模型，它将运行于大规模集群上的复杂的并行计算过程高度地抽象为两个函数：Map和Reduce。Hadoop是Doug Cutting受到Google发表的关于MapReduce的论文启发而开发出来的。Hado...
《Hadoop实战第2版》——1.4节Hadoop与分布式开发
1.4 Hadoop与分布式开发我们通常所说的分布式系统其实是分布式软件系统，即支持分布式处理的软件系统。它是在通信网络互联的多处理机体系结构上执行任务的系统，包括分布式操作系统、分布式程序设计语言及其编译（解释）系统、分布式文件系统和分布式数据库系统等。Hadoop是分布式软件系统中文件系统层的软...
本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。
