且构网

分享程序员开发的那些事...
且构网 - 分享程序员编程开发的那些事

《Hadoop实战第2版》——2.6节本章小结

更新时间:2022-06-06 05:31:01

2.6 本章小结
本章主要讲解了Hadoop的安装和配置过程。Hadoop的安装过程并不复杂,基本配置也简单明了,其中有几个关键点:
Hadoop主要是用Java语言写的,它无法使用一般Linux预装的OpenJDK,因此在安装Hadoop前要先安装JDK(版本要在1.6以上);
作为分布式系统,Hadoop需要通过SSH的方式启动处于slave上的程序,因此必须安装和配置SSH。
由此可见,在安装Hadoop前需要安装JDK及SSH。
Hadoop在Mac OS X上的安装与Linux雷同,在Windows系统上的安装与在Linux上有一点不同,就是在Windows系统上需要通过Cygwin模拟Linux环境,而SSH的安装也需要在安装Cygwin时进行选择,请不要忘了这一点。
集群配置只要记住conf/Hadoop-env.sh、conf/core-site.xml、conf/hdfs-site.xml、conf/mapred-site.xml、conf/mapred-queues.xml这5个文件的作用即可,另外Hadoop有些配置是可以在程序中修改的,这部分内容不是本章的重点,因此没有详细说明。