hadoop安裝指南(非常詳細(xì),包成功)

1、安裝安裝HADOOP集群服務(wù)器集群服務(wù)器1.規(guī)劃規(guī)劃功能功能HOSTNAMEHOSTNAMEIPIP說明說明MasterHDM01192.168.1.1Namenode兼datanodeSlaveHDS02192.168.1.2DatanodeSlaveHDS03192.168.1.3DatanodeClientHDC04192.168.1.4HADOOP客戶端(HDFSHIVE)2.環(huán)境環(huán)境2.1.系統(tǒng)環(huán)境系統(tǒng)環(huán)境安裝centOS6.

2、2=軟件工作站（softwareDevelopmentWkstation）3.Hadoop安裝安裝3.1.安裝和配置安裝和配置SSH、RSYNC(Root用戶用戶)安裝SSH和rsync一般系統(tǒng)自帶了；3.2.創(chuàng)建創(chuàng)建Hadoop運行用戶運行用戶(Root用戶用戶)一般我們不會經(jīng)常使用root用戶運行hadoop，所以要創(chuàng)建一個平常運行和管理Hadoop的用戶；?創(chuàng)建hadoop用戶和用戶組useraddhadoopPS:PS:mast

3、er和slave節(jié)點機都要創(chuàng)建相同的用戶和用戶組，即在所有集群服務(wù)器上都要建hadoop用戶和用戶組。3.3.關(guān)閉防火墻關(guān)閉防火墻(Root用戶用戶)在啟動前關(guān)閉集群中所有機器的防火墻，不然會出現(xiàn)datanode開后又自動關(guān)閉。所以對集群所有服務(wù)器關(guān)閉防火墻：chkconfigiptablesoff查看防火墻狀態(tài)：serviceiptablesstatus192.168.1.2HDS02192.168.1.3HDS03192.168.1

4、.4HDC043.5.配置非配置非root用戶免驗證登錄用戶免驗證登錄SSH（hadoop用戶）用戶）提示：Linux配置ssh是通過欺騙登錄用戶名的。所以上面創(chuàng)建用戶的時候，我們都把3個節(jié)點的username都設(shè)置成hadoop，主要是用戶名必須一致在hadoop用戶的home目錄，即cdhomehadoop下執(zhí)行命令用hadoophadoop用戶登錄用戶登錄（第一二三步分別在每一個節(jié)點上都要執(zhí)行）第一步：sshkeygentrsaP

5、f~.sshid_rsa意思是讀取id_dsa文件默認(rèn)全部是yes安裝和root用戶一樣，會發(fā)現(xiàn)多處2個文件，一個是公開密匙，一個是訪問用戶名字信息的第二步：cat~.sshid_rsa.pub~.sshauthized_keys是把暴露出來的公共密匙按順序?qū)隺uthized_keys中保存第三步：chmod700~.sshchmod600~.sshauthized_keysssh機制很嚴(yán)謹(jǐn)，對文件的權(quán)限要求非常嚴(yán)格我們需要把.ssh

6、文件夾的權(quán)限改為700，默認(rèn)是777authized_keys的權(quán)限這里是對的，600第四步：在主節(jié)點上執(zhí)行下列命令sshHDS02cat~.sshid_rsa.pub~.sshauthized_keyssshHDS03cat~.sshid_rsa.pub~.sshauthized_keysscpauthized_keyshadoop@HDS02:homehadoop.sshscpauthized_keyshadoop@HDS03:ho