虛拟機安裝(七)|環境搭建--測試Hadoop叢集-單詞統計

七、 測試Hadoop叢集-單詞統計

1. Ip映射

進入到Windows/System32/drivers/etc目錄下

打開hosts檔案

添加

192.168.121.134 hadoop01
192.168.121.135 hadoop02
192.168.121.136 hadoop03
           

2. 關閉防火牆

三個伺服器都關閉防火牆和關閉開機啟動

service iptables stop
           

檢查

chkconfig iptables off
           

3. 再次啟動hdfs和yarn程序

start-dfs.sh
           

start-yarn.sh
           

打開浏覽器，通路

和

4. 建立一個目錄，建立單詞統計txt檔案

mkdir -p /export/data
           

vi word.txt
           

檢視

ls
           

5. 在hadoop裡建立檔案目錄，并将txt檔案上傳到hadoop

hadoop fs -mkdir -p /wordcount/input
           

hadoop fs -put /export/data/word.txt /wordcount/input
           

6. 進入mapreduce目錄，

ls
           

ls
           

ls
           

運作單詞統計jar

執行指令：

hadoop jar hadoop-mapreduce-examples-2.7.4.jar wordcount /wordcount/input /wordcount/output
           

7. 完成

重新整理浏覽器，檢視