Changes between Version 3 and Version 4 of jazz/Hadoop_Lab3

Timestamp:

Mar 24, 2009, 5:29:14 PM (17 years ago)

Author:

waue

Comment:

--

jazz/Hadoop_Lab3

@@ -13 +13 @@
  * 這個實做會架設運作在叢集環境上的Hadoop，因此若是你的電腦還存在著之前的實做一的環境，請先作step 0，以移除掉之前的設定。
 
- * 以下node1_ip代表你node1的ip位址，node2_ip為你node2的ip位址，請查清楚之後作設定
- 
+ * 以下Node_1_IP_Addr代表你node1的ip位址，Node_2_IP_Addr為你node2的ip位址，請查清楚之後作設定
+ 
+ * 為了簡化操作步驟，'''大部分的指令在node1執行即可，不過step2 的安裝java則需要在node2上實機操作喔！'''
 === 清除所有在實做一作過的環境 ===
 
@@ -26 +27 @@
 }}}
 
-=== 設定hostname ===
-
- == step 1. 安裝java ==
+ == step 1. 設定兩台機器登入免密碼 ==
+ 
+ * 在node1上操作
+ 
+{{{
+~$ ssh-keygen -t rsa -f ~/.ssh/id_rsa -P ""
+~$ cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys
+~$ scp -r ~/.ssh Node_2_IP_Addr:~/
+~$ ssh Node_2_IP_Addr
+~$ ssh Node_1_IP_Addr
+~$ exit
+~$ exit
+}}}
+
+ * 完成後請登入確認不用輸入密碼，（第一次登入需按enter鍵，第二次就可以直接登入到系統），以免日後輸入密碼不只手軟而已....
+
+ == step 2. 安裝java ==
 
  * 為兩台電腦安裝java
-
-   * node1 & node2
-   
+   * node1 & node2 都要操作以下指令
 {{{
 ~$ sudo apt-get purge java-gcj-compat
 ~$ sudo apt-get install sun-java6-bin  sun-java6-jdk sun-java6-jre
 }}}
- 
- == step 2. 設定兩台機器登入免密碼 ==
- 
- * 在node1上操作
- 
-{{{
-~$ ssh-keygen -t rsa -f ~/.ssh/id_rsa -P ""
-~$ cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys
-~$ scp -r ~/.ssh node2_ip:~/
-~$ ssh node2_ip
-~$ ssh node1_ip
-~$ exit
-~$ exit
-}}}
-
- * 完成後請登入確認不用輸入密碼，（第一次登入需按enter鍵，第二次就可以直接登入到系統），以免日後輸入密碼不只手軟而已....
+    
 
  == step 3. 下載安裝Hadoop到node1 ==
@@ -103 +101 @@
   <property>
     <name>fs.default.name</name>
-    <value>hdfs://node1_ip:9000/</value>
+    <value>hdfs://Node_1_IP_Addr:9000/</value>
     <description> </description>
   </property>
   <property>
     <name>mapred.job.tracker</name>
-    <value>hdfs://node2_ip:9001</value>
+    <value>hdfs://Node_2_IP_Addr:9001</value>
     <description>  </description>
   </property>
@@ -141 +139 @@
  * 在node1上對遠端node2作開資料夾/opt/hadoop及權限設定
 {{{
-/opt/hadoop$ ssh node2_ip "sudo mkdir /opt/hadoop"
-/opt/hadoop$ ssh node2_ip "sudo chown -R hadoop:hadooper /opt/hadoop"
+/opt/hadoop$ ssh Node_2_IP_Addr "sudo mkdir /opt/hadoop"
+/opt/hadoop$ ssh Node_2_IP_Addr "sudo chown -R hadoop:hadooper /opt/hadoop"
 }}}
 
  * 複製node1的hadoop資料夾到node2上
 {{{
-/opt/hadoop$ scp -r /opt/hadoop/* node2_ip:/opt/hadoop/
+/opt/hadoop$ scp -r /opt/hadoop/* Node_2_IP_Addr:/opt/hadoop/
 }}}
 
@@ -191 +189 @@
  * 在node2上，執行下面的命令啟動Map/Reduce：
 {{{
-$ ssh node2_ip "bin/start-mapred.sh"
+$ ssh Node_2_IP_Addr "bin/start-mapred.sh"
 }}}
 
@@ -200 +198 @@
  * 啟動之後，可以檢查以下網址，來觀看服務是否正常。
  
-   * http://node2_ip:50030/ - Hadoop 管理介面
+   * http://Node_2_IP_Addr:50030/ - Hadoop 管理介面
    * [[Image(hadoop_administration.png)]]
 ------
-   * http://node1_ip:50070/ - Hadoop DFS 狀態
+   * http://Node_1_IP_Addr:50070/ - Hadoop DFS 狀態
    * [[Image(hadoop_dfs_status.png)]]