Changes between Version 44 and Version 45 of Hadoop4Win

Timestamp:

May 26, 2010, 10:06:11 PM (16 years ago)

Author:

jazz

Comment:

--

Hadoop4Win

@@ -66 +66 @@
  * STEP 3 : 一開始會出現 Cygwin 的安裝畫面，按『下一步(N)』開始安裝。
    * [[BR]][[Image(hadoop4win_03.jpg,width=600)]]
- * 接著批次程式將會把 Hadoop 單機版所需之 Java 開發環境 (JDK 1.6.0 update 18)與 Hadoop 0.20.1 壓縮檔拷貝至安裝目錄。若您下載的是網路安裝版本，會看到批次檔先從網路上下載兩個壓縮檔，才開始安裝。
+ * 接著批次程式將會把 Hadoop 單機版所需之 Java 開發環境 (JDK 1.6.0 update 18)、 Hadoop 0.20.2 與 HBase 0.20.4 壓縮檔拷貝至安裝目錄。若您下載的是網路安裝版本，會看到批次檔先從網路上下載三個壓縮檔，才開始安裝。
    * [[BR]][[Image(hadoop4win_04.jpg,width=600)]]
- * STEP 4 : 當拷貝完成後會進入 Cygwin 視窗。此時，請輸入指令『__'''hadoop4win-init'''__』。
+ * 程式會自動執行 '''hadoop4win-init''' 與 '''hbase-init''' 兩個指令，進行 Hadoop 與 HBase 的安裝。
 {{{
 $ hadoop4win-init
 }}}
    * [[Image(hadoop4win_05.jpg,width=600)]]
- * 此初始化指令將會進行 JDK 與 Hadoop 解壓縮動作
+ * 此初始化指令將會進行 JDK 、 Hadoop 與 HBase 解壓縮動作
    * [[BR]][[Image(hadoop4win_06.jpg,width=600)]]
    * [[BR]][[Image(hadoop4win_07.jpg,width=600)]]
- * 最後將會執行 Hadoop Namenode 的格式化
+ * 然後將會執行 Hadoop Namenode 的格式化
    * [[BR]][[Image(hadoop4win_08.jpg,width=600)]]
- * STEP 5 : 按下__'''任意鍵'''__會依序啟動 Hadoop Name Node, Data Node, Job Tracker, Task Tracker
+ * 隨即依序啟動 Hadoop Name Node, Data Node, Job Tracker, Task Tracker
    * [[BR]][[Image(hadoop4win_09.jpg,width=600)]]
- * 並使用預設瀏覽器依序開啟 http://localhost:50030 與 http://localhost:50070 (若使用 IE 可能會只看到一個畫面)
+ * 並使用預設瀏覽器依序開啟 http://localhost:50030 與 http://localhost:50070 (若使用 IE 可能會只看到一個畫面，Firefox 則會看到兩個分頁)
    * [[BR]][[Image(hadoop4win_10.jpg,width=600)]]
    * [[BR]][[Image(hadoop4win_11.jpg,width=600)]]
+ * 最後會解壓縮 HBase，並進行單機版 HBase 的設定，當完成 HBase 安裝後，您會看到以下的畫面。
+   * [[BR]][[Image(hadoop4win_18.jpg,width=600)]]
 
 == 測試方法 ==
 
- * STEP 6 : 此時系統已完成 Hadoop 0.20.1 的 tar ball 安裝，可以參考 [http://www.classcloud.org/media 國網中心雲端運算課程(一)] 之教學進行相關測試。目前將 Hadoop 0.20.1 安裝於 /opt/hadoop 路徑下，故使用者必須先切換至該目錄才能進行相關指令操作。
+=== 測試 Hadoop 的步驟 ===
+
+ * STEP 4 : 此時系統已完成 Hadoop 0.20.2 的 tar ball 安裝，可以參考 [http://www.classcloud.org/media 國網中心雲端運算課程(一)] 之教學進行相關測試。目前將 Hadoop 0.20.2 安裝於 /opt/hadoop 路徑下，故使用者必須先切換至該目錄才能進行相關指令操作。
 {{{
 $ cd /opt/hadoop
 }}}
- * STEP 7 : 練習 HDFS 指令: 『__'''bin/hadoop fs -put <local file/dir> <HDFS file/dir>'''__』
+ * STEP 5 : 練習 HDFS 指令: 『__'''bin/hadoop fs -put <local file/dir> <HDFS file/dir>'''__』
 {{{
 $ bin/hadoop fs -put conf-org input
 }}}
    * [[Image(hadoop4win_12.jpg,width=600)]]
- * STEP 8 : 練習 HDFS 指令: 『__'''bin/hadoop fs -lsr <HDFS file/dir>'''__』
+ * STEP 6 : 練習 HDFS 指令: 『__'''bin/hadoop fs -lsr <HDFS file/dir>'''__』
 {{{
 $ bin/hadoop fs -lsr
 }}}
    * [[Image(hadoop4win_13.jpg,width=600)]]
- * STEP 9 : 練習 MapReduce 丟 Job 指令: 『__'''bin/hadoop jar <local jar file> <class name> <parameters>'''__』
+ * STEP 7 : 練習 MapReduce 丟 Job 指令: 『__'''bin/hadoop jar <local jar file> <class name> <parameters>'''__』
 {{{
 $ bin/hadoop jar hadoop-0.20.1-examples.jar wordcount input output
 }}}
    * [[Image(hadoop4win_14.jpg,width=600)]]
- * STEP 10 : 練習從 http://localhost:50030 查看目前 MapReduce Job 的運作情形
+ * STEP 8 : 練習從 http://localhost:50030 查看目前 MapReduce Job 的運作情形
    * [[BR]][[Image(hadoop4win_15.jpg,width=600)]]
- * STEP 11 : 欲離開 Cygwin 環境前或者要暫時關閉 Hadoop 系統時，請輸入指令『__'''stop-hadoop'''__』。
+ * STEP 9 : 欲離開 Cygwin 環境前或者要暫時關閉 Hadoop 系統時，請輸入指令『__'''stop-hadoop'''__』。
 {{{
 $ stop-hadoop
 }}}
    * [[Image(hadoop4win_16.jpg,width=600)]]
- * STEP 12 : 欲重新啟動 Hadoop 系統時，請輸入指令『__'''start-hadoop'''__』。
+ * STEP 10 : 欲重新啟動 Hadoop 系統時，請輸入指令『__'''start-hadoop'''__』。
 {{{
 $ start-hadoop
 }}}
    * [[Image(hadoop4win_17.jpg,width=600)]]
+
+=== 測試 HBase 的步驟 ===
+
+
 
 == 已知問題 ==
@@ -123 +131 @@
    * [[BR]][[Image(hadoop4win_18.jpg,width=600)]]
 
+ * 由於 Cygwin 的路徑並無法正常被 Hadoop 解析，亦即 Hadoop 經過 Windows OS 告知路徑為 C:\hadoop4win\opt\hadoop\ 但在 Cygwin 中卻為 \opt\hadoop。因此倘若您看到 Path not found 的問題，可用 cygpath 解決。例如：
+
  * [備註] 若需要重新啟動 Cygwin 環境，請至 C:\hadoop4win 目錄執行 cygwin.bat 批次檔