Changes between Version 4 and Version 5 of Hadoop4Win


Ignore:
Timestamp:
Jan 25, 2010, 3:00:26 PM (14 years ago)
Author:
jazz
Comment:

--

Legend:

Unmodified
Added
Removed
Modified

  • Hadoop4Win

    v4 v5  
    1919
    2020 * STEP 1 : 首先下載 hadoop4win 任一版本，並存至硬碟(如 D:)。使用 Windows XP 以上版本內建的解壓縮工具將 zip 壓縮檔解開。
    21 
    22 [[Image(hadoop4win_01.jpg,width=600)]]
    23 
     21   * [[Image(hadoop4win_01.jpg,width=600)]]
    2422 * STEP 2 : 在 hadoop4win-setup 目錄中，執行 hadoop4win-setup.bat 批次檔。
    25   * 註：預設將安裝到 C:/hadoop4win 中，若因硬碟存取權限較嚴格，需修改安裝路徑，請自行修改 hadoop4win-setup.bat。
    26 
    27 [[Image(hadoop4win_02.jpg,width=600)]]
    28 
     23   * 註：預設將安裝到 C:/hadoop4win 中，若因硬碟存取權限較嚴格，需修改安裝路徑，請自行修改 hadoop4win-setup.bat。
     24   * [[Image(hadoop4win_02.jpg,width=600)]]
    2925 * STEP 3 : 一開始會出現 Cygwin 的安裝畫面，按『下一步(N)』開始安裝。
    30 
    31 [[Image(hadoop4win_03.jpg,width=600)]]
    32 
    33  * STEP 4 : 接著批次程式將會把 Hadoop 單機版所需之 Java 開發環境 (JDK 1.6.0 update 18)與 Hadoop 0.20.1 壓縮檔拷貝至安裝目錄。若您下載的是網路安裝版本，會看到批次檔先從網路上下載兩個壓縮檔，才開始安裝。
    34 
    35 [[Image(hadoop4win_04.jpg,width=600)]]
    36 [[Image(hadoop4win_05.jpg,width=600)]]
    37 
    38  * STEP 5 :
    39 
    40 [[Image(hadoop4win_06.jpg,width=600)]]
    41 [[Image(hadoop4win_07.jpg,width=600)]]
    42 [[Image(hadoop4win_08.jpg,width=600)]]
    43 [[Image(hadoop4win_09.jpg,width=600)]]
    44 [[Image(hadoop4win_10.jpg,width=600)]]
    45 [[Image(hadoop4win_11.jpg,width=600)]]
    46 [[Image(hadoop4win_12.jpg,width=600)]]
    47 [[Image(hadoop4win_13.jpg,width=600)]]
    48 [[Image(hadoop4win_14.jpg,width=600)]]
    49 [[Image(hadoop4win_15.jpg,width=600)]]
    50 [[Image(hadoop4win_16.jpg,width=600)]]
    51 [[Image(hadoop4win_17.jpg,width=600)]]
    52 [[Image(hadoop4win_18.jpg,width=600)]]
     26   * [[Image(hadoop4win_03.jpg,width=600)]]
     27 * 接著批次程式將會把 Hadoop 單機版所需之 Java 開發環境 (JDK 1.6.0 update 18)與 Hadoop 0.20.1 壓縮檔拷貝至安裝目錄。若您下載的是網路安裝版本，會看到批次檔先從網路上下載兩個壓縮檔，才開始安裝。
     28   * [[Image(hadoop4win_04.jpg,width=600)]]
     29 * STEP 4 : 當拷貝完成後會進入 Cygwin 視窗。此時，請輸入指令『__'''hadoop4win-init'''__』。
     30{{{
     31$ hadoop4win-init
     32}}}
     33   * [[Image(hadoop4win_05.jpg,width=600)]]
     34 * 此初始化指令將會進行 JDK 與 Hadoop 解壓縮動作
     35   * [[Image(hadoop4win_06.jpg,width=600)]]
     36   * [[Image(hadoop4win_07.jpg,width=600)]]
     37 * 最後將會執行 Hadoop Namenode 的格式化
     38   * [[Image(hadoop4win_08.jpg,width=600)]]
     39 * STEP 5 : 按下__'''任意鍵'''__會依序啟動 Hadoop Name Node, Data Node, Job Tracker, Task Tracker
     40   * [[Image(hadoop4win_09.jpg,width=600)]]
     41 * 並使用預設瀏覽器依序開啟 http://localhost:50030 與 http://localhost:50070 (若使用 IE 可能會只看到一個畫面)
     42   * [[Image(hadoop4win_10.jpg,width=600)]]
     43   * [[Image(hadoop4win_11.jpg,width=600)]]
     44 * STEP 6 : 此時系統已完成 Hadoop 0.20.1 的 tar ball 安裝，可以參考 [http://www.classcloud.org/media 國網中心雲端運算課程(一)] 之教學進行相關測試。目前將 Hadoop 0.20.1 安裝於 /opt/hadoop 路徑下，故使用者必須先切換至該目錄才能進行相關指令操作。
     45{{{
     46$ cd /opt/hadoop
     47}}}
     48 * 練習 HDFS 指令: 『__'''bin/hadoop fs -put <local file/dir> <HDFS file/dir>'''__』
     49{{{
     50$ bin/hadoop fs -input conf-org input
     51}}}
     52   * [[Image(hadoop4win_12.jpg,width=600)]]
     53 * 練習 HDFS 指令: 『__'''bin/hadoop fs -lsr <HDFS file/dir>'''__』
     54{{{
     55$ bin/hadoop fs -lsr
     56}}}
     57   * [[Image(hadoop4win_13.jpg,width=600)]]
     58 * 練習 MapReduce 丟 Job 指令: 『__'''bin/hadoop jar <local jar file> <class name> <parameters>'''__』
     59{{{
     60$ bin/hadoop jar hadoop-0.20.1-examples.jar wordcount input output
     61}}}
     62   * [[Image(hadoop4win_14.jpg,width=600)]]
     63   * [[Image(hadoop4win_15.jpg,width=600)]]
     64   * [[Image(hadoop4win_16.jpg,width=600)]]
     65   * [[Image(hadoop4win_17.jpg,width=600)]]
     66   * [[Image(hadoop4win_18.jpg,width=600)]]