Changes between Version 1 and Version 2 of III131019/Lab15


Ignore:
Timestamp:
Oct 19, 2013, 11:40:37 PM (11 years ago)
Author:
jazz
Comment:

--

Legend:

Unmodified
Added
Removed
Modified
  • III131019/Lab15

    v1 v2  
    1 [[PageOutline]]
    2 
    31◢ <[wiki:III131019/Lab14 實作十四]> | <[wiki:III131019 回課程大綱]> ▲ | <[wiki:III131019/Lab16 實作十六]> ◣
    42
     
    97<p style="text-align: center;"><big style="font-weight: bold;"><big>從 WordCount 範例學習新版 Hadoop MapReduce 的程式組成結構<br/>Learning Hadoop MapReduce Code Structure from WordCount Example</big></big></p>
    108}}}
     9
     10[[PageOutline]]
     11
     12{{{
     13#!text
     14請先連線至 nodeN.3du.me , N 為您的報名編號
     15}}}
     16
     17== STEP 1 : 開啟另一個連線視窗 ==
     18
     19 * ssh://nodeN.3du.me - 其中 N 為您的報名編號
     20 * http://nodeN.3du.me:50030 - 其中 N 為您的報名編號
     21 * 並且在另一個連線視窗中執行以下的指令
     22{{{
     23jps
     24watch -d -n 1 "jps; hadoop job -list"
     25}}}
     26
     27== STEP 2 : 執行 MapReduce 任務 ==
     28
     29 * 讓我們來觀察一下,當執行 MapReduce 任務時,發生了什麼事情?
     30{{{
     31cd ~/hadoop_labs/lab007
     32ant
     33hadoop fs -rmr input output
     34hadoop fs -put ~/hadoop/conf input
     35hadoop jar WordCount.jar input output
     36}}}
     37
     38 * 提交任務後,請觀察另一個視窗 jps 結果的變化,並且觀察 50030 頁面的變化(需自行按 F5 更新畫面)。
     39
     40 * 切換到單機模式,讓我們重新執行一次 WordCount.jar
     41{{{
     42export HADOOP_CONF_DIR=~/hadoop/conf.local/
     43hadoop fs -put ~/hadoop/conf local-input
     44hadoop jar WordCount.jar local-input local-output
     45unset HADOOP_CONF_DIR
     46}}}