Changes between Version 17 and Version 18 of NCTU100407
- Timestamp:
- Apr 29, 2010, 3:30:27 PM (15 years ago)
Legend:
- Unmodified
- Added
- Removed
- Modified
-
NCTU100407
v17 v18 42 42 * 以 hadoop 0.20.2 預設的 conf 目錄為輸入,使用 hadoop fs -put conf input 上傳檔案至 HDFS,請嘗試在 wordcount 範例程式中加入 system.out.println,並回答 map() 函數輸入的 key 內容為何?(20%) 43 43 * 乘上題,根據 wordcount 執行過程,當單機執行時,請問同時有幾個 mapper 被執行?並請參考以下圖形,繪製單機運作時 mapper 與 reducer 運作順序。(20%) 44 * [[Image(wiki:NCTU100407:wordcount_ single_mapred.jpg)]]44 * [[Image(wiki:NCTU100407:wordcount_mapred.png)]] 45 45 * 將 wordcount 範例移植到國網中心 hadoop.nchc.org.tw 上運行,請問同時有幾個 mapper 被執行?並請參考以下圖形,繪製單機運作時 mapper 與 reducer 運作順序。(20%) 46 * [[Image(wiki:NCTU100407:wordcount_ cluster_mapred.jpg)]]46 * [[Image(wiki:NCTU100407:wordcount_mapred.png)]] 47 47 * 試根據單機執行與叢集執行的 !JobTracker 網頁( http://localhost:50030 & http://hadoop.nchc.org.tw:50030 )查詢總執行時間,並比較兩者之時間差異。(20%)