Changes between Initial Version and Version 1 of III140412/Lab19


Ignore:
Timestamp:
Apr 11, 2014, 11:29:48 PM (11 years ago)
Author:
jazz
Comment:

--

Legend:

Unmodified
Added
Removed
Modified
  • III140412/Lab19

    v1 v1  
     1◢ <[wiki:III140412/Lab18 實作十八]> | <[wiki:III140412 回課程大綱]> ▲ | <[wiki:III140412/Lab20 實作二十]> ◣
     2
     3= 實作十九 Lab19 =
     4
     5{{{
     6#!html
     7<p style="text-align: center;"><big style="font-weight: bold;"><big>觀察 Mapper 中間產物<br/>Job.setNumReduceTasks(0) </big></big></p>
     8}}}
     9
     10[[PageOutline]]
     11
     12{{{
     13#!text
     14請先連線至 nodeN.3du.me , N 為您的報名編號
     15}}}
     16
     17 * 透過將 Reducer 個數強制設為 0,可以觀察 Mapper 的結果是否如您預期。
     18{{{
     19cd ~/hadoop_labs/lab010
     20sed -i 's#setNumReduceTasks(2)#setNumReduceTasks(0)#g' ~/hadoop_labs/lab010/src/WordCount.java
     21ant
     22hadoop fs -rmr output
     23hadoop jar WordCount.jar input output
     24hadoop fs -ls output
     25hadoop fs -cat output/part*
     26}}}
     27
     28== 實作習題 ==
     29
     30 <問題 1> 請問執行任務時,同時有幾個 Mapper?
     31{{{
     32#!text
     33      (A) 0
     34      (B) 1
     35      (C) 8
     36      (D) 同 input 目錄檔案區塊個數
     37}}}
     38
     39 <問題 2> 請問執行任務後,最後產生幾個輸出檔?
     40{{{
     41#!text
     42      (A) 0
     43      (B) 1
     44      (C) 8
     45      (D) 同 input 目錄檔案區塊個數
     46}}}