close Warning: Can't synchronize with repository "(default)" (Unsupported version control system "svn": /usr/lib/python2.7/dist-packages/libsvn/_fs.so: failed to map segment from shared object: Cannot allocate memory). Look in the Trac log for more information.

Changes between Initial Version and Version 1 of III131019/Lab2


Ignore:
Timestamp:
Oct 19, 2013, 12:28:50 AM (11 years ago)
Author:
jazz
Comment:

--

Legend:

Unmodified
Added
Removed
Modified
  • III131019/Lab2

    v1 v1  
     1[[PageOutline]]
     2
     3◢ <[wiki:III131019/Lab1 實作一]> | <[wiki:III131019 回課程大綱]> ▲ | <[wiki:III131019/Lab3 實作三]> ◣
     4
     5= 實作二 Lab2 =
     6
     7{{{
     8#!html
     9<p style="text-align: center;"><big style="font-weight: bold;"><big>偽分散模式<br/>Pseudo-Distributed Mode</big></big></p>
     10}}}
     11
     12{{{
     13#!text
     14請先連線至 nodeN.3du.me , N 為您的報名編號
     15}}}
     16
     17 * 請剪貼以下的步驟:
     18{{{
     19user@node1:~$ cd ~/hadoop_labs/
     20user@node1:~/hadoop_labs$ lab001/hadoop-pseudo-mode
     21}}}
     22 * 觀察 java process 個數
     23{{{
     24user@node1:~/hadoop_labs$ jps
     25}}}
     26
     27 * 觀察開了哪些 port,綁在哪個 IP 位址
     28{{{
     29### 取得 NameNode 的 java process id
     30user@node1:~/hadoop_labs$ NN=$(jps | grep NameNode | awk '{ print $1 }')
     31user@node1:~/hadoop_labs$ echo $NN
     32## 查詢 NameNode 開了哪些 port
     33user@node1:~/hadoop_labs$ netstat -nap | grep $NN | grep "LISTEN" | grep ":" | nl
     34}}}
     35
     36 * 使用 hadoop fs -ls 指令來觀察目錄結構
     37{{{
     38user@node1:~/hadoop_labs$ hadoop fs -ls
     39ls: Cannot access .: No such file or directory.
     40user@node1:~/hadoop_labs$ hadoop fs -ls /
     41Found 1 items
     42drwxr-xr-x   - user supergroup          0 2013-06-29 12:25 /home
     43}}}
     44 
     45 * 使用 hadoop fs -mkdir tmp 指令來建立一個空的 tmp 目錄
     46{{{
     47user@node1:~/hadoop_labs$ hadoop fs -mkdir tmp
     48user@node1:~/hadoop_labs$ hadoop fs -ls
     49Found 1 items
     50drwxr-xr-x   - user supergroup          0 2013-06-29 12:44 /user/user/tmp
     51user@node1:~/hadoop_labs$ hadoop fs -ls tmp
     52user@node1:~/hadoop_labs$ ls tmp
     53ls: cannot access tmp: No such file or directory
     54}}}
     55
     56 * 用 hadoop fs -put 指令上傳資料到 HDFS
     57{{{
     58user@node1:~/hadoop_labs$ hadoop fs -put ${HOME}/hadoop/conf.local input
     59user@node1:~/hadoop_labs$ hadoop fs -ls
     60Found 2 items
     61drwxr-xr-x   - user supergroup          0 2013-06-29 12:51 /user/user/input
     62drwxr-xr-x   - user supergroup          0 2013-06-29 12:44 /user/user/tmp
     63}}}
     64
     65== 實作習題 ==
     66
     67 <問題 1> 當您下 jps 指令之後,除了 jps 以外,看到幾個 java process ?
     68{{{
     69#!text
     70    (A) 0,只有 jps 一個結果
     71    (B) 1
     72    (C) 2
     73    (D) 3
     74    (E) 4
     75}}}
     76
     77 <問題 2> 當您下 netstat -nap | grep $NN | grep "LISTEN" | grep ":" | nl 指令之後, 觀察到 NameNode 開了幾個連線埠(Port)呢?
     78{{{
     79#!text
     80    (A) 1
     81    (B) 2
     82    (C) 3
     83    (D) 4
     84}}}
     85
     86 < 問題 3 > 執行 hadoop fs -mkdir tmp 指令,對本機工作目錄有何影響?
     87{{{
     88#!text
     89    (A) 在工作目錄底下多了一個 tmp 目錄
     90    (B) 工作目錄沒有任何改變
     91}}}
     92
     93 < 問題 4 > 執行 hadoop fs -put 指令,對本機工作目錄有何影響?
     94{{{
     95#!text
     96    (A) 在工作目錄底下多了一個 input 目錄
     97    (B) 工作目錄沒有任何改變
     98}}}
     99
     100 < 問題 5 > Local Mode 與 Pseudo-Distributed Mode 對"相對路徑"的認定差異,以下哪些陳述是正確的? (複選)
     101{{{
     102#!text
     103    (A) Local Mode 以目前工作目錄(pwd), 為相對路徑參考
     104    (B) Local Mode 以根目錄(/), 為相對路徑參考
     105    (C) Local Mode 以使用者家目錄(/home/$USER), 為相對路徑參考
     106    (D) Pseudo-Distributed Mode 以目前工作目錄(pwd), 為相對路徑參考
     107    (E) Pseudo-Distributed Mode 以根目錄(/), 為相對路徑參考
     108    (F) Pseudo-Distributed Mode 以使用者家目錄(/user/$USER), 為相對路徑參考
     109}}}