Version 2 (modified by jazz, 11 years ago) (diff) |
---|
◢ <實作零?> | <回課程大綱> ▲ | <實作二> ◣
實作一 Lab1
單機模式
Local (Standalone) Mode
Local (Standalone) Mode
請先連線至 nodeN.3du.me , N 為您的報名編號
- 首先, 我們來介紹 Hadoop 的三種安裝模式
- <參考> http://hadoop.apache.org/docs/stable/single_node_setup.html
Now you are ready to start your Hadoop cluster in one of the three supported modes: * Local (Standalone) Mode * Pseudo-Distributed Mode * Fully-Distributed Mode
- 開始動手吧~請剪貼以下的步驟:
user@node1:~$ cd ~/hadoop_labs user@node1:~/hadoop_labs$ lab000/hadoop-local-mode
- 等待安裝的過程中,讓我們來講解 hadoop-local-mode 這隻 Shell Script 做了哪些事情。
- 安裝 Java Runtime Environment (JRE) 與 Java Development Kit (JDK) - 雖然目前 Oracle 已經釋出 JDK/JRE7,但 JDK/JRE 6 還是 Hadoop 開發者有經過大量測試驗證的版本。未來若要進行商業運轉,建議安裝 CDH4 或 HDP 搭配 JRE7。
- 下載 hadoop-$VERSION.tar.gz
- 解壓縮到 ${HOME}/hadoop
- 設定 ${HOME}/hadoop/conf.local/hadoop-env.sh
- 設定 ${HOME}/.bashrc 加入 PATH 環境變數
- 安裝完成,首先先讓我們觀察有幾個 java process
user@node1:~/hadoop_labs$ jps
- 觀察有沒有開 port
user@node1:~/hadoop_labs$ netstat -nap | grep java
- 讓我們來複習一下 HDFS 的基本操作
user@node1:~/hadoop_labs$ cd ~ user@node1:~$ ls user@node1:~$ source ~/.bashrc user@node1:~$ hadoop fs -ls user@node1:~$ hadoop fs -mkdir tmp user@node1:~$ hadoop fs -ls user@node1:~$ ls user@node1:~$ hadoop fs -put ${HOME}/hadoop/conf.local input user@node1:~$ hadoop fs -ls user@node1:~$ ls
實作習題
試回答以下問題:
- 當您下 jps 指令之後,除了 jps 以外,看到幾個 java process ?
(A) 0,只有 jps 一個結果 (B) 1 (C) 2 (D) 3 (E) 4
- 回到家目錄,執行 hadoop fs -ls 指令,您看到的結果跟直接下 ls 有無不同?
(A) hadoop fs -ls 會顯示完整路徑,並將隱藏檔案也秀出來. ls 只會秀出一般的檔案 (B) 顯示 can not access
- 在家目錄, 執行 hadoop fs -mkdir tmp 指令,對家目錄有何影響?
(A) 在家目錄底下多了一個 tmp 目錄 (B) 家目錄沒有任何改變