雲端運算基礎課程(一)
Hadoop簡介、安裝與範例實作

課程資訊

• 上課時間： 2012/10/15 (一) ～ 2012/10/16 (二) 09:30 ～ 16:30 2 天，共計 12 個小時
• 上課地點： 國家高速網路與計算中心 台南事業群(74147 台南市新市區南科三路28號) <​地圖> 電腦教室(一)
• ​報名網頁課程資訊

課程大綱

2012/10/15 (一)

上午時段	課程內容	投影片	實作步驟	錄影 / 補充資料
09:30~11:10	介紹課程 與 雲端運算簡介	Part-00, Part-01(pdf), Part-01(ppt)		1. ​Parallel Machine Learning Problems 2. 影像處理參考：吳冠龍先生，台大資工系通訊與多媒體實驗室 Image Selection for Large-Scale Flickr Photos using Hadoop 3. ACM 論文:​Canonical image selection ... 4. ​Customizing InputFileFormats for Image Processing in Hadoop,Jeff Conner, Arizona State University
11:10~11:20	休息
11:20~11:50	Hadoop簡介	Part-02(pdf), Part-02(ppt)
11:50~12:00	實作A： Hadoop 單機安裝與基本操作		實作A
下午時段	課程內容	投影片	實作步驟	錄影 / 補充資料
13:00~13:30	Hadoop Overview	Part-03(pdf), Part-03(ppt)
13:30~14:30	Hadoop Distributed File System簡介	Part-04(pdf), Part-04(ppt)
14:30~14:40	實作B： HDFS 實用指令操作		實作B
14:40~14:50	休息
14:50~15:30	Map Reduce 介紹	Part-05(pdf), Part-05(ppt)		​不同語言的 MapReduce 實作
15:30~15:50	實作C： 執行 MapReduce 基本運算		實作C
15:50~16:25	設定參數解析	Part-5.5(pdf), Part-5.5(ppt)		​關於 master / slave 設定
16:25~16:30	回家前停止hadoop服務		停止Hadoop

2012/10/16 (二)

• 請先 啟動Hadoop

上午時段	課程內容	投影片	實作步驟	錄影 / 補充資料
09:30~10:30	Map Reduce 程式設計	Part-06(pdf), Part-06(ppt)		更多程式練習範例
10:30~11:00	實作D： Hadoop 程式編譯與執行		實作D	1. 更多教材 2. Streaming 用法
11:00~11:10	休息
11:10~12:00	用 Eclipse 開發 hadoop 程式		Demo	基於 NetBeans 的 MapReduce 開發環境 - ​Hadoop Studio ​Eclipse3.3
下午時段	課程內容	投影片	實作步驟
13:00~13:30	Hadoop 應用實例： 搜尋引擎 Nutch 簡介	Part-07(pdf), Part-07(ppt)	實作E
13:30~13:50	Hadoop 應用實例(續)： 搜尋引擎 Crawlzilla安裝與使用	Part-07-1(pdf), Part-07-1(pptx)	實作E-1
13:50~14:20	Hadoop 叢集安裝設定解析	Part-08(pdf), Part-08(ppt)		Yahoo Hadoop Tutorial: ​Module 7: Managing a Hadoop Cluster - 說明了小中大不同等級叢集可以做的 Hadoop 系統參數調整
14:20~15:50	實作F： Hadoop 叢集安裝操作		實作F
15:50~15:10	實作G： Hadoop 叢集進階操作		實作G
16:10~16:20	休息
16:20~16:30	實作H：DRBL 快速佈屬 Hadoop	Part-09(pdf), Part-09(ppt)	實作H	​DRBL-Hadoop Live CD 展示 ( 6 min )
	課程小結	Part-10