wiki:NCHCCloudCourse120530

Version 6 (modified by jazz, 12 years ago) (diff)

--

雲端運算基礎課程(一)
Hadoop簡介、安裝與範例實作

課程資訊

  • 上課時間: 2012/05/30 (三) ~ 2012/05/31 (四) 09:30 ~ 16:30 2 天,共計 12 個小時
  • 上課地點: 國家高速網路與計算中心 中部事業群(40763 台中市中部科學工業園區科園路22號) <地圖> 電腦教室 A
  • 報名網頁課程資訊

課程大綱

2012-05-30 (三)

上午時段 課程內容 投影片 實作步驟 錄影 / 補充資料
09:30~11:00 淺談海量資料的趨勢、挑戰與因應對策
處理海量資料的資訊架構與關鍵技術
Part-01(pdf)
11:00~11:10 休息
11:10~11:50 Hadoop簡介 Part-02(pdf), Part-02(ppt)
11:50~12:00 實作A: Hadoop 單機安裝與基本操作 實作A
下午時段 課程內容 投影片 實作步驟 錄影 / 補充資料
13:00~13:30 Hadoop Overview Part-03(pdf), Part-03(ppt)
13:30~14:30 Hadoop Distributed File System簡介 Part-04(pdf), Part-04(ppt)
14:30~14:40 實作B: HDFS 實用指令操作 實作B
14:40~14:50 休息
14:50~15:30 Map Reduce 介紹 Part-05(pdf), Part-05(ppt) 不同語言的 MapReduce 實作
15:30~15:50 實作C: 執行 MapReduce 基本運算 實作C
15:50~16:25 設定參數解析 Part-5.5(pdf), Part-5.5(ppt) 關於 master / slave 設定
16:25~16:30 回家前停止hadoop服務 停止Hadoop

2012-05-31 (四)

上午時段 課程內容 投影片 實作步驟 錄影 / 補充資料
09:30~10:30 Map Reduce 程式設計 Part-06(pdf), Part-06(ppt) 更多程式練習範例
10:30~11:00 實作D: Hadoop 程式編譯與執行 實作D 1. 更多教材
2. Streaming 用法
11:00~11:10 休息
11:10~12:00 用 Eclipse 開發 hadoop 程式 Demo 基於 Netbeans IDE 6.9.1 正體中文版 安裝 KamaSphere Studio 社群版
下午時段 課程內容 投影片 實作步驟
13:00~13:20 Hadoop 應用實例: 搜尋引擎 Nutch 簡介 Part-07(pdf), Part-07(ppt) 實作E
13:20~13:30 Hadoop 應用實例(續): 搜尋引擎 Crawlzilla安裝與使用 Part-07-1(pdf), Part-07-1(pptx) 實作E-1
13:30~14:00 Hadoop 叢集安裝設定解析 Part-08(pdf), Part-08(ppt) Yahoo Hadoop Tutorial:
Module 7: Managing a Hadoop Cluster
- 說明了小中大不同等級叢集可以做的 Hadoop 系統參數調整
14:00~15:00 實作F: Hadoop 叢集安裝操作 實作F
15:00~15:30 實作G: Hadoop 叢集進階操作 實作G
15:30~15:40 休息
15:40~16:30 實作H:DRBL 快速佈屬 Hadoop Part-09(pdf), Part-09(ppt) 實作H DRBL-Hadoop Live CD 展示 ( 6 min )
課程小結 Part-10

補充

  • Google 的伺服器設計與 Facebook 的開放運算計畫

Attachments (5)