Version 11 (modified by shunfa, 14 years ago) (diff) |
---|
課程資訊
- 上課時間: 2011/02/24 (四) ~ 2010/02/25 (五) 09:30 ~ 16:30 2 天,共計 12 個小時
- 上課地點: 國家高速網路與計算中心 新竹事業群(300 新竹市科學工業園區研發六路七號) <地圖> 電腦教室 B
- 報名網頁課程資訊
課程大綱
2011-02-24 (四)
上午時段 課程內容 投影片 實作步驟 錄影 / 補充資料 09:30~11:10 介紹課程 與 雲端運算簡介 Part-00, Part-01(pdf), Part-01(ppt) 1. Parallel Machine Learning Problems
2. 影像處理參考:吳冠龍先生,台大資工系通訊與多媒體實驗室
Image Selection for Large-Scale Flickr Photos using Hadoop
3. ACM 論文:Canonical image selection ...
4. Customizing InputFileFormats for Image Processing in Hadoop,Jeff Conner, Arizona State University11:10~11:20 休息 11:20~11:50 Hadoop簡介 Part-02(pdf), Part-02(ppt) 11:50~12:00 實作A: Hadoop 單機安裝與基本操作 實作A 下午時段 課程內容 投影片 實作步驟 錄影 / 補充資料 13:00~13:30 Hadoop Overview Part-03(pdf), Part-03(ppt) 13:30~14:30 Hadoop Distributed File System簡介 Part-04(pdf), Part-04(ppt) 14:30~14:40 實作B: HDFS 實用指令操作 實作B 14:40~14:50 休息 14:50~15:30 Map Reduce 介紹 Part-05(pdf), Part-05(ppt) 不同語言的 MapReduce 實作 15:30~15:50 實作C: 執行 MapReduce 基本運算 實作C 15:50~16:25 設定參數解析 Part-5.5(pdf), Part-5.5(ppt) 關於 master / slave 設定 16:25~16:30 回家前停止hadoop服務 停止Hadoop
2011-02-25 (五)
- 請先 啟動Hadoop
上午時段 課程內容 投影片 實作步驟 錄影 / 補充資料 09:30~10:30 Map Reduce 程式設計 Part-06(pdf), Part-06(ppt) 更多程式練習範例 10:30~11:00 實作D: Hadoop 程式編譯與執行 實作D 1. 更多教材
2. Streaming 用法11:00~11:10 休息 11:10~12:00 用 Eclipse 開發 hadoop 程式 Demo 基於 NetBeans 的 MapReduce 開發環境 - Hadoop Studio 下午時段 課程內容 投影片 實作步驟 13:00~13:20 Hadoop 應用實例: 搜尋引擎 Nutch 簡介 Part-07(pdf), Part-07(ppt) 實作E 13:20~13:30 Hadoop 應用實例(續): 搜尋引擎 Crawlzilla安裝與使用 Part-07-1(pdf), Part-07-1(pptx) 實作E-1 13:30~14:00 Hadoop 叢集安裝設定解析 Part-08(pdf), Part-08(ppt) Yahoo Hadoop Tutorial:
Module 7: Managing a Hadoop Cluster
- 說明了小中大不同等級叢集可以做的 Hadoop 系統參數調整14:00~15:00 實作F: Hadoop 叢集安裝操作 實作F 15:00~15:30 實作G: Hadoop 叢集進階操作 實作G 15:30~15:40 休息 15:40~16:30 實作H:DRBL 快速佈屬 Hadoop Part-09(pdf), Part-09(ppt) 實作H DRBL-Hadoop Live CD 展示 ( 6 min ) 課程小結 Part-10
Attachments (23)
- 00-1.CourseOutline.pdf (98.0 KB) - added by shunfa 14 years ago.
- 02.HadoopIntro.pdf (257.0 KB) - added by shunfa 14 years ago.
- 04-5.HadoopSetupCommand.pdf (294.8 KB) - added by shunfa 14 years ago.
- 05.MapReduce_0305.pdf (356.2 KB) - added by shunfa 14 years ago.
- 07-1.crawlzilla.pdf (720.5 KB) - added by shunfa 14 years ago.
- 07.Nutch_0305.pdf (474.9 KB) - added by shunfa 14 years ago.
- 08.HadoopCluster_0305.pdf (328.5 KB) - added by shunfa 14 years ago.
- 03.HadoopOverview.pdf (495.9 KB) - added by shunfa 14 years ago.
- 01.CloudIntro.pdf (4.9 MB) - added by jazz 14 years ago.
- 06.MR_Programing_0305.pdf (408.1 KB) - added by shunfa 14 years ago.
- 00-1.CourseOutline.pptx (127.5 KB) - added by shunfa 14 years ago.
- 00.CourseOutline.ppt (12.1 MB) - added by shunfa 14 years ago.
- 01.CloudIntro.ppt (3.8 MB) - added by shunfa 14 years ago.
- 02.HadoopIntro.ppt (467.0 KB) - added by shunfa 14 years ago.
- 03.HadoopOverview.ppt (691.5 KB) - added by shunfa 14 years ago.
- 04.HDFS_0305.ppt (909.0 KB) - added by shunfa 14 years ago.
- 04-5.HadoopSetupCommand.ppt (383.0 KB) - added by shunfa 14 years ago.
- 05.MapReduce_0305.ppt (916.5 KB) - added by shunfa 14 years ago.
- 06.MR_Programing_0305.ppt (907.0 KB) - added by shunfa 14 years ago.
- 07.Nutch_0305.ppt (627.0 KB) - added by shunfa 14 years ago.
- 07-1.crawlzilla.pptx (773.4 KB) - added by shunfa 14 years ago.
- 08.HadoopCluster_0305.ppt (691.5 KB) - added by shunfa 14 years ago.
- 09.HadoopDRBL.ppt (4.0 MB) - added by shunfa 14 years ago.