Version 12 (modified by jazz, 15 years ago) (diff) |
---|
雲端運算基礎課程 (Hadoop簡介、安裝與範例實作)
課程資訊
- 上課時間: 2010/04/27 (二) ~ 2010/04/28 (三) 09:30 ~ 16:30 2 天,共計 12 個小時
- 上課地點: 國家高速網路與計算中心 新竹事業群(300 新竹市科學工業園區研發六路七號) <地圖> 電腦教室 B
- 報名網頁課程資訊
課程大綱
2010-04-27 (二)
上午時段 課程內容 投影片 實作步驟 錄影 / 補充資料 09:30~11:10 介紹課程 與 雲端運算簡介 Part-00, Part-01 1. Parallel Machine Learning Problems
2. 影像處理參考:吳冠龍先生,台大資工系通訊與多媒體實驗室
Image Selection for Large-Scale Flickr Photos using Hadoop
3. ACM 論文:Canonical image selection ...11:10~11:20 休息 11:20~11:50 Hadoop簡介 Part-02 11:50~12:00 實作A: Hadoop 單機安裝與基本操作 實作A 下午時段 課程內容 投影片 實作步驟 錄影 / 補充資料 13:00~13:30 Hadoop Overview Part-03 13:30~14:30 Hadoop Distributed File System簡介 Part-04 14:30~14:40 實作B: HDFS 實用指令操作 實作B 14:40~14:50 休息 14:50~15:40 Map Reduce 介紹 Part-05 不同語言的 MapReduce 實作 15:40~16:00 實作C: 執行 MapReduce 基本運算 實作C 16:00~16:25 設定參數解析 Part-5.5 16:25~16:30 回家前停止hadoop服務 停止Hadoop
2010-04-28 (三)
- 請先 啟動Hadoop
上午時段 課程內容 投影片 實作步驟 錄影 / 補充資料 09:00~10:30 Map Reduce 程式設計 Part-06 10:30~11:00 實作D: Hadoop 程式編譯與執行 實作D 1. Streaming 用法 11:00~11:10 休息 11:10~12:00 Hadoop 應用實例: 搜尋引擎 Nutch 簡介 Part-07 實作E 下午時段 課程內容 投影片 實作步驟 13:00~14:00 Hadoop 叢集安裝設定解析 Part-08 14:00~15:00 實作F: Hadoop 叢集安裝操作 實作F 15:00~15:30 實作G: Hadoop 叢集進階操作 實作G 15:30~15:40 休息 15:40~16:30 實作H:DRBL 快速佈屬 Hadoop Part-09 實作H DRBL-Hadoop Live CD 展示 ( 6 min ) 課程小結 Part-10
- 補充:用 Eclipse 開發 hadoop 程式
- 基於 NetBeans 的 MapReduce 開發環境 - Hadoop Studio - Karmasphere Studio for Hadoop is a Sample screenshot MapReduce development environment (IDE) based on NetBeans.
Attachments (12)
- 08.HadoopCluster.pdf (411.4 KB) - added by waue 15 years ago.
- 07.Nutch.pdf (396.2 KB) - added by waue 15 years ago.
- 20100427_hadoop基礎課程_ppt.zip (9.3 MB) - added by waue 15 years ago.
- 01.CloudIntro.pdf (2.7 MB) - added by jazz 15 years ago.
- 00.CourseOutline.pdf (109.4 KB) - added by jazz 15 years ago.
- 03.HadoopOverview.pdf (495.3 KB) - added by waue 15 years ago.
- 04.HDFS.pdf (530.8 KB) - added by waue 15 years ago.
- 05.MapReduce.pdf (477.7 KB) - added by waue 15 years ago.
- 05-5.HadoopSetupCommand.pdf (521.6 KB) - added by waue 15 years ago.
- 06.MR_Programing.pdf (383.5 KB) - added by waue 15 years ago.
- 02.HadoopIntro.pdf (458.9 KB) - added by waue 15 years ago.
- 06-2.eclipse.pdf (1.4 MB) - added by waue 15 years ago.