= 2009-06-06 = * 排解 Hadoop 實驗叢集磁碟空間不足的問題 * [狀況] 當執行使用者的 Map/Reduce 程式時,DRBL Server 的磁碟空間會使用到 100% 而出現 no space left 的訊息 * [追蹤] 使用 watch -n 1 -d du -sh /var/lib/hadoop 追出 mapreduce 目錄下的 jobcache 計算時會不斷長大。 * [解法] 本來 DRBL Hadoop 只有掛載 Client 硬碟到 /var/lib/hadoop/cache/hadoop/dfs/data,由這個使用案例來看,我們應該要掛載到 /var/lib/hadoop 也就是同時給 DFS 跟 MapReduce 用。 * HADOOP-FAQ1 : 使用 ntpdate 更新時間後,Datanode 與 Tasktracker 部分離線。 * 因為 Hadoop 會有 heartbeat 檢查,因此如果跑 ntpdate 後,時間差距太大,會造成系統誤判 Datanode 與 Tasktracker 為 Dead Node。 * HADOOP-FAQ2 : 如何取消 Hadoop Namenode 的 Safe mode * [狀況] Tasktracker 無法正常加入,log 顯示 namenode 處於 safe mode。 * [參考] [http://www.mail-archive.com/hadoop-user@lucene.apache.org/msg01486.html Re: Safe mode is ON] * [解法] 確認 Datanode 已加入,然後使用指令離開 Safe Mode {{{ sudo su -s /bin/sh hadoop -c "hadoop dfsadmin -safemode leave" }}} == Open Source == * [http://creativecommons.org.tw/static/license 創用 CC 授權條款一覽] * [http://govforge.e-land.gov.tw/modules/news/article.php?storyid=333 馬爾他政府考慮使用開放原始碼] * [http://ldn.linuxfoundation.org/article/build-process-using-makelsbpkg-create-lsb-compliant-package Build Process: Using makelsbpkg to Create an LSB-compliant Package] == Debian == * [http://packages.debian.org/lenny/approx Approx] - caching proxy server for Debian archive files * [http://www.debianadmin.com/upgrade-multiple-debian-systems-with-approx.html Upgrade multiple debian systems with Approx] == Cloud Computing == * [http://www.gigaspaces.com/ GigaSpace] - Sales 打來邀請我們試用他們家的 Gigaspace XAP 軟體 * [http://news.networkmagazine.com.tw/construction/2009/06/05/12954/ Verizon推出「運算即服務」] == Web Service == * [http://www.linux-mag.com/cache/7350/1.html Mozilla JetPack: Lowering the Bar to Extend Firefox] == Web Service : Firebug == * [http://ajaxian.com/archives/page-speed-new-open-source-firebug-performance-extension-from-google Page Speed: New open source Firebug performance extension from Google] * [http://blog.gslin.org/archives/2009/06/05/2039/ Gea-Suan Lin]:看起來就是被 [http://developer.yahoo.com/yslow/ YSlow] 搶風頭,不甘寂寞而做的… * [http://ajaxian.com/archives/firebug-export Importing and Exporting HTTP data with Firebug] == Green Computing == * [http://www.eetimes.com/news/latest/showArticle.jhtml?articleID=217500202&printable=true&printable=true Green-memory movement takes root] * 談記憶體的電源使用量 * [[Image(http://i.cmpnet.com/eetimes/news/09/05/1562table_pg22.gif,width=400)]] == Mobile Computing : Fast Boot == * [http://news.networkmagazine.com.tw/personal-it/2009/06/04/12937 鳳凰科技要以HyperSpace分食小筆電市場] * [http://www.ithome.com.tw/itadm/article.php?c=55338 Ubuntu 擴大小筆電版圖] - 嗯!! ARM 版本的小筆電....