Version 8 (modified by jazz, 15 years ago) (diff) |
---|
2009-09-02
- hadoop.nchc.org.tw 系統維護
- 近期仍常有 Kernel Panic 問題,懷疑主因是記憶體空間不足。
- [追蹤一] HADOOP_HEAPSIZE 曾改為 1500MB 現下修至 1024MB - 實體記憶體只有 2GB,系統本身就會吃掉 1.5GB,若再額外執行 Map/Reduce? 程式,使用 HEAP 1.5GB 就高達 3GB。縱使 SWAP 開 2GB,或許還是無濟於事。
export HADOOP_HEAPSIZE=1024
- [追蹤二] 實際會使用記憶體的程序有:datanode, tasktracker, mapper, reducer,因此 mapper 個數與 reducer 個數也會受限於實際記憶體大小
- 資安教育訓練
jQuery
JSON Database
Web Service
- Ten Things You Didn't Know Apache (2.2) Could Do - 好多沒用過的新模組啊!! Apache 2.2 看樣子鐵定又更肥了 :(
File System
- Metadata Performance of Four Linux File Systems
- 介紹 fdtree 這套檔案系統的效能評比工具
Virtualization
Parallel Programming
- Sun Studio 12 - 看起來很強大的一套軟體,不知道國內有誰在用 :(
- Full OpenMP 3.0 compiler, debugger and tools support
- DLight: System profiling tools
- dbxTool: The dbx Debugger
- Performance analysis of MPI applications: The Performance Analyzer
Wireless Sensor Network
- 日本:破解Wi-Fi WPA安全機制只要1分鐘! - 還好當初 MiTAC 選 WPA2
生活
- 凱擘 - 不只是有線電視 - 我一直還蠻好奇這間可以撐多久,過去賣這種服務的廠商前仆後繼,可是都沒有成功。畢竟頻寬還是一個非常關鍵的障礙,VOD(Video On Demand)隨選視訊 vs. 隨選影片PPV服務(Pay Per View),這兩種型態各有所需,幾年前我比較喜歡先下載到本地端再觀看,但後來發現很多人看電視其實都是為了一直轉來轉去,為了讓空盪盪的房間有聲音罷了。
趨勢
- 台達電鴨子划水 全彩電子紙技術研發有成 - 電子紙與電子閱讀器的議題持續發燒
元太:購併了E-Ink 鑼洤科技(Sipix):電子紙材料 友達:與鑼洤策略結盟 台達電:與日商普利司通(Bridgestone Corporation)結盟 鴻海 - 富士康:生產的電子書閱讀器
職場
- 關鍵5力 攻上賣家霸主
「商品力」-網路賣場的品牌核心與起源 「故事力」-攸關品牌形象 「介面力」-傳達賣場第一印象 「行銷力」-運用資源推波助瀾 「服務力」-培養客戶忠誠度。
- 企業人才金字塔
企業人才養成的四個階段,構成了企業人才的金字塔。 第一個階段,「專業工作者」。 第二個階段,「團隊管理者」。工作重點在於人的訓練、養成、協調、溝通,以及團隊的組成、調度、管理。 第三個階段,「當責經營者」。要為團隊訂定工作與營運目標,達成獲利與預算,並為最後的營運結果負責。 第四個階段,「創業家」。
- 聰明會議 三個基本功
一‧會議的企畫: ○例行性會議以「控制」為主軸,內容則是以「品質、財務、進度」為主 ○突發性會議則是以「解決」為主軸,內容則是以「評估、方法、影響」為主 二‧善用現代化資訊設備:網路視訊、電子郵件傳送資料(加密傳遞) 三‧確認事前的準備: ○會議時間、參加人員及會議目的的再確認 ○提供主持人會議的重點、議題的方向、參加者為誰 ○先用e-mail收集參加者的意見,讓主持人事先統合意見
Attachments (4)
- hadoop_kernel_panic.png (224.6 KB) - added by jazz 15 years ago.
- mem_usage_of_hadoop_cluster.png (23.9 KB) - added by jazz 15 years ago.
- hadoop_task_mem_usage.png (212.7 KB) - added by jazz 15 years ago.
- hadoop_mem_usages.xls (16.0 KB) - added by jazz 15 years ago.
Download all attachments as: .zip