2009-09-02
- hadoop.nchc.org.tw 系統維護
- 近期仍常有 Kernel Panic 問題,懷疑主因是記憶體空間不足。
- [追蹤一] HADOOP_HEAPSIZE 曾改為 1500MB 現下修至 1024MB - 實體記憶體只有 2GB,系統本身就會吃掉 1.5GB,若再額外執行 Map/Reduce? 程式,使用 HEAP 1.5GB 就高達 3GB。縱使 SWAP 開 2GB,或許還是無濟於事。
export HADOOP_HEAPSIZE=1024
- [追蹤二] 實際會使用記憶體的程序有:datanode, tasktracker, mapper, reducer,因此 mapper 個數與 reducer 個數也會受限於實際記憶體大小
- 資安教育訓練
Cloud Computing
SQL vs. NOSQL
- Redis: Lightweight key/value Store That Goes the Extra Mile - 另一個輕量級的 Key/Value? 資料庫
- Accessing SQLite in C
jQuery
JSON Database
Web Service
- Ten Things You Didn't Know Apache (2.2) Could Do - 好多沒用過的新模組啊!! Apache 2.2 看樣子鐵定又更肥了 :(
File System
- Metadata Performance of Four Linux File Systems
- 介紹 fdtree 這套檔案系統的效能評比工具
- Metadata Performance Exploration Part 2: XFS, JFS, ReiserFS, ext2, and resier4
- 秀出 XFS, JFS, ReiserFS, ext2, resier4 跑 fdtree 的評比數據
Virtualization
Parallel Programming
- Sun Studio 12 - 看起來很強大的一套軟體,不知道國內有誰在用 :(
- Full OpenMP 3.0 compiler, debugger and tools support
- DLight: System profiling tools
- dbxTool: The dbx Debugger
- Performance analysis of MPI applications: The Performance Analyzer
Open Source
- Lubuntu - 以 LXDE 為桌面的 Ubuntu
- Lubuntu: Floats Like a Butterfly, Stings Like a Bee
Wireless Sensor Network
- 日本:破解Wi-Fi WPA安全機制只要1分鐘! - 還好當初 MiTAC 選 WPA2
生活
- 凱擘 - 不只是有線電視 - 我一直還蠻好奇這間可以撐多久,過去賣這種服務的廠商前仆後繼,可是都沒有成功。畢竟頻寬還是一個非常關鍵的障礙,VOD(Video On Demand)隨選視訊 vs. 隨選影片PPV服務(Pay Per View),這兩種型態各有所需,幾年前我比較喜歡先下載到本地端再觀看,但後來發現很多人看電視其實都是為了一直轉來轉去,為了讓空盪盪的房間有聲音罷了。
趨勢
- 台達電鴨子划水 全彩電子紙技術研發有成 - 電子紙與電子閱讀器的議題持續發燒
元太:購併了E-Ink 鑼洤科技(Sipix):電子紙材料 友達:與鑼洤策略結盟 台達電:與日商普利司通(Bridgestone Corporation)結盟 鴻海 - 富士康:生產的電子書閱讀器
職場
- 拆解團隊十大難題 - 《團隊出擊》(The Team Building Tool Kit)
大多數的主管是因為他們能夠比別人做得快,做得好,而被升上來,不是因為他們能和別人合作。 必須學習新的人際關係技巧及決策方式。讓整個團隊一起來做決定。 「放手」是漸進的過程,適當的規劃及誠實、持續的溝通,是成功的關鍵。 很重要的是想辦法讓員工開始說出他們想法。避免可能暗示你不同意別人意見的肢體語言。 問:彼此信任的工作環境,應該包括那些要素? 答:(1)溝通管道暢通,資訊自由流通。 (2)實踐以禮待人,尊重別人的行為。 (3)珍惜別人所反應的意見(無論是正面或負面),因為他也可以什麼都不說,或在背後說長道短。 (4)努力讓員工有安全感,不要刻意鼓動焦慮或緊張。 團隊中未表達或壓抑的情緒越多,大家就會把越多的精力放在別的事情,而不是團隊目標上。 在績效評估制度中,強調顧客、品質及團隊合作 團隊獎勵制度,最好每個團隊都有自己的成功紀錄表格。 了解授課內容的能力和能夠實際把所學表現出來的能力,有很大的差別。 不要假定什麼地方出了問題,應該要聽聽團隊自己的說法。
- 關鍵5力 攻上賣家霸主
「商品力」-網路賣場的品牌核心與起源 「故事力」-攸關品牌形象 「介面力」-傳達賣場第一印象 「行銷力」-運用資源推波助瀾 「服務力」-培養客戶忠誠度。
- 企業人才金字塔
企業人才養成的四個階段,構成了企業人才的金字塔。 第一個階段,「專業工作者」。 第二個階段,「團隊管理者」。工作重點在於人的訓練、養成、協調、溝通,以及團隊的組成、調度、管理。 第三個階段,「當責經營者」。要為團隊訂定工作與營運目標,達成獲利與預算,並為最後的營運結果負責。 第四個階段,「創業家」。
- 聰明會議 三個基本功
一‧會議的企畫: ○例行性會議以「控制」為主軸,內容則是以「品質、財務、進度」為主 ○突發性會議則是以「解決」為主軸,內容則是以「評估、方法、影響」為主 二‧善用現代化資訊設備:網路視訊、電子郵件傳送資料(加密傳遞) 三‧確認事前的準備: ○會議時間、參加人員及會議目的的再確認 ○提供主持人會議的重點、議題的方向、參加者為誰 ○先用e-mail收集參加者的意見,讓主持人事先統合意見
Last modified 15 years ago
Last modified on Jan 13, 2010, 12:03:01 PM
Attachments (4)
- hadoop_kernel_panic.png (224.6 KB) - added by jazz 15 years ago.
- mem_usage_of_hadoop_cluster.png (23.9 KB) - added by jazz 15 years ago.
- hadoop_task_mem_usage.png (212.7 KB) - added by jazz 15 years ago.
- hadoop_mem_usages.xls (16.0 KB) - added by jazz 15 years ago.
Download all attachments as: .zip