2011-03-31

callgraph

• C/C++
  • Rex 在 ​CallGraphviz – call graph visualzer based on csope, graphviz and xdot 一文中介紹了許多不同的 callgraph 產生方式。
  • 搭配​維基百科 Call_graph的軟體簡介，大概整理如下：
  • ​CodeViz - 缺點：必須 patch GCC 然後用 Perl 來產生圖形
  • ​ncc - 目標是取代 cflow 跟 cscope，​jserv 有介紹過 - 缺點：相依 GCC 環境版本
    • 有 ​Debian 套件 ncc
  • ​cflow - 老字號 GNU 的流程分析工具 - ​Fred 有寫過用在分析 Android Dalvik VM 的示範 - 產生文字輸出
    • 有 ​Debian 套件 cflow
  • ​cscope/​global - Interactively examine a C program source - 我想 cscope 要強調的是 interactive 互動式除錯，而且照 Rex 的講法，可以只針對某個函數當進入點，而不是整個程式原始碼。
    • 有 ​Debian 套件 cscope 跟 ​global
    • ​CCTree - C Call-Tree Explorer - Cscope based source-code browser, code flow analysis tool - 給 VIM 用的 cscope plugin
    • ​seascope - A pyQt GUI front-end for cscope - pyQt 寫的 cscope 圖形介面
    • ​kscope - A source-code browsing, analysis and editing environment for large C projects. - KDE 版本的 cscope 圖形介面 - 有 ​Debian 套件 kscope
  • ​KCachegrind - Profiling Visualization - 這個工具是搭配 Valgrind 這個 Profiler 可以在 runtime 產生 callgrah
  • ​Gprof2Dot - 也是透過 profiler 產生的輸出來作視覺化動作，最初是支援 gprof 現在已經支援更多不同 profiler 了。
  • ​egypt - 用 Perl 寫的
• Python
  • ​pycallgraph - Python Call Graph
• Bash
  • 我一直想找的是 Bash 的遞迴式 callgraph 產生器，雖然 Bash 可以加入 -X 參數來做 runtime 除錯，不過還沒有找到可以查出多層該怎麼追。
  • ​bashdb - BASH Debugger - 可以用類似 GDB 的指令來 DEBUG Bash
  • shprof - a line profiler for shell scripts
    • ​原始碼
  • 這邊有一招是蠻好玩的，居然只要設定 PS4 環境變數就可以秀出每個呼叫的開始時間。（這算是 bash 的簡易版 profiler 嘛？） ​<參考討論> time profiling a linux command or script

    Least invasive you may want to play with some variant of...
    
    set -x
    PS4='$( date ): '
    sleep 1
    sleep 3
    sleep 2
    exit 0
    
    which produces timestamps in front of the commands...
    
    Mon Mar 17 02:39:35 CET 2008: PS4='$( date ): '
    Mon Mar 17 02:39:35 CET 2008: sleep 1
    Mon Mar 17 02:39:36 CET 2008: sleep 3
    Mon Mar 17 02:39:39 CET 2008: sleep 2
    Mon Mar 17 02:39:41 CET 2008: exit 0
    

Virtualization

• ​Paravirtualization With Xen 4.0 On Debian Squeeze (AMD64)

Hadoop

• 看樣子今年 Structure Big Data 研討會，出現 Hadoop 相關的新興公司非常多啊～這場火會延燒到台灣嘛？！
• ​As Big Data Takes Off, the Hadoop Wars Begin - Hadoop 的戰線逐漸進入白熱化狀態，當然有人在擔心這樣會不會太仰賴單一軟體平台。

   * Full-on distributions
      * Apache Hadoop
      * Cloudera’s Distribution including Apache Hadoop (that’s the official name)
      * IBM Distribution of Apache Hadoop
      * DataStax Brisk
      * Amazon Elastic MapReduce
   * HDFS alternatives
      * Mapr
      * Appistry CloudIQ Storage Hadoop Edition
      * IBM Global Parallel File System (GPFS)
      * CloudStore
   * Hadoop MapReduce alternatives
      * Pervasive DataRush
      * Cascading
      * Hive (an Apache subproject, included in Cloudera’s distribution)
      * Pig (a Yahoo-developed language, included in Cloudera’s distribution)
  

• ​Brisk - 一個 Cassandra + Hadoop 的平台
• ​Mapr - 想要取代 HDFS 的另一個方案
• ​http://www.hadapt.com/ - Hadapt 是一個訴求讓 SQL-like 應用能比用 HBase 更快的公司，底下是效能比較跟架構圖
• 
• 
• ​Ravel 這間公司想把 Google 的 Pregel 這種 graph database 移植到 Hadoop 上。
  • ​Ravel Hopes to Open-Source Graph Databases
• ​Objectivity - 也是目標 Graph database 的公司
  • [ Twitter’s Success Pulls 23-Year-Old Objectivity Into NoSQL]
  • 
  • 

• [備忘] ​https://github.com/cloudera/iTest - Cloudera 用來測試 Hadoop 叢集效能的一些工具

Python

• ​使用 PyShada 在 Python 裡呼叫 shell command

領導

• ​獵人與農夫

  好的領導人，通常都同時擁有獵人和農夫這兩種特質，如何在這兩個特質之間取得平衡，
  並完美結合，考驗著領導人的智慧。
  
  領導人必須感激與鼓勵兩種特質的人互相合作與互補，不能把鎂光燈放在獵人身上，否則
  公司的品質平衡度會下降。