Changes between Initial Version and Version 1 of HyperTable


Ignore:
Timestamp:
Mar 13, 2008, 5:29:53 PM (16 years ago)
Author:
sunny
Comment:

--

Legend:

Unmodified
Added
Removed
Modified
  • HyperTable

    v1 v1  
     1= Hypertable 源起 =
     2    搜尋引擎公司Zvents以Google的9位研究人員在2006年發表的Bigtable(簡稱BT,Google內部使用的文件儲存系統)設計規格為基礎[FYI]《[http://labs.google.com/papers/bigtable-osdi06.pdf Bigtable:結構化數據的分佈存儲系統]》,推出了一款開放源碼的分散式數據儲存系統Hypertable專案。以 C++ 撰寫,可架在 HDFS 和 KFS 上,按照1000節點比例設計,0.9 alpha測試版已經在10個節點上測試過,儘管還在初期階段,但已有不錯的效能:寫入 28M 列的資料,各節點寫入速率可達 7MB/s,讀取速率可達 1M cells/s。
     3
     4= Hypertable 簡介 =
     5    總結來說Hypertable是一個高效能,分散式,開放源碼,與欄位導向的資料庫,可以儲存,處理叢集電腦上大量的節構化與非結構化的資料,Hypertable提供C++的API及HQL(Hypertable Query Language)給用戶端來存取資料庫內容。Hypertable的用途並不是為了取代傳統的資料庫管理系統(像是MySQL與Oracle DB),而是為了可以儲存與管理大量的資料集。傳統的關連式資料庫RDBMs(Relational Database Management)是交易導向式,提供許多進階功能給使用者查詢結構化的資料庫內容。Hypertable為了逹到規模可彈性調整以及高效能的輸出,捨棄像是RDBMs常在使用的join或其他query的功能特色,MySQL之類的RDBMs系統屬於row-oriented較適合用於寫入動作較頻繁的工作負載情形,Hypertable屬於column-oriented較適合讀取動作較頻繁的工作負載情形。Hypertable建構於分散式檔案系統(DFS)之上,目前有許多DFS系統,任一DFS均可架設Hypertable,一套DFS可以讓許多機器看起來就好像單一虛擬磁碟,而且都均有容錯與備份機制,因此DFSs可以結合許多叢集電腦的儲存資源,提供高速與大資料量的存取效能,故Hypertable架構在DFS之上也就可以提供高速與高容量的資料庫儲存空間。
     6   
     7= How it works =
     8
     9= How we use it =
     10
     11= Reference =
     12 * [http://www.hypertable.org/ HyperTable 官方網站]
     13 * [http://my.donews.com/eraera/2006/09/26/swogzstwtqdnwlfrzgsljctkjsbrtuiumxzj/ 翻譯:Google大表(BigTable)] - [http://labs.google.com/papers/bigtable-osdi06.pdf 原文(PDF)]
     14 * [http://blogs.the451group.com/opensource/2008/02/19/introducing-hypertable-a-new-open-source-database-project/ Introducing Hypertable - a new open source database project]
     15 * [http://funp.com/push/?tag=Hypertable&hot&stars=1 開放原始碼專案 Hypertable(BigTable clone)的效率]
     16 * [http://www.linuxworld.com/podcasts/linux/2008/013008-linuxcast.html LinuxWorld Hypertable 專訪 Doug Judd (PodCast) - 包含如何使用 HyperTable 來匯入大量 Apache Log 的範例]
     17 * [http://code.google.com/p/hypertable/ hypertable 在 Google Code 的討論群]
     18 * [http://code.google.com/p/hypertable/wiki/HowHypertableWorks How Hypertable Works - Google Code 上的說明文件]
     19 * [http://code.google.com/p/hypertable/wiki/ApacheLogLoad  Google Code 上的範例 Apache log load example]
     20 * [http://mmdays.com/2008/02/14/cloud-computing/ Cloud Computing 雲端運算]
     21
     22= Related News =
     23 * [http://news.sina.com.tw/tech/sinacn/cn/2008-02-19/154038229686.shtml 微軟收購雅虎存在諸多障礙]
     24 * [http://www.linuxworld.com/news/2008/020608-hypertable.html Zvents releases open-source cluster database]