wiki:FlyCircuit/2008-07-25

Version 39 (modified by rock, 16 years ago) (diff)

--

工作事項

  • 現有硬體環境:
    • Testbed
      • cloud: 140.110.141.XX9 -> Metadata Server
      • cloud1: 140.110.141.XX0
      • cloud2: 140.110.141.XX1
      • cloud3: 140.110.141.XX2 -> ost1
      • cloud4: 140.110.141.XX3 -> ost2
      • cloud5: 140.110.141.XX4 -> ost3
      • cloud6: 140.110.141.XX6 -> ost4
      • cloud7: 140.110.141.XX7 -> ost5
  • 現有軟體環境:
    • OpenSUSE 10.3
    • Linux Kernel version: 2.6.22-default
    • NFS kernel module:
      gtd-fly:~ # modinfo nfsd
      filename:       /lib/modules/2.6.22-default/kernel/fs/nfsd/nfsd.ko
      license:        GPL
      author:         Olaf Kirch <okir@monad.swb.de>
      srcversion:     A0A1E558DDD9C3CF91A5F87
      depends:        sunrpc,exportfs,lockd,nfs_acl
      vermagic:       2.6.22-default SMP mod_unload
      
    • Lustre version:
      gtd-fly:~ # modinfo lustre
      filename:       /lib/modules/2.6.22-default/kernel/fs/lustre/lustre.ko
      license:        GPL
      description:    Lustre Lite Client File System
      author:         Cluster File Systems, Inc. <info@clusterfs.com>
      srcversion:     8BEC7BA099C4A1007EFFC0A
      depends:        obdclass,mdc,ptlrpc,libcfs,lvfs,lov,osc,lnet
      vermagic:       2.6.22-default SMP mod_unload
      
WBS ID 工作項目 負責人 完成日 備註 紀錄
備份 OpenSUSE 10.3 的 DRBL Server
* 複製前預先關閉 DRBL Service (NFS, DHCPD 等)
rider,rock 20080730
申請八組對外 IP rider,rock 20080806 140.110.141.109~114,116,117
使用 Clonezilla LiveCD 還原七台 OpenSUSE 10.3 的 Image
* 請注意 memu.lst 跟 fstab 的 disk_id 問題!''
rider,rock 20080730
確認八台均可以執行 VirtualGL / TurboVNC / Amira rock,rider 20080730 Amira license is needed
Lustre 寫檔測試
* 當一台寫入1.3G 的AVI檔,硬碟燈是一起亮還是只有一台亮??
*
iostat 在執行前跟執行後的差別為何??
rider,rock20080811預設:只會一台硬碟燈亮
使用lsp設定:lsp setstripe -c -1 directory 則所有提供oss的node硬碟燈都會亮

PS:若是已有相同檔名的檔案複寫時,只會存在之前的oss,除非刪掉檔案重新cp,才會平切割存於各oss
Lustre 讀檔測試
* 八台同時讀取1個1.3G的AVI檔,硬碟燈是一起亮還是只有一台亮??
*
iostat 在執行前跟執行後的差別為何??
*
八同node同時讀取8個不同的AVI檔??
rider,rock20080811預設:只會一台硬碟燈亮
使用lsp設定:lsp setstripe -c -1 directory 則所有提供oss的node硬碟燈都會亮
三種不同檔案存放模式rock20080821Local -> /home/3D_local.am (244MB)
Lustre NonStripe -> /home/flyfs/3D_nonstripe.am (存於第一個ost)
Lustre Stripe -> /home/flyfs/3D_stripe.am (5個ost皆有存部份stripe)
PS:可使用lfs getstripe filename來看檔案於ost的分佈
  • Lustre 寫檔測試說明 (因有五台oss,檔案很平均的寫在五台oss,此台寫入的平均流量為23MB/s(使用iostat觀察),總體來看此lustre的檔案系統可同時寫入約118MB/s)
    $ dd if=/dev/zero of=/home/flyfs/5g.2.img bs=1G count=5
    5+0 records in
    5+0 records out
    5368709120 bytes (5.4 GB) copied, 45.6223 s, 118 MB/s
    
  • Lustre 之VLC播放影片檔測試