Why iSCSI, not FC!

原文鏈結：130K的iSCSI server硬體的建置

一個做法，如果真的是ESX Server的話，請善用Kernel PCI Switch，插個兩到三張Intel PCIE Quad GbE Server Adapter，然後直接透過Kernel PCI Switch去分享這八到十二個GbE，如果你的VM有要求速度的話，可以給它獨立的一個GbE使用。在VM對Storage存取的資料量每秒低於120MB的時候，這是一個可以選擇的方式。

第二個做法，應該很少人會玩4Gbps以上的通道，雖然我以前上班的時候很平常，不過是老闆出錢，就沒什麼好說嘴的，買兩張Intel PCIE Quad GbE Server Adapter，然後做802.3ad，這個是iSCSI server端，這邊有8Gb/s的頻寬，但是現實上802.3ad的實做目前看到都只有支援到四個GbE，所以這樣就變成了兩個4GbE的通道的頻寬，所以在設定iSCSI Client的時候可以分成兩個群組設定不同的iSCSI target。然後iSCSI Client端用一張Intel PCIE Quad GbE Server Adapter，也做802.3ad，這邊有4Gb/s的頻寬，然後買支援802.3ad支援的Switch，24 ports以上，基本上應該足夠大部分人的需求。而且網路線也比光纖線好搞很多。

===== 以下是敗家教學。 =====

我不是thx，沒有那個心臟玩FC，加上風險評估很重要，而且我沒錢買好幾台。而且FC跟RAID一樣很難照顧，所以還是玩玩iSCSI就好。重點要有802.3ad支援的GbE Switch跟NIC，沒有這個支援就沒有意義。

如果你的Server有PCIX，又需要GbE以上的頻寬，恭喜你，Intel® PRO/1000 MT Dual Server Adapter在什麼都賣[網頁備份]的地方已經1000有找，而且不難買，這個東西已經賣一段時間了，這一張作了802.3ad設定之後就變成一張2Gbps的NIC，你可以想一下這一張卡跟2Gbps的FC HBA的差價，不過FC HBA可以FC開機，這一張沒辦法。不過FC開機大概是要做到HA之後才有意義，不然FC開機要是失敗的話，偵錯的難度相較於Local Disk真的是有經驗的人都會怕。

接下來是區域網路的中心，交換器，Dell 2724不是最好，但是堪用，什麼都賣[網頁備份]的地方已經買的到全新品9300，如果以2Gbps的要求來算的話，這一台頂多12 ports，但是12 ports的FC 2Gbps Switch多少錢？要想一下！而且要是你的單位跟Dell買的東西夠多的話，Dell 2724我相信不是9300這個價格。

1. HP San Switch 2G / 16 Port FC A7340A 保固30天。40000!!!GBIC沒看到。[網頁備分]
2. LSI LSI449290 Fibre Channel FC 2G 雙通道光纖控制卡少用如新，3600元，沒有說明保固。[網頁備分]
3. Cewolf 光纖網路線 【全新 LC 光纖 Fibre Fiber 2G 2.5M FC 多模 50/125UM 網路線】300元，如果常常插拔的話，其實光纖線跟GBIC都是耗材，也是會壞。[網頁備份]
4. 【LSI 光纖控制卡】LSI40919O LSI409190 Fibre Channel FC 2GB (免 3%手續費) 3000元，全新。但是全新跟有保固是兩件事情，就算有保固，GBIC跟FC HBA的備品還是要自己準備。[網頁備份]
5. Brocade 3200 san switch 2GB 8 port FC使用一年到兩年22000。[網頁備份]
6. 全新盒裝【 Intel PRO/1000 VT(PT) Quad Port 四通道伺服器 網路卡 】EXPI 9404VT 全新保固一年8500元[網頁備份] <<曙光出現了

===== 敗家教學先到這邊 =====

我寫了這麼多屁話，我想要講的事情，如果你是個人想搞SAN，或者小單位想要引進SAN的架構，在交換架構上面，要用光纖還是乙太網路，我會強烈建議用乙太網路，因為支援802.3ad 24 port switch加上六張支援802.3ad的Quad GbE大約是七萬元起跳，真的要用FC SAN的話，請先評估自己可不可以有預算輕鬆入手一台全新有保固的FC 8 ports 2Gbps Switch，如果沒有的話，FC SAN意義不大。

FC SAN最重要的地方就是距離，如果你有兩棟大樓之間要架SAN，大樓之間你架設線路沒有地權、路權、管道權的問題的話，就是用FC SAN，因為iSCSI SAN在距離上，因為乙太網路架構的限制，使用上不是很方便，如果要用光纖乙太網路的話，又有點脫褲子放屁的狀況存在。

真的要當線上用的設備，要先考慮的事情就是在狀況發生的時候，怎樣有辦法最快找到備品做替換，公司的營運系統不是開玩笑的，如果要用半調子的FC SAN，還是花錢在iSCSI SAN跟好的配線系統架構上，SAN我可以幫你想，配線系統就是要找zman了。