使用具備 RDMA 功能之乙太網路埠的延伸系統需求

如果您要配置使用具有遠端直接記憶體存取 (RDMA) 功能之乙太網路埠的延伸系統,請確保符合所有特定於 RDMA 的需求。

請使用下列需求來配置使用具備 RDMA 功能之乙太網路埠的延伸系統:

  • 將每一個節點直接連接至位在主要和次要站台的兩個以上具備 RDMA 功能的乙太網路光纖(支援 2 - 4 個光纖)。在 iSCSI 連線中,將每一個節點連接至位在主要及次要站台的兩個以上具備 RDMA 功能的乙太網路光纖。站台定義為獨立失敗網域。失敗網域是某個邊界內的一部分系統,在這個邊界內的任何失敗(例如電力失敗、火災或洪水)僅侷限於此邊界之內,失敗不會延伸或影響該邊界之外的部分。失敗網域可以位在資料中心的同一房間或是跨不同房間、同一校區的不同建築物,或是不同城鎮的建築物。不同種類的失敗網域防護不同的錯誤類型。
  • 具備 RDMA 功能的乙太網路埠可用於節點至節點通訊以及主機連接;不過,請勿為主機和節點至節點通訊共用具備 RDMA 功能的乙太網路埠。不支援使用具備 RDMA 功能的埠來連線至外部儲存體。也支援使用各種其他通訊協定來進行主機連接和虛擬化外部儲存體。
  • 如果在第三站台使用某個儲存體系統,它必須支援延伸仲裁磁碟。下列網站提供交互作業能力矩陣方面的其他資訊:

    www.ibm.com/support

  • 將獨立儲存體系統放在主要和次要站台,並使用磁區鏡映來鏡映兩個站台上儲存體系統之間的主機資料。如果可能,請將每個磁區的偏好節點設為與磁區對映主機相同之站台中的節點。
  • 在節點和外部儲存體系統之間的路徑中避免使用交換器間鏈結 (ISL)。如果無法避免此配置,請不要因 ISL 中存在大量的 RDMA 資料流量而過量訂閱 ISL。大部分的配置都需要幹線合併。因為 ISL 問題難以診斷,必須收集交換器埠錯誤統計資料並且定期監視才能偵測到失敗。
  • 在第三站台使用單一交換器會導致產生單一光纖,而不是兩個獨立且備援的光纖。單一光纖是不受支援的配置。
  • 每一個節點上的節點乙太網路埠 1 必須連接到相同的一或多個子網路。每一個節點的乙太網路埠 2(如果有使用)必須連接到相同的子網路(建議是與埠 1 不同的子網路)。相同的原則適用於其他的乙太網路埠。
  • 部分服務動作需要實體存取系統中的所有節點。如果延伸系統中的節點分佈超過 100 公尺,服務動作可能需要多位服務人員進行。請聯絡您的客戶服務代表,以查詢多重站台支援的相關資訊。
  • 使用第三專用站台來放置仲裁磁碟或 IP 仲裁應用程式。對於延伸系統,仲裁磁碟或 IP 仲裁應用程式會在主要和次要站台之間的通訊遺失時提供備援。此外,兩者還包含用來回復系統的配置 meta 資料(必要的話)。當延伸系統連接至 iSCSI 連接的儲存體系統時,會使用 IP 仲裁應用程式。無法在第三站台上配置 iSCSI 儲存體系統。

    延伸系統將作用中仲裁磁碟或 IP 仲裁應用程式放在第三站台。如果主要和次要站台之間通訊中斷,可存取作用中仲裁磁碟的站台繼續處理交易。如果與作用中仲裁磁碟的通訊中斷,位在另一個站台的替代仲裁磁碟可以變為作用中仲裁磁碟。

    雖然節點的系統可以配置最多使用三個仲裁磁碟,但只會選出一個仲裁磁碟來解決系統被分割為大小相同的兩組節點的狀況。其他仲裁磁碟的用途,是在分割系統之前,一旦仲裁磁碟失敗,就可以提供備援。

使用具備 RDMA 功能的乙太網路埠來連接節點的延伸系統範例,在圖 1中說明。

圖 1. 透過具備 RDMA 功能的乙太網路埠進行延伸系統配置
圖解為使用具備 RDMA 功能之乙太網路埠的 stretched 系統配置。

在此配置中,如果主要站台或次要站台失敗,您必須確保剩餘站台可繼續直接存取管理仲裁磁碟的儲存體系統。

此配置有下列限制:

  • 請勿將一個站台中的儲存體系統,直接連接到另一個站台中的交換器光纖。
  • 替代配置可以使用第三站台具備 RDMA 功能的額外交換器,並從該交換器連線到主要站台和次要站台。
  • 只有當管理仲裁磁碟的儲存體系統支援延伸仲裁時,才能支援延伸系統配置。雖然可以使用其他類型的儲存體系統來提供仲裁磁碟,但一律透過單一路徑來存取這些仲裁磁碟。