使用支持 RDMA 的以太网端口的延伸系统的需求
如果所配置的延伸系统使用支持远程直接存储器存取 (RDMA) 的以太网端口,请确保满足所有特定于 RDMA 的需求。
可根据以下需求来配置使用支持 RDMA 的以太网端口的延伸系统:
- 将每个节点直接连接到位于主站点和辅助站点的两个或更多个支持 RDMA 的以太网光纤网(支持 2 到 4 个光纤网)。在 iSCSI 连接中,将每个节点连接到位于主站点和辅助站点的两个或更多个支持 RDMA 的以太网光纤网。将站点定义为独立故障域。故障域是带有边界的系统组成部分,因此,边界内的任何故障(如电源故障、火灾或洪灾)都包含在边界内,而不会传播到该边界以外或影响该边界外的部分。故障域可以位于数据中心内的同一个房间或多个房间内,可以位于同一园区的多个建筑物内,也可以位于不同城镇的多个建筑物内。不同种类的故障域可防止不同类型的故障。
- 支持 RDMA 的以太网端口可用于节点间通信和主机连接;但是,主机通信和节点间通信不能共享支持 RDMA 的以太网端口。与外部存储器的连接不能使用支持 RDMA 的端口。外部存储器的主机连接和虚拟化还支持各种其他协议。
- 如果在第三个站点中使用存储系统,那么该存储系统必须支持扩展定额磁盘。可在以下 Web 站点提供的互操作性矩阵中获取更多信息:
- 将独立的存储系统置于主站点和辅助站点上,并使用卷镜像在这两个站点上的存储系统之间对主机数据执行镜像操作。如果可以,请将每个卷的首选节点设置为该卷映射到的主机所在站点中的节点。
- 避免在节点和外部存储系统之间的路径中使用交换机间链路 (ISL)。如果此配置不可避免,请勿因为通过 ISL 的 RDMA 流量大而超额预订 ISL。对于大多数配置,都需要使用中继。由于 ISL 问题难以诊断,因此必须收集交换机端口错误统计信息,并定期监控这些统计信息以检测故障。
- 在第三个站点上使用单个交换机可能会导致创建单个光纤网,而不是两个独立的冗余光纤网。不支持“单个光纤网”这种配置。
- 每个节点的以太网端口 1 必须连接到相同的子网。每个节点的以太网端口 2(如果使用)必须连接到相同的子网(这可能是与端口 1 不同的子网(建议值))。同样的原则也适用于其他以太网端口。
- 某些维护操作需要物理访问系统中的所有节点。如果延伸系统中的节点相隔超过 100 米,那么维护操作可能需要多个服务人员。请联系您的服务代表,询问有关多站点支持的信息。
- 使用第三个专用站点来存放定额磁盘或 IP 定额应用程序。对于延伸系统,定额磁盘或 IP 定额应用程序会在主站点和辅助站点之间的通信中断时提供冗余。此外,这两者都包含用于在必要时恢复系统的配置元数据。当延伸系统连接到 iSCSI 连接的存储系统时,将使用 IP 定额应用程序。不能在第三个站点上配置 iSCSI 存储系统。
延伸系统将查找第三个站点上的活动定额磁盘或 IP 定额应用程序。如果主站点和辅助站点之间的通信中断,能够访问活动定额磁盘的站点将继续处理事务。如果与活动定额磁盘的通信中断,那么另一个站点上的备用定额磁盘可变为活动定额磁盘。
虽然可以将节点系统配置为最多使用三个定额磁盘,但是只可以选择一个定额磁盘来解决系统分区为两组节点(数量相等)的情况。其他定额磁盘的作用在于:当定额磁盘在系统进行分区之前发生故障时提供冗余。
图 1 中演示了使用支持 RDMA 的以太网端口来连接节点的示例延伸系统。

在此配置中,如果主站点或辅助站点发生故障,那么必须确保剩余站点能继续直接访问用于托管定额磁盘的存储系统。
此配置存在以下限制:
- 请勿将一个站点中的存储系统直接连接到另一个站点中的交换光纤网。
- 备用配置可以在第三个站点中使用一个额外的支持 RDMA 的交换机,并使该交换机连接到主站点和辅助站点。
- 只有当用于托管定额磁盘的存储系统支持扩展定额磁盘时,才支持延伸系统配置。虽然可以使用其他类型的存储系统来提供定额磁盘,但是始终通过单个路径来访问这些定额磁盘。