O sistema suporta conexões de nó a nó que usam protocolos Ethernet que suportam a tecnologia de acesso direto remoto à memória (RDMA), como RDMA over Converged Ethernet (RoCE) ou iWARP. Para usar esses protocolos, o sistema requer que um adaptador compatível com RDMA seja instalado em cada nó e as portas Ethernet dedicadas compatíveis com RDMA sejam configuradas apenas para comunicação de nó para nó.
As tecnologias RDMA, como RoCE e iWARP, permitem que o adaptador com capacidade para RDMA
transfira dados diretamente entre os nós, efetuando bypass da CPU e dos caches, tornando as transferências mais rápidas. As tecnologias RDMA fornecem conexão e tempo de processamento mais rápidos do que as conexões iSCSI tradicionais.
Os pré-requisitos a seguir são necessários para todas as portas Ethernet compatíveis com RDMA que são usadas entre os nós:
- Toda a instalação do hardware do nó está concluída.
- O adaptador Ethernet de 25 Gbps que suporta a tecnologia RDMA é instalado em cada nó.
Se você estiver usando a tecnologia RDMA para comunicações de nó para nó,
assegure-se de que os adaptadores compatíveis com RDMA usem a mesma tecnologia, como RoCE ou iWARP. Esses adaptadores compatíveis com RDMA
devem ser instalados nos mesmos slots em todos os nós do sistema. Esses requisitos de instalação
asseguram que os identificadores de porta sejam iguais em todos os nós no sistema.
- Os cabos Ethernet entre cada nó estão conectados corretamente.
- A tecnologia de protocolo nos adaptadores de origem e de destino é a mesma.
- Os endereços IP locais e remotos podem ser acessados.
- Cada endereço IP para portas Ethernet compatíveis com RDMA e suas máscaras de sub-rede associadas são exclusivas em cada nó.
- O roteador não deve ser colocado entre nós que usam portas Ethernet compatíveis com RDMA para comunicação entre nós.
- As velocidades negociadas nos adaptadores locais e remotos são as mesmas.
- Os identificadores de LAN virtual de portas local e remota são os mesmos. Use a LAN virtual para criar a separação física de redes para sistemas não relacionados,
sempre que possível. Todas as portas que são usadas para comunicação de nó para nó devem ser designadas com
um ID de VLAN, e as portas que são usadas para a conexão de host devem ter um ID de VLAN diferente.
Se você planeja usar
VLAN para criar essa separação, deve-se configurar o suporte de VLAN em todos os comutadores Ethernet em sua rede antes de definir as portas Ethernet compatíveis com RDMA nos nós no sistema. Em cada comutador em sua rede, configure VLAN para o modo Tronco
e especifique o ID de VLAN para as portas RDMA que estarão na mesma VLAN. Além disso, se as configurações de VLAN para uma porta Ethernet compatível com RDMA precisarem ser atualizadas, essas configurações não poderão ser atualizadas independentemente de outras definições de configuração. Antes de atualizar as configurações de VLAN em portas Ethernet específicas compatíveis com RDMA, deve-se
desconfigurar a porta, fazer quaisquer mudanças necessárias na configuração do comutador e, em seguida, reconfigurar as portas Ethernet compatíveis com RDMA em cada um dos nós no sistema.
- Um mínimo de duas portas Ethernet dedicadas compatíveis com RDMA é necessário para as comunicações de nó para nó para assegurar o melhor desempenho e a confiabilidade. Essas portas devem ser configuradas apenas para o tráfego inter-nó e não devem ser usadas para conexão de host, virtualização de armazenamento externo conectado por Ethernet ou tráfego de replicação de IP.
- Um máximo de quatro portas Ethernet compatíveis com RDMA por nó é permitido para comunicações de nó para nó.
As tarefas básicas do nó, como incluir um nó ou remover um nó, são as mesmas para ambas as conexões Fibre Channel e baseadas em RDMA entre nós,
mas pode ser necessário concluir ações de gerenciamento nas portas Ethernet compatíveis com RDMA antes de concluir as tarefas de gerenciamento de nível de nó.
Antes de concluir as tarefas de gerenciamento relacionadas às portas Ethernet compatíveis com RDMA em um nó,
use as melhores práticas a seguir para gerenciar essas portas:
- Se você já tiver um sistema configurado para usar portas Ethernet compatíveis com RDMA, você deverá assegurar que um caminho
redundante esteja disponível antes de incluir, remover ou atualizar configurações para portas Ethernet compatíveis com RDMA.
- Inclua, remova ou atualize as configurações em uma porta Ethernet compatível com RDMA uma por vez. Aguarde 15 segundos entre
essas mudanças antes de atualizar outras portas Ethernet compatíveis com RDMA.
- Se você estiver usando a LAN virtual para criar a separação física de redes, assegure-se de seguir estas diretrizes
adicionais ao concluir o gerenciamento de tarefas relacionadas:
- Os IDs de VLAN não podem ser atualizados ou incluídos independentemente de outras configurações em uma porta Ethernet compatível com RDMA, como endereço IP.
- Antes de incluir ou atualizar informações de ID de VLAN para portas Ethernet compatíveis com RDMA, deve-se configurar o suporte de VLAN em todos os comutadores Ethernet em sua rede. Por exemplo, em cada comutador, configure VLAN para o modo "Tronco" e especifique o ID de VLAN para as portas Ethernet compatíveis com RDMA que estarão na mesma VLAN.