Network 担当の望月と申します。
今回は、LBFO (Load Balancing and Failover) と NLB (Network Load Balancing) を併用する際の注意事項についてご紹介致します。
1. 事例のご紹介
図 1. ネットワーク構成例 (1)
図 2. ネットワーク構成例 (2)
上記いずれの構成も、NLB クラスター IP アドレス宛の通信は、ルーター (L3 スイッチ) や L2 スイッチでパケットがフラッディングし、最終的に LBFO によってチーミングを構成する全ての NIC アダプターに到達致します。
このとき、NIC チーミングでスタンバイ アダプターを指定し、"アクティブ / スタンバイ" の構成を取っていたとしても、スタンバイの NIC アダプターで受信したパケットは破棄されず TCPIP.sys ドライバーに転送されます。
その結果、アクティブ アダプター経由およびスタンバイ アダプター経由で同一のパケットを重複して受信することとなります。
以下は、上述の構成において、クライアントからサーバーに Web アクセス (TCP 80 番ポート使用) を行った際の通信シーケンス例となります。
クライアント、サーバー共に相手からの応答待ちで再送要求が発生し、通信遅延が発生していることが確認できます。
同一構成で帯域制御装置のみ存在しない場合には通信遅延が発生しないことから、帯域制御装置の動作が影響して遅延が発生していることが想定されます。
表 1. クライアント (10.100.192.100) 上で取得したパケット キャプチャー
Frame Time Delta S-IP Address D-IP Address S-Port D-Port Protocol Desctiption |
※ Frame 2 で Reset を受信しておりますが、3 Way-hand-shake には影響はありません。
※ Frame 5 で HTTP Request を送信してますが、応答がなく再送を 3 回繰り返し、おおよそ 4 秒後にサーバーが応答している状況が確認できます。
表 2. サーバー (10.120.172.101) 上で取得したパケット キャプチャー
| Frame Time Delta S-IP Address D-IP Address S-Port D-Port Protocol Desctiption ----------------------------------------------------------------------------------------------------- 1 20:00:01.7623087 0.0000000 10.100.192.100 10.120.172.101 60000 80 TCP Flags=......S., 2 20:00:01.7623087 0.0000000 10.100.192.100 10.120.172.101 60000 80 TCP Flags=......S., 3 20:00:01.7624433 0.0001272 10.120.172.101 10.100.192.100 80 60000 TCP Flags=.....R.., 4 20:00:01.7624633 0.0000154 10.120.172.101 10.100.192.100 80 60000 TCP Flags=...A..S., 5 20:00:04.7703551 3.0078878 10.120.172.101 10.100.192.100 80 60000 TCP Flags=...A..S., 6 20:00:08.6831641 3.9128044 10.100.192.100 10.120.172.101 60000 80 HTTP Request, GET 7 20:00:08.6833164 0.0001443 10.120.172.101 10.100.192.100 80 60000 TCP Flags=...A...., |
※ Frame 1 および Frame 2 で、同時刻にクライアントから Syn を 2 つ受信しており、Frame 3 で Reset を応答しています。
※ Frame 4 にて Syn / Ack を送信するものの応答が無く、Frame 5 の再送後、約 4 秒後に HTTP Request を受信しています。
2. 対処方法について
上記のような通信遅延が発生する事例において、チーミング モードを "LACP" または "静的" として構成することで、現象が改善したという報告がございます。
当該事例では、チーミング モードを "LACP" または "静的" にて設定することで 2 つの Syn パケットを受信することが無くなり、その結果 Reset 応答をしなくなったことが改善の要因と考えられます。
以上より、LBFO と NLB を併用するような環境においては、チーミング モードは "LACP" または "静的" にて設定いただくことを推奨致します。
3. 参考
NIC チーミングの概要
https://technet.microsoft.com/ja-jp/library/hh831648.aspx
何でも屋: 可用性に対応する
https://technet.microsoft.com/ja-jp/magazine/jj149029.aspx