システム運用コミュの同じシーケンス番号が連続する

はじめまして。びーばーといいます。
いくつかのNWシステムの運用を行っております。

今回、顧客のNWにてサービス遅延が発生しているとのことで、障害対応を行っておりました。
WAN（広域イーサ）にも問題はなさそうで、ルータ、SW、ロードバランサも問題なさそうです。
（ルータは交換済み、SWやLBはログを見る限り問題なさそう。）

パケットキャプチャにてLB～ルータのパケットを取得してみると、遅いといわれているサーバとの通信にて、同じシーケンス番号のパケットが多量に流れているのがわかりました。
（わずか１msecに数パケットも流れており、それが数十パケット連続する。）

確認できたのはサーバからの通信に対する端末からの多量のACKパケットです。
１msecに数十パケットの勢いなので、WANルータではオーバーフローが発生しています。

同じシーケンスのパケットが続くのもおかしいですが、さらにそのパケットは一方的に機関銃的に流れ、数十パケット流れた後、別の通信にうつってしまいます。

これって、どんな原因が考えられるでしょう？
パケットを生成しているのはOSですよね。
OSは端末Win2000でサーバはWin2003です。

解消するにはどこを調べて、何に着目すべき？

お助けくださいませ。

コメント(4)

最初
全て
最新の40件

[1] mixiユーザー 05月31日 21:45

攻撃されてるとか。

[2] mixiユーザー 06月01日 07:32

Lappaさん、コメントありがとうございます。
WANも広域イーサですし、いちおう、閉じた通信網なんですよ。（インターネットには直接つながっていない。）

パケットキャプチャでパケットをみると、同システム網内の地方拠点の端末からサーバ間の通信に見えます。（正常な相手先との通信で、ウィルス感染も見られない。）

共通点は同じサーバ向け通信というところです。
（各拠点の端末から同じサーバ向けの通信で、同じようなパケットが見られるので、サーバを疑ってはいるのですが。）

具体的にはDuplicate_ackが多数見られます。
各端末からサーバ向け通信で。
ひどいときには10msecの間に60byteパケットが20～30とか送られていて、途中のルータが高負荷になりオーバーフローを起こしている。

取り急ぎの対応として（根本解決にはならなくても）ルータを上位機種に変えて処理能力を向上させ、急場をしのぐ予定です。

根本解決に向けては、どんなところに注目すべきでしょう？

[4] mixiユーザー 06月01日 10:26

内容拝見しました

広域イーサーで
（まあ大きくみて２社のどちらなのでしょうが）
シーケンスが重なることは普通ないですねえ
回線はあくまで『ひも』ですからねえ

考えられるのは

電文の確認もれ（実は別物の通信であった）
?いろいろなところからターゲートサーバーめがけておくられてくるはずですから　　送信元、送り先等の確認
できれば、プリントしてトレースを内容を整理すべき

?その同じシーケンスの電文の詳細のport番号等の
　アプリケーションの確認
　何かトリッキーなことをやっていないか
　特定のアプリケーションサービスで問題が生じているとか？
?問題と気がつくまえと後のシステム変更の有無
　OSバージョンUPや中間経路等での通信機器の増設
　クライント側の変更の有無
?トレース内容をメーカーサポートにだす
　OSが通常TCP/IPの通信を実装させているのであれば
　MSなのかな？
　（何かの要因で通信電文がおかしくなることは
　　バグとしては考えられること）
　１５．６年まえよくEWSとオフコンのTCP/IP通信で
　同じような経験があります。
この辺をさぐってみてはどうですか

ログインすると、みんなのコメントがもっと見れるよ