当方はlinux環境ですので、windowでの利用に関しては正確なことはいえませんが、
利用するツールはwindowsでも利用可能だと思いますので、参考までに。

利用ツール：
tcptrace
xpl2gpl
gnuplot

tcptraceはtcptrace.dmpをxplotで表示可能な形式(xpl)にするために利用します。
tcptraceの使用方法は、
マニュアルにあるので、詳しくはここを参考にしてください。
マニュアルによるとRTTのグラフは-Rオプションをつけるとのことなので、以下のコマンドを実行。

すると、a2b_rtt.xplといった感じのxplが生成されているはずです。

tcptraceが吐き出すのはxplot形式のデータなので、
gnuplotで表示させるために、xpl2gplを使って、gnuplot形式に変換します。

新たに、a2b_rtt.datasets, a2b_rtt.gpl, a2b_rtt.labelsが作成されるハズです。

そして、a2b_rtt.gplをgnuplotに渡せばrttのグラフが表示されると思います。


tcptraceを使えば、rttのほかにもcwndとか、スループットとかいろいろ見られて便利ですよ。

＃xplotのjava版 jPlotもあるみたいですが、使用していないので良くわかりません。