<html><head></head><body><div style="font-family:Helvetica Neue, Helvetica, Arial, sans-serif;font-size:13px;"><div style="font-family:Helvetica Neue, Helvetica, Arial, sans-serif;font-size:13px;"><div>The data&nbsp; is also shown in an internaldump as a part of the mmfsadm dump tscomm data,&nbsp; the RTO &amp; RTT times are listed in microseconds.&nbsp; So the RTO here in my example is 18.5 seconds (see below).&nbsp;&nbsp; You&nbsp; can get the same information from the&nbsp; Linux networking command&nbsp;&nbsp; ss -i.&nbsp;&nbsp;&nbsp; The normal setting for RTO is 200 ms.&nbsp;&nbsp;&nbsp; Seeing retransmits and backups will drive up the RTO time.&nbsp;&nbsp;&nbsp; When I look at internaldumps from node expels it is not unusual to see 13 backoffs and retransmits and RTO to have hit 120 seconds&nbsp;&nbsp; at which point the tcp/ip connection times out.<br><div><br><span>&nbsp;10.0.0.31.24/0<br>&nbsp;&nbsp;&nbsp; state 1 established snd_wscale 10 rcv_wscale 10 rto 18558000 ato 40000<br>&nbsp;&nbsp;&nbsp; retransmits 4 probes 0 backoff 4 options: TSTAMP SACK WSCALE<br>&nbsp;&nbsp;&nbsp; rtt 2761650 rttvar 3238039 snd_ssthresh 4 snd_cwnd 5 unacked 0<br>&nbsp;&nbsp;&nbsp; snd_mss 1992 rcv_mss 1992 pmtu 2044 advmss 1992 rcv_ssthresh 157708<br>&nbsp;&nbsp;&nbsp; sacked 0 lost 0 retrans 0 fackets 0 reordering 3 ca_state 'open'<br><br></span><br></div></div><div></div>
        <div>Jim<br></div><div><br></div>
        
        </div><div id="yahoo_quoted_8399936019" class="yahoo_quoted">
            <div style="font-family:'Helvetica Neue', Helvetica, Arial, sans-serif;font-size:13px;color:#26282a;">
                
                <div>
                    On Thursday, September 27, 2018, 11:14:43 AM EDT, Buterbaugh, Kevin L &lt;Kevin.Buterbaugh@Vanderbilt.Edu&gt; wrote:
                </div>
                <div><br></div>
                <div><br></div>
                <div><div id="yiv4097561737">

 

<div>
Hi All,
<div class="yiv4097561737"><br class="yiv4097561737">
</div>
<div class="yiv4097561737">2018-09-27_09:48:50.923-0500: [E] The TCP connection to IP address 1.2.3.4 some client &lt;c0n509&gt; (socket 442) state is unexpected: ca_state=1 unacked=3 rto=27008000</div>
<div class="yiv4097561737"><br class="yiv4097561737">
</div>
<div class="yiv4097561737">Seeing errors like the above and trying to track down the root cause. &nbsp;I know that at last weeks\u2019 GPFS User Group meeting at ORNL this very error message was discussed, but I don\u2019t recall the details and the slides haven\u2019t been posted to the website
 yet. &nbsp;IIRC, the \u201crto\u201d is significant \u2026&nbsp;</div>
<div class="yiv4097561737"><br class="yiv4097561737">
</div>
<div class="yiv4097561737">I\u2019ve Googled, but haven\u2019t gotten any hits, nor have I found anything in the GPFS 4.2.2 Problem Determination Guide.</div>
<div class="yiv4097561737"><br class="yiv4097561737">
</div>
<div class="yiv4097561737">Thanks in advance\u2026</div>
<div class="yiv4097561737"><br class="yiv4097561737">
<div class="yiv4097561737">
<div class="yiv4097561737">\u2014</div>
<div class="yiv4097561737">Kevin Buterbaugh - Senior System Administrator</div>
<div class="yiv4097561737">Vanderbilt University - Advanced Computing Center for Research and Education</div>
<div class="yiv4097561737"><a rel="nofollow" ymailto="mailto:Kevin.Buterbaugh@vanderbilt.edu" target="_blank" href="mailto:Kevin.Buterbaugh@vanderbilt.edu" class="yiv4097561737">Kevin.Buterbaugh@vanderbilt.edu</a>&nbsp;- (615)875-9633</div>
<div class="yiv4097561737"><br class="yiv4097561737">
</div>
<br class="yiv4097561737Apple-interchange-newline">
</div>
<br class="yiv4097561737">
</div>
</div>

</div>_______________________________________________<br>gpfsug-discuss mailing list<br>gpfsug-discuss at spectrumscale.org<br><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" target="_blank">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</a><br></div>
            </div>
        </div></div></body></html>