<div dir="ltr"><br><div class="gmail_extra"><br><div class="gmail_quote">On Tue, Apr 24, 2018 at 9:47 AM, Dan Kenigsberg <span dir="ltr">&lt;<a href="mailto:danken@redhat.com" target="_blank">danken@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><span class="gmail-">On Tue, Apr 24, 2018 at 4:36 PM, Ravi Shankar Nori &lt;<a href="mailto:rnori@redhat.com">rnori@redhat.com</a>&gt; wrote:<br>
&gt;<br>
&gt;<br>
&gt; On Tue, Apr 24, 2018 at 9:24 AM, Martin Perina &lt;<a href="mailto:mperina@redhat.com">mperina@redhat.com</a>&gt; wrote:<br>
&gt;&gt;<br>
&gt;&gt;<br>
&gt;&gt;<br>
&gt;&gt; On Tue, Apr 24, 2018 at 3:17 PM, Ravi Shankar Nori &lt;<a href="mailto:rnori@redhat.com">rnori@redhat.com</a>&gt;<br>
&gt;&gt; wrote:<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; On Tue, Apr 24, 2018 at 7:00 AM, Dan Kenigsberg &lt;<a href="mailto:danken@redhat.com">danken@redhat.com</a>&gt;<br>
&gt;&gt;&gt; wrote:<br>
&gt;&gt;&gt;&gt;<br>
&gt;&gt;&gt;&gt; Ravi&#39;s patch is in, but a similar problem remains, and the test cannot<br>
&gt;&gt;&gt;&gt; be put back into its place.<br>
&gt;&gt;&gt;&gt;<br>
&gt;&gt;&gt;&gt; It seems that while Vdsm was taken down, a couple of getCapsAsync<br>
&gt;&gt;&gt;&gt; requests queued up. At one point, the host resumed its connection,<br>
&gt;&gt;&gt;&gt; before the requests have been cleared of the queue. After the host is<br>
&gt;&gt;&gt;&gt; up, the following tests resume, and at a pseudorandom point in time,<br>
&gt;&gt;&gt;&gt; an old getCapsAsync request times out and kills our connection.<br>
&gt;&gt;&gt;&gt;<br>
&gt;&gt;&gt;&gt; I believe that as long as ANY request is on flight, the monitoring<br>
&gt;&gt;&gt;&gt; lock should not be released, and the host should not be declared as<br>
&gt;&gt;&gt;&gt; up.<br>
<br>
</span>Would you relate to this analysis ^^^ ?<br>
<span class="gmail-"><br></span></blockquote><div><br></div><div>The HostMonitoring lock issue has been fixed by <a href="https://gerrit.ovirt.org/#/c/90189/">https://gerrit.ovirt.org/#/c/90189/</a><br></div><div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><span class="gmail-">
&gt;&gt;&gt;&gt;<br>
&gt;&gt;&gt;&gt;<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; Hi Dan,<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; Can I have the link to the job on jenkins so I can look at the logs<br>
&gt;&gt;<br>
&gt;&gt;<br>
&gt;&gt; <a href="http://jenkins.ovirt.org/job/ovirt-system-tests_standard-check-patch/346/" rel="noreferrer" target="_blank">http://jenkins.ovirt.org/job/<wbr>ovirt-system-tests_standard-<wbr>check-patch/346/</a><br>
&gt;&gt;<br>
&gt;<br>
&gt;<br>
&gt; From the logs the only VDS lock that is being released twice is VDS_FENCE<br>
&gt; lock. Opened a BZ [1] for it. Will post a fix<br>
&gt;<br>
&gt; [1] <a href="https://bugzilla.redhat.com/show_bug.cgi?id=1571300" rel="noreferrer" target="_blank">https://bugzilla.redhat.com/<wbr>show_bug.cgi?id=1571300</a><br>
<br>
</span>Can this possibly cause a surprise termination of host connection?<br></blockquote><div><br></div><div>Not sure, from the logs VDS_FENCE is the only other VDS lock that is being released<br></div></div><br></div></div>