<div dir="ltr"><div>In my opinion this issue is protocol agnostic. We may want to have a retry logic<br></div><div>to make sure client can &quot;talk&quot; to vdsm.<br><br></div><div>It seems that we could have this logic in the client code (disabled by default) and<br></div><div>client code could enable it if needed.<br></div><div><div><div><div><div><br><br><div class="gmail_extra"><br><div class="gmail_quote">On Fri, Nov 18, 2016 at 11:25 AM, Oved Ourfali <span dir="ltr">&lt;<a href="mailto:oourfali@redhat.com" target="_blank">oourfali@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><p dir="ltr">Discuss it with the infra guys and I&#39;m sure you&#39;ll get the reasons, and will figure out a solution together. <br>
</p>
<div class="gmail_extra"><br><div class="gmail_quote">On Nov 18, 2016 12:21 PM, &quot;Martin Sivak&quot; &lt;<a href="mailto:msivak@redhat.com" target="_blank">msivak@redhat.com</a>&gt; wrote:<br type="attribution"><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">What about making vdsm ready to answer connections when it returns to<br>
systemd instead? I hate workarounds and this always worked fine.<br></blockquote></div></div></blockquote><div><br></div><div>I am not so sure whether it will be so simple to do it. Recovery can take some time<br></div><div>and during this time vdsm is not functional. Interesting issue found [1].<br><br><br>[1] <a href="https://bugzilla.redhat.com/1396183">https://bugzilla.redhat.com/1396183</a><br></div><div><br> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div class="gmail_extra"><div class="gmail_quote"><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<br>
Martin<br>
<br>
On Fri, Nov 18, 2016 at 11:13 AM, Oved Ourfali &lt;<a href="mailto:oourfali@redhat.com" target="_blank">oourfali@redhat.com</a>&gt; wrote:<br>
&gt; Seems like a race regardless of the protocol.<br>
&gt; Should you add a retry?<br>
&gt;<br>
&gt;<br>
&gt; On Nov 18, 2016 11:52 AM, &quot;Martin Sivak&quot; &lt;<a href="mailto:msivak@redhat.com" target="_blank">msivak@redhat.com</a>&gt; wrote:<br>
&gt;&gt;<br>
&gt;&gt; Yes, because VDSM is supposed to be up (there is systemd dependency).<br>
&gt;&gt; This always worked fine with xml-rpc.<br>
&gt;&gt;<br>
&gt;&gt; Martin<br>
&gt;&gt;<br>
&gt;&gt; On Fri, Nov 18, 2016 at 10:14 AM, Nir Soffer &lt;<a href="mailto:nsoffer@redhat.com" target="_blank">nsoffer@redhat.com</a>&gt; wrote:<br>
&gt;&gt; &gt; On Fri, Nov 18, 2016 at 10:45 AM, Martin Sivak &lt;<a href="mailto:msivak@redhat.com" target="_blank">msivak@redhat.com</a>&gt;<br>
&gt;&gt; &gt; wrote:<br>
&gt;&gt; &gt;&gt; This happens because MOM can&#39;t connect to VDSM and so it quits.<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; So mom try once to connect and if the connection fails it quits?<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt;&gt; We<br>
&gt;&gt; &gt;&gt; discussed it on the mailinglist<br>
&gt;&gt; &gt;&gt;<br>
&gt;&gt; &gt;&gt;<br>
&gt;&gt; &gt;&gt; <a href="https://lists.fedoraproject.org/archives/list/vdsm-devel@lists.fedorahosted.org/thread/MZ7UJUWO5KFRDJJDNXX7VIYU5PWSXF62/" rel="noreferrer" target="_blank">https://lists.fedoraproject.or<wbr>g/archives/list/vdsm-devel@lis<wbr>ts.fedorahosted.org/thread/MZ7<wbr>UJUWO5KFRDJJDNXX7VIYU5PWSXF62/</a><br>
&gt;&gt; &gt;&gt; <a href="http://lists.ovirt.org/pipermail/devel/2016-November/014101.html" rel="noreferrer" target="_blank">http://lists.ovirt.org/piperma<wbr>il/devel/2016-November/014101.<wbr>html</a><br>
&gt;&gt; &gt;&gt;<br>
&gt;&gt; &gt;&gt; This issue never happened with XML-RPC.<br>
&gt;&gt; &gt;&gt;<br>
&gt;&gt; &gt;&gt; Shira reported it as<br>
&gt;&gt; &gt;&gt; <a href="https://bugzilla.redhat.com/show_bug.cgi?id=1393012" rel="noreferrer" target="_blank">https://bugzilla.redhat.com/sh<wbr>ow_bug.cgi?id=1393012</a><br>
&gt;&gt; &gt;&gt;<br>
&gt;&gt; &gt;&gt; Martin<br>
&gt;&gt; &gt;&gt;<br>
&gt;&gt; &gt;&gt; On Thu, Nov 17, 2016 at 7:42 PM, Yaniv Kaul &lt;<a href="mailto:ykaul@redhat.com" target="_blank">ykaul@redhat.com</a>&gt; wrote:<br>
&gt;&gt; &gt;&gt;&gt; I&#39;ve recently seen, including now on Master, the following warnings:<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:33:25 lago-basic-suite-master-host0 systemd[1]: Started MOM<br>
&gt;&gt; &gt;&gt;&gt; instance configured for VDSM purposes.<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:33:25 lago-basic-suite-master-host0 systemd[1]: Starting MOM<br>
&gt;&gt; &gt;&gt;&gt; instance configured for VDSM purposes...<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:33:35 lago-basic-suite-master-host0 vdsm[2012]: vdsm MOM<br>
&gt;&gt; &gt;&gt;&gt; WARN MOM<br>
&gt;&gt; &gt;&gt;&gt; not available, Policy could not be set.<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:33:39 lago-basic-suite-master-host0 vdsm[2012]: vdsm MOM<br>
&gt;&gt; &gt;&gt;&gt; WARN MOM<br>
&gt;&gt; &gt;&gt;&gt; not available.<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:33:39 lago-basic-suite-master-host0 vdsm[2012]: vdsm MOM<br>
&gt;&gt; &gt;&gt;&gt; WARN MOM<br>
&gt;&gt; &gt;&gt;&gt; not available, KSM stats will be missing.<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:33:55 lago-basic-suite-master-host0 vdsm[2012]: vdsm MOM<br>
&gt;&gt; &gt;&gt;&gt; WARN MOM<br>
&gt;&gt; &gt;&gt;&gt; not available.<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:33:55 lago-basic-suite-master-host0 vdsm[2012]: vdsm MOM<br>
&gt;&gt; &gt;&gt;&gt; WARN MOM<br>
&gt;&gt; &gt;&gt;&gt; not available, KSM stats will be missing.<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:34:10 lago-basic-suite-master-host0 vdsm[2012]: vdsm MOM<br>
&gt;&gt; &gt;&gt;&gt; WARN MOM<br>
&gt;&gt; &gt;&gt;&gt; not available.<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:34:10 lago-basic-suite-master-host0 vdsm[2012]: vdsm MOM<br>
&gt;&gt; &gt;&gt;&gt; WARN MOM<br>
&gt;&gt; &gt;&gt;&gt; not available, KSM stats will be missing.<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:34:26 lago-basic-suite-master-host0 vdsm[2012]: vdsm MOM<br>
&gt;&gt; &gt;&gt;&gt; WARN MOM<br>
&gt;&gt; &gt;&gt;&gt; not available.<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:34:26 lago-basic-suite-master-host0 vdsm[2012]: vdsm MOM<br>
&gt;&gt; &gt;&gt;&gt; WARN MOM<br>
&gt;&gt; &gt;&gt;&gt; not available, KSM stats will be missing.<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:34:42 lago-basic-suite-master-host0 vdsm[2012]: vdsm MOM<br>
&gt;&gt; &gt;&gt;&gt; WARN MOM<br>
&gt;&gt; &gt;&gt;&gt; not available.<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:34:42 lago-basic-suite-master-host0 vdsm[2012]: vdsm MOM<br>
&gt;&gt; &gt;&gt;&gt; WARN MOM<br>
&gt;&gt; &gt;&gt;&gt; not available, KSM stats will be missing.<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:34:57 lago-basic-suite-master-host0 vdsm[2012]: vdsm MOM<br>
&gt;&gt; &gt;&gt;&gt; WARN MOM<br>
&gt;&gt; &gt;&gt;&gt; not available.<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:34:57 lago-basic-suite-master-host0 vdsm[2012]: vdsm MOM<br>
&gt;&gt; &gt;&gt;&gt; WARN MOM<br>
&gt;&gt; &gt;&gt;&gt; not available, KSM stats will be missing.<br>
&gt;&gt; &gt;&gt;&gt; Nov 17 13:35:12 lago-basic-suite-master-host0 vdsm[2012]: vdsm MOM<br>
&gt;&gt; &gt;&gt;&gt; WARN MOM<br>
&gt;&gt; &gt;&gt;&gt; not available.<br>
&gt;&gt; &gt;&gt;&gt;<br>
&gt;&gt; &gt;&gt;&gt;<br>
&gt;&gt; &gt;&gt;&gt;<br>
&gt;&gt; &gt;&gt;&gt; Any ideas what this is and why?<br>
&gt;&gt; &gt;&gt;&gt;<br>
&gt;&gt; &gt;&gt;&gt; ______________________________<wbr>_________________<br>
&gt;&gt; &gt;&gt;&gt; Devel mailing list<br>
&gt;&gt; &gt;&gt;&gt; <a href="mailto:Devel@ovirt.org" target="_blank">Devel@ovirt.org</a><br>
&gt;&gt; &gt;&gt;&gt; <a href="http://lists.ovirt.org/mailman/listinfo/devel" rel="noreferrer" target="_blank">http://lists.ovirt.org/mailman<wbr>/listinfo/devel</a><br>
&gt;&gt; &gt;&gt; ______________________________<wbr>_________________<br>
&gt;&gt; &gt;&gt; Devel mailing list<br>
&gt;&gt; &gt;&gt; <a href="mailto:Devel@ovirt.org" target="_blank">Devel@ovirt.org</a><br>
&gt;&gt; &gt;&gt; <a href="http://lists.ovirt.org/mailman/listinfo/devel" rel="noreferrer" target="_blank">http://lists.ovirt.org/mailman<wbr>/listinfo/devel</a><br>
&gt;&gt; ______________________________<wbr>_________________<br>
&gt;&gt; Devel mailing list<br>
&gt;&gt; <a href="mailto:Devel@ovirt.org" target="_blank">Devel@ovirt.org</a><br>
&gt;&gt; <a href="http://lists.ovirt.org/mailman/listinfo/devel" rel="noreferrer" target="_blank">http://lists.ovirt.org/mailman<wbr>/listinfo/devel</a><br>
&gt;&gt;<br>
&gt;&gt;<br>
&gt;<br>
</blockquote></div></div>
</blockquote></div><br></div></div></div></div></div></div></div>