<div dir="ltr"><div class="gmail_default" style="font-family:monospace,monospace">Bloody hell. The original was also completely broken, and worked by chance. Damn it.</div><div class="gmail_default" style="font-family:monospace,monospace"><br></div><div class="gmail_default" style="font-family:monospace,monospace">This should fix it:</div><div class="gmail_default"><font face="monospace, monospace"><a href="https://gerrit.ovirt.org/#/c/82989/">https://gerrit.ovirt.org/#/c/82989/</a></font><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Oct 19, 2017 at 3:49 PM, Martin Perina <span dir="ltr">&lt;<a href="mailto:mperina@redhat.com" target="_blank">mperina@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div class="gmail_default" style="font-family:arial,helvetica,sans-serif">So the real issue on adding a host is the same as I&#39;ve today described in [2] and most probably caused by [3] (I reverted engine in my dev env prior this patch and host deploy finished successfully).<br><br>Allon, do you have time to post a fix? If not I&#39;ll try to dig into your change and related networking code to post it ...<br><br><br>[2] <a href="https://bugzilla.redhat.com/show_bug.cgi?id=1504005" target="_blank">https://bugzilla.redhat.com/<wbr>show_bug.cgi?id=1504005</a><br>[3] <a href="https://gerrit.ovirt.org/#/c/82545/" target="_blank">https://gerrit.ovirt.org/#/c/<wbr>82545/</a><br></div><div><div class="h5"><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Oct 19, 2017 at 11:12 AM, Martin Perina <span dir="ltr">&lt;<a href="mailto:mperina@redhat.com" target="_blank">mperina@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div style="font-family:arial,helvetica,sans-serif"><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Oct 19, 2017 at 11:04 AM, Martin Perina <span dir="ltr">&lt;<a href="mailto:mperina@redhat.com" target="_blank">mperina@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div style="font-family:arial,helvetica,sans-serif"><br></div><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Oct 19, 2017 at 10:58 AM, Dan Kenigsberg <span dir="ltr">&lt;<a href="mailto:danken@redhat.com" target="_blank">danken@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">On Thu, Oct 19, 2017 at 10:29 AM, Martin Perina &lt;<a href="mailto:mperina@redhat.com" target="_blank">mperina@redhat.com</a>&gt; wrote:<br>
&gt;<br>
&gt;<br>
&gt; On Thu, Oct 19, 2017 at 7:35 AM, Dan Kenigsberg &lt;<a href="mailto:danken@redhat.com" target="_blank">danken@redhat.com</a>&gt; wrote:<br>
&gt;&gt;<br>
&gt;&gt; On Wed, Oct 18, 2017 at 2:40 PM, Daniel Belenky &lt;<a href="mailto:dbelenky@redhat.com" target="_blank">dbelenky@redhat.com</a>&gt;<br>
&gt;&gt; wrote:<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; Hi all,<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; The following test is failing: 002_bootstrap.verify_add_hosts<br>
&gt;&gt;&gt; All logs from failing job<br>
&gt;&gt;&gt; Only 2 engine patches participated in the test, so the suspected patches<br>
&gt;&gt;&gt; are:<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; <a href="https://gerrit.ovirt.org/#/c/82542/2" rel="noreferrer" target="_blank">https://gerrit.ovirt.org/#/c/8<wbr>2542/2</a><br>
&gt;&gt;&gt; <a href="https://gerrit.ovirt.org/#/c/82545/3" rel="noreferrer" target="_blank">https://gerrit.ovirt.org/#/c/8<wbr>2545/3</a><br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; Due to the fact that when this error first introduced we had another<br>
&gt;&gt;&gt; error, the CI can&#39;t automatically detect the specific patch.<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; Error snippet from logs: ovirt-host-deploy-ansible log (Full log)<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; TASK [ovirt-host-deploy-firewalld : Enable firewalld rules]<br>
&gt;&gt;&gt; ********************<br>
&gt;&gt;&gt; failed: [lago-basic-suite-master-host-<wbr>0] (item={u&#39;service&#39;:<br>
&gt;&gt;&gt; u&#39;glusterfs&#39;}) =&gt; {&quot;changed&quot;: false, &quot;failed&quot;: true, &quot;item&quot;: {&quot;service&quot;:<br>
&gt;&gt;&gt; &quot;glusterfs&quot;}, &quot;msg&quot;: &quot;ERROR: Exception caught:<br>
&gt;&gt;&gt; org.fedoraproject.FirewallD1.E<wbr>xception: INVALID_SERVICE: &#39;glusterfs&#39; not<br>
&gt;&gt;&gt; among existing services Permanent and Non-Permanent(immediate) operation,<br>
&gt;&gt;&gt; Services are defined by port/tcp relationship and named as they are in<br>
&gt;&gt;&gt; /etc/services (on most systems)&quot;}<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; Error from HOST 0 firewalld log:<br>
&gt;&gt;&gt; lago-basic-suite-master-host-0<wbr>/_var_log/firewalld/ (Full log)<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; 2017-10-15 16:51:24 ERROR: INVALID_SERVICE: &#39;glusterfs&#39; not among<br>
&gt;&gt;&gt; existing services<br>
&gt;&gt;<br>
&gt;&gt;<br>
&gt;&gt; Ondra, would such an error propagate through the playbook to Engine and<br>
&gt;&gt; fail the add-host flow? (I think it should!)<br>
&gt;<br>
&gt;<br>
&gt; We didn&#39;t do that so far, because of EL 7.3<br>
&gt; . We need firewalld from 7.4 to have all available services in place (I<br>
&gt; don&#39;t remember but I think imageio service was the one delivered only in<br>
&gt; firewalld from 7.4). So  up until now we ingore non-existent firewalld<br>
&gt; service, but if needed we can turn this on and fail host deploy.<br>
<br>
Ok, so for now your &quot;luckily&quot; off the hook and not the reason of failure.<br>
<br>
&gt;&gt;<br>
&gt;&gt;<br>
&gt;&gt; Do you know which package provide the glusterfs firewalld service, and why<br>
&gt;&gt; it is missing from the host?<br>
&gt;<br>
&gt;<br>
&gt; So we have used &#39;glusterfs&#39; firewalld service per Sahina recommendation,<br>
&gt; which is included in glusterfs-server package from version 3.7.6 [1]. But<br>
&gt; this package is not installed when installing packages for cluster with<br>
&gt; gluster capabilities enabled. So now I&#39;m confused: don&#39;t we need<br>
&gt; glusterfs-server package? If not and we need those ports open because they<br>
&gt; are used by services from different already installed glusterfs packages,<br>
&gt; shouldn&#39;t the firewalld configuration be moved from glusterfs-server to<br>
&gt; glusterfs package?<br>
<br>
glusterfs-cli.rpm is required to consume gluster storage (virt use<br>
case), but I don&#39;t recall that it needs open ports.<br></blockquote><div><br><div>​It was there even for IPTables, if gluster support is enabled on cluster, then gluster specific ports were enabled even with IPTables. FirewallD feature continues to use that.<br>​</div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
glusterfs-server.rpm is required to provide gluster storage (gluster use case).<br>
If I recall correctly, firewalld feature has differentiated between<br>
the two; opening needed ports only when relevant.<br></blockquote><div><br><div>​Right, but if gluster services are configured for firewalld it means that the host has been added to the cluster with gluster feature enabled and not only virt<br>​</div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<br>
&gt;<br>
&gt;<br>
&gt; [1] <a href="https://bugzilla.redhat.com/show_bug.cgi?id=1057295" rel="noreferrer" target="_blank">https://bugzilla.redhat.com/sh<wbr>ow_bug.cgi?id=1057295</a><br>
&gt;<br>
&gt;<br>
</blockquote></div><br></div></div>
</blockquote></div><br></div>
</blockquote></div><br></div></div></div></div>
</blockquote></div><br></div>