<div dir="ltr">Hi Antoni,<div><br></div><div>But all the bricks and gluster in the another subnet...I am using the Compute and gluster storage combined on the same host....</div><div><br></div><div>Ovirtmgmt :- <a href="http://43.25.76.0/24">43.25.76.0/24</a></div>
<div>Gluster Storage :-  <a href="http://10.10.10.0/24">10.10.10.0/24</a></div><div><br></div><div>Thanks,</div><div>Punit </div></div><div class="gmail_extra"><br><br><div class="gmail_quote">On Wed, Jul 30, 2014 at 6:17 PM, Antoni Segura Puimedon <span dir="ltr">&lt;<a href="mailto:asegurap@redhat.com" target="_blank">asegurap@redhat.com</a>&gt;</span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div class=""><br>
<br>
----- Original Message -----<br>
&gt; From: &quot;Punit Dambiwal&quot; &lt;<a href="mailto:hypunit@gmail.com">hypunit@gmail.com</a>&gt;<br>
&gt; To: &quot;Antoni Segura Puimedon&quot; &lt;<a href="mailto:asegurap@redhat.com">asegurap@redhat.com</a>&gt;<br>
&gt; Cc: &quot;Sahina Bose&quot; &lt;<a href="mailto:sabose@redhat.com">sabose@redhat.com</a>&gt;, &quot;Dan Kenigsberg&quot; &lt;<a href="mailto:danken@redhat.com">danken@redhat.com</a>&gt;, <a href="mailto:barumuga@redhat.com">barumuga@redhat.com</a>, <a href="mailto:users@ovirt.org">users@ovirt.org</a>,<br>

&gt; &quot;Itamar Heim&quot; &lt;<a href="mailto:iheim@redhat.com">iheim@redhat.com</a>&gt;, &quot;Michal Skrivanek&quot; &lt;<a href="mailto:michal.skrivanek@redhat.com">michal.skrivanek@redhat.com</a>&gt;, &quot;Sven Kieske&quot;<br>

&gt; &lt;<a href="mailto:S.Kieske@mittwald.de">S.Kieske@mittwald.de</a>&gt;, &quot;Frantisek Kobzik&quot; &lt;<a href="mailto:fkobzik@redhat.com">fkobzik@redhat.com</a>&gt;, <a href="mailto:ahadas@redhat.com">ahadas@redhat.com</a><br>

</div><div class="">&gt; Sent: Wednesday, July 30, 2014 12:11:30 PM<br>
&gt; Subject: Re: Network Question<br>
&gt;<br>
&gt; Hi Antoni,<br>
&gt;<br>
</div>&gt; Please find the attached..for the network settings..<br>
<br>
Shouldn&#39;t the bricks and all gluster be on the same subnet as storage?<br>
Otherwise it is going to use the link scoped route of ovirtmgmt that is<br>
on the same subnet as them.<br>
<div class="HOEnZb"><div class="h5"><br>
&gt;<br>
&gt;<br>
&gt; On Wed, Jul 30, 2014 at 5:42 PM, Antoni Segura Puimedon &lt;<a href="mailto:asegurap@redhat.com">asegurap@redhat.com</a><br>
&gt; &gt; wrote:<br>
&gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; ----- Original Message -----<br>
&gt; &gt; &gt; From: &quot;Punit Dambiwal&quot; &lt;<a href="mailto:hypunit@gmail.com">hypunit@gmail.com</a>&gt;<br>
&gt; &gt; &gt; To: &quot;Antoni Segura Puimedon&quot; &lt;<a href="mailto:asegurap@redhat.com">asegurap@redhat.com</a>&gt;<br>
&gt; &gt; &gt; Cc: &quot;Sahina Bose&quot; &lt;<a href="mailto:sabose@redhat.com">sabose@redhat.com</a>&gt;, &quot;Dan Kenigsberg&quot; &lt;<br>
&gt; &gt; <a href="mailto:danken@redhat.com">danken@redhat.com</a>&gt;, <a href="mailto:barumuga@redhat.com">barumuga@redhat.com</a>, <a href="mailto:users@ovirt.org">users@ovirt.org</a>,<br>
&gt; &gt; &gt; &quot;Itamar Heim&quot; &lt;<a href="mailto:iheim@redhat.com">iheim@redhat.com</a>&gt;, &quot;Michal Skrivanek&quot; &lt;<br>
&gt; &gt; <a href="mailto:michal.skrivanek@redhat.com">michal.skrivanek@redhat.com</a>&gt;, &quot;Sven Kieske&quot;<br>
&gt; &gt; &gt; &lt;<a href="mailto:S.Kieske@mittwald.de">S.Kieske@mittwald.de</a>&gt;, &quot;Frantisek Kobzik&quot; &lt;<a href="mailto:fkobzik@redhat.com">fkobzik@redhat.com</a>&gt;,<br>
&gt; &gt; <a href="mailto:ahadas@redhat.com">ahadas@redhat.com</a><br>
&gt; &gt; &gt; Sent: Wednesday, July 30, 2014 11:35:28 AM<br>
&gt; &gt; &gt; Subject: Re: Network Question<br>
&gt; &gt; &gt;<br>
&gt; &gt; &gt; Hi Antoni,<br>
&gt; &gt; &gt;<br>
&gt; &gt; &gt; Please find the attached screen shots...<br>
&gt; &gt;<br>
&gt; &gt; From what I see in the screen shots,<br>
&gt; &gt;<br>
&gt; &gt; The ip rules and routes say that communication to the<br>
&gt; &gt; <a href="http://43.25.76.0/24" target="_blank">43.25.76.0/24</a> should go via bond0.10 which is for the ovirtmgmt device.<br>
&gt; &gt; That&#39;s why it happens.<br>
&gt; &gt;<br>
&gt; &gt; How did you setup the two networks? Are they on the same subnet?<br>
&gt; &gt;<br>
&gt; &gt; &gt;<br>
&gt; &gt; &gt; Thanks,<br>
&gt; &gt; &gt; Punit<br>
&gt; &gt; &gt;<br>
&gt; &gt; &gt;<br>
&gt; &gt; &gt; On Wed, Jul 30, 2014 at 5:19 PM, Antoni Segura Puimedon &lt;<br>
&gt; &gt; <a href="mailto:asegurap@redhat.com">asegurap@redhat.com</a><br>
&gt; &gt; &gt; &gt; wrote:<br>
&gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; ----- Original Message -----<br>
&gt; &gt; &gt; &gt; &gt; From: &quot;Punit Dambiwal&quot; &lt;<a href="mailto:hypunit@gmail.com">hypunit@gmail.com</a>&gt;<br>
&gt; &gt; &gt; &gt; &gt; To: &quot;Sahina Bose&quot; &lt;<a href="mailto:sabose@redhat.com">sabose@redhat.com</a>&gt;<br>
&gt; &gt; &gt; &gt; &gt; Cc: &quot;Dan Kenigsberg&quot; &lt;<a href="mailto:danken@redhat.com">danken@redhat.com</a>&gt;, <a href="mailto:barumuga@redhat.com">barumuga@redhat.com</a>,<br>
&gt; &gt; &gt; &gt; <a href="mailto:users@ovirt.org">users@ovirt.org</a>, &quot;Itamar Heim&quot; &lt;<a href="mailto:iheim@redhat.com">iheim@redhat.com</a>&gt;,<br>
&gt; &gt; &gt; &gt; &gt; &quot;Michal Skrivanek&quot; &lt;<a href="mailto:michal.skrivanek@redhat.com">michal.skrivanek@redhat.com</a>&gt;, &quot;Antoni Segura<br>
&gt; &gt; &gt; &gt; Puimedon&quot; &lt;<a href="mailto:asegurap@redhat.com">asegurap@redhat.com</a>&gt;, &quot;Sven Kieske&quot;<br>
&gt; &gt; &gt; &gt; &gt; &lt;<a href="mailto:S.Kieske@mittwald.de">S.Kieske@mittwald.de</a>&gt;, &quot;Frantisek Kobzik&quot; &lt;<a href="mailto:fkobzik@redhat.com">fkobzik@redhat.com</a>&gt;,<br>
&gt; &gt; &gt; &gt; <a href="mailto:ahadas@redhat.com">ahadas@redhat.com</a><br>
&gt; &gt; &gt; &gt; &gt; Sent: Wednesday, July 30, 2014 10:46:47 AM<br>
&gt; &gt; &gt; &gt; &gt; Subject: Re: Network Question<br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; Hi All,<br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; I am using the storage ip to mount the glusterfs to host...that<br>
&gt; &gt; means the<br>
&gt; &gt; &gt; &gt; &gt; data communication should be run on this network but it&#39;s not....it&#39;s<br>
&gt; &gt; &gt; &gt; &gt; running on the ovirtmgmt network...<br>
&gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; Could you please attach the ip addresses of the gluster nodes, and the<br>
&gt; &gt; &gt; &gt; result of doing:<br>
&gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; (on the vdsm host)<br>
&gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; ip rule show<br>
&gt; &gt; &gt; &gt; ip route show table (add here each of the tables that show up in the<br>
&gt; &gt; &gt; &gt; previous<br>
&gt; &gt; &gt; &gt; command)<br>
&gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; [image: Inline image 1]<br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; On Wed, Jul 30, 2014 at 4:26 PM, Sahina Bose &lt;<a href="mailto:sabose@redhat.com">sabose@redhat.com</a>&gt;<br>
&gt; &gt; wrote:<br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; On 07/30/2014 01:21 PM, Dan Kenigsberg wrote:<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt; On Wed, Jul 30, 2014 at 01:04:48PM +0800, Punit Dambiwal wrote:<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt; Hi,<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt; I am facing one strange problem with Ovirt network...i have the<br>
&gt; &gt; below<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt; network in my ovirt cluster :-<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt; eth0+eth1=bond0<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt; bond0.10= ovirtmgmt (43.250.X.X)<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt; bond0.37= VMnetwork<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt; eth2+eth3=bond1 (Storage) (10.10.10.X)<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt; Glusterfs running on 4 HV&#39;s with each have 2 bricks...<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt; But still the glusterfs data transfer from ovirtmgmt network<br>
&gt; &gt; instead<br>
&gt; &gt; &gt; &gt; of<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt; storage network ?? Is there any more setting required to change<br>
&gt; &gt; it to<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt; ovirtmgmt to storage ??<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt; The title &quot;Storage&quot; means nothing to oVirt per se. The user needs<br>
&gt; &gt; to<br>
&gt; &gt; &gt; &gt; make<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt; sure<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt; that her NFS or iSCSI storage server uses the specific network.<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt; But unfortunately - and Bala is welcome to correct me if I&#39;m<br>
&gt; &gt; wrong -<br>
&gt; &gt; &gt; &gt; there<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt; is no means to set the IP address which gluster uses via oVirt.<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt; Can it be done &quot;underneath&quot; oVirt?<br>
&gt; &gt; &gt; &gt; &gt; &gt;&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; For glusterd communication - that is gluster peer to gluster peer -<br>
&gt; &gt; &gt; &gt; &gt; &gt; there&#39;s a workaround to achieve this..Please see<br>
&gt; &gt; &gt; &gt; <a href="http://lists.ovirt.org/" target="_blank">http://lists.ovirt.org/</a><br>
&gt; &gt; &gt; &gt; &gt; &gt; pipermail/users/2014-February/021213.html<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; For VM to gluster host, the host IP used to mount the volume is<br>
&gt; &gt; the one<br>
&gt; &gt; &gt; &gt; &gt; &gt; used for communication by oVirt.<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt;<br>
&gt; &gt;<br>
&gt;<br>
</div></div></blockquote></div><br></div>