<div dir="ltr">Hi Maor,<div><br></div><div>I submitted the bug here :- <a href="https://bugzilla.redhat.com/show_bug.cgi?id=1249851">https://bugzilla.redhat.com/show_bug.cgi?id=1249851</a></div><div><br></div><div>Thanks,</div><div>Punit</div></div><div class="gmail_extra"><br><div class="gmail_quote">On Mon, Aug 3, 2015 at 4:08 PM, Maor Lipchuk <span dir="ltr">&lt;<a href="mailto:mlipchuk@redhat.com" target="_blank">mlipchuk@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Can you please open a bug at <a href="https://bugzilla.redhat.com/enter_bug.cgi?product=oVirt" rel="noreferrer" target="_blank">https://bugzilla.redhat.com/enter_bug.cgi?product=oVirt</a> with all the relevant logs so we can track this<br>
<br>
Thanks,<br>
<span class="im HOEnZb">Maor<br>
<br>
<br>
----- Original Message -----<br>
&gt; From: &quot;Punit Dambiwal&quot; &lt;<a href="mailto:hypunit@gmail.com">hypunit@gmail.com</a>&gt;<br>
&gt; To: &quot;Maor Lipchuk&quot; &lt;<a href="mailto:mlipchuk@redhat.com">mlipchuk@redhat.com</a>&gt;<br>
</span><div class="HOEnZb"><div class="h5">&gt; Cc: &quot;Ala Hino&quot; &lt;<a href="mailto:ahino@redhat.com">ahino@redhat.com</a>&gt;, <a href="mailto:users@ovirt.org">users@ovirt.org</a><br>
&gt; Sent: Monday, August 3, 2015 5:42:42 AM<br>
&gt; Subject: Re: [ovirt-users] can&#39;t add Datastorge | &#39;Sanlock lockspace add failure&#39;, &#39;Message too long&#39;<br>
&gt;<br>
&gt; Hi Maor,<br>
&gt;<br>
&gt; Already tired with vdsm and sanlock service restart but nothing help...<br>
&gt;<br>
&gt; Yes...i was facing some gluster issues earlier but those all resolved...but<br>
&gt; now i am stuck in Ovirt part...please help to solve this issue..<br>
&gt;<br>
&gt; On Sun, Aug 2, 2015 at 4:22 PM, Maor Lipchuk &lt;<a href="mailto:mlipchuk@redhat.com">mlipchuk@redhat.com</a>&gt; wrote:<br>
&gt;<br>
&gt; &gt; Hi Punit,<br>
&gt; &gt;<br>
&gt; &gt; Thanks for the logs, I didn&#39;t found the origin of the problem,<br>
&gt; &gt; perhaps you can try to see if stopping the VDSM service and restart the<br>
&gt; &gt; sanlock service can help.<br>
&gt; &gt;<br>
&gt; &gt; Ala, I know you handled some Gluster issues recently, do you have any<br>
&gt; &gt; insight about this? Have you encountered something similar?<br>
&gt; &gt;<br>
&gt; &gt; Regards,<br>
&gt; &gt; Maor<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; ----- Original Message -----<br>
&gt; &gt; &gt; From: &quot;Punit Dambiwal&quot; &lt;<a href="mailto:hypunit@gmail.com">hypunit@gmail.com</a>&gt;<br>
&gt; &gt; &gt; To: &quot;Maor Lipchuk&quot; &lt;<a href="mailto:mlipchuk@redhat.com">mlipchuk@redhat.com</a>&gt;<br>
&gt; &gt; &gt; Cc: <a href="mailto:users@ovirt.org">users@ovirt.org</a><br>
&gt; &gt; &gt; Sent: Friday, July 31, 2015 11:48:41 AM<br>
&gt; &gt; &gt; Subject: Re: [ovirt-users] can&#39;t add Datastorge | &#39;Sanlock lockspace add<br>
&gt; &gt; failure&#39;, &#39;Message too long&#39;<br>
&gt; &gt; &gt;<br>
&gt; &gt; &gt; Hi Maor,<br>
&gt; &gt; &gt;<br>
&gt; &gt; &gt; Please find the below logs :-<br>
&gt; &gt; &gt;<br>
&gt; &gt; &gt; 1. Engine logs :- <a href="http://paste.ubuntu.com/11971901/" rel="noreferrer" target="_blank">http://paste.ubuntu.com/11971901/</a><br>
&gt; &gt; &gt; 2. Sanlock lock (HV1) :- <a href="http://paste.ubuntu.com/11971916/" rel="noreferrer" target="_blank">http://paste.ubuntu.com/11971916/</a><br>
&gt; &gt; &gt; 3. VDSM Logs (HV1) :- <a href="http://paste.ubuntu.com/11971926/" rel="noreferrer" target="_blank">http://paste.ubuntu.com/11971926/</a><br>
&gt; &gt; &gt; 4. Sanlock lock (HV2) :- <a href="http://paste.ubuntu.com/11971950/" rel="noreferrer" target="_blank">http://paste.ubuntu.com/11971950/</a><br>
&gt; &gt; &gt; 5. VDSM Logs (HV2) :- <a href="http://paste.ubuntu.com/11971955/" rel="noreferrer" target="_blank">http://paste.ubuntu.com/11971955/</a><br>
&gt; &gt; &gt; 6. Var Messages (HV1) :- <a href="http://paste.ubuntu.com/11971967/" rel="noreferrer" target="_blank">http://paste.ubuntu.com/11971967/</a><br>
&gt; &gt; &gt; 7. Var Messages (HV2) :- <a href="http://paste.ubuntu.com/11971977/" rel="noreferrer" target="_blank">http://paste.ubuntu.com/11971977/</a><br>
&gt; &gt; &gt;<br>
&gt; &gt; &gt; The storage can be mount but in the ovirt it&#39;s failed to attached...<br>
&gt; &gt; &gt;<br>
&gt; &gt; &gt; [image: Inline image 1]<br>
&gt; &gt; &gt;<br>
&gt; &gt; &gt; On Thu, Jul 30, 2015 at 3:59 PM, Maor Lipchuk &lt;<a href="mailto:mlipchuk@redhat.com">mlipchuk@redhat.com</a>&gt;<br>
&gt; &gt; wrote:<br>
&gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; ----- Original Message -----<br>
&gt; &gt; &gt; &gt; &gt; From: &quot;Maor Lipchuk&quot; &lt;<a href="mailto:mlipchuk@redhat.com">mlipchuk@redhat.com</a>&gt;<br>
&gt; &gt; &gt; &gt; &gt; To: &quot;Punit Dambiwal&quot; &lt;<a href="mailto:hypunit@gmail.com">hypunit@gmail.com</a>&gt;<br>
&gt; &gt; &gt; &gt; &gt; Cc: <a href="mailto:users@ovirt.org">users@ovirt.org</a><br>
&gt; &gt; &gt; &gt; &gt; Sent: Thursday, July 30, 2015 10:56:02 AM<br>
&gt; &gt; &gt; &gt; &gt; Subject: Re: [ovirt-users] can&#39;t add Datastorge | &#39;Sanlock lockspace<br>
&gt; &gt; add<br>
&gt; &gt; &gt; &gt; failure&#39;, &#39;Message too long&#39;<br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; Thanks Punit, I will take a look.<br>
&gt; &gt; &gt; &gt; &gt; meanwhile can you please also add the sanlock log and the<br>
&gt; &gt; &gt; &gt; /var/log/messages<br>
&gt; &gt; &gt; &gt; &gt; log<br>
&gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; Also, please attach the full engine and vdsm logs as well<br>
&gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; Regards,<br>
&gt; &gt; &gt; &gt; &gt; Maor<br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; ----- Original Message -----<br>
&gt; &gt; &gt; &gt; &gt; &gt; From: &quot;Punit Dambiwal&quot; &lt;<a href="mailto:hypunit@gmail.com">hypunit@gmail.com</a>&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; To: &quot;Maor Lipchuk&quot; &lt;<a href="mailto:mlipchuk@redhat.com">mlipchuk@redhat.com</a>&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; Cc: <a href="mailto:users@ovirt.org">users@ovirt.org</a>, &quot;Dan Kenigsberg&quot; &lt;<a href="mailto:danken@redhat.com">danken@redhat.com</a>&gt;, &quot;Itamar<br>
&gt; &gt; &gt; &gt; Heim&quot;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &lt;<a href="mailto:iheim@redhat.com">iheim@redhat.com</a>&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; Sent: Thursday, July 30, 2015 4:15:17 AM<br>
&gt; &gt; &gt; &gt; &gt; &gt; Subject: Re: [ovirt-users] can&#39;t add Datastorge | &#39;Sanlock<br>
&gt; &gt; lockspace<br>
&gt; &gt; &gt; &gt; add<br>
&gt; &gt; &gt; &gt; &gt; &gt; failure&#39;, &#39;Message too long&#39;<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; Hi Maor,<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; Ovirt Version :- 3.5.2.1-1.el7.centos<br>
&gt; &gt; &gt; &gt; &gt; &gt; VDSM :- vdsm-4.16.20-0.el7.centos<br>
&gt; &gt; &gt; &gt; &gt; &gt; Glusterfs version :- glusterfs-3.6.3-1.el7<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; <a href="http://permalink.gmane.org/gmane.comp.emulators.ovirt.user/19732" rel="noreferrer" target="_blank">http://permalink.gmane.org/gmane.comp.emulators.ovirt.user/19732</a><br>
&gt; &gt; &gt; &gt; All are<br>
&gt; &gt; &gt; &gt; &gt; &gt; there but still i am facing the same issue..<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; ------------------------<br>
&gt; &gt; &gt; &gt; &gt; &gt; [root@stor1 ~]# gluster volume info 3TB<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; Volume Name: 3TB<br>
&gt; &gt; &gt; &gt; &gt; &gt; Type: Replicate<br>
&gt; &gt; &gt; &gt; &gt; &gt; Volume ID: 78d1f376-178d-4b01-90c0-5dac90b50a6c<br>
&gt; &gt; &gt; &gt; &gt; &gt; Status: Started<br>
&gt; &gt; &gt; &gt; &gt; &gt; Number of Bricks: 1 x 3 = 3<br>
&gt; &gt; &gt; &gt; &gt; &gt; Transport-type: tcp<br>
&gt; &gt; &gt; &gt; &gt; &gt; Bricks:<br>
&gt; &gt; &gt; &gt; &gt; &gt; Brick1: stor1:/bricks/b/vol2<br>
&gt; &gt; &gt; &gt; &gt; &gt; Brick2: stor2:/bricks/b/vol2<br>
&gt; &gt; &gt; &gt; &gt; &gt; Brick3: stor3:/bricks/b/vol2<br>
&gt; &gt; &gt; &gt; &gt; &gt; Options Reconfigured:<br>
&gt; &gt; &gt; &gt; &gt; &gt; storage.owner-gid: 36<br>
&gt; &gt; &gt; &gt; &gt; &gt; storage.owner-uid: 36<br>
&gt; &gt; &gt; &gt; &gt; &gt; cluster.server-quorum-type: server<br>
&gt; &gt; &gt; &gt; &gt; &gt; cluster.quorum-type: auto<br>
&gt; &gt; &gt; &gt; &gt; &gt; network.remote-dio: enable<br>
&gt; &gt; &gt; &gt; &gt; &gt; cluster.eager-lock: enable<br>
&gt; &gt; &gt; &gt; &gt; &gt; performance.stat-prefetch: off<br>
&gt; &gt; &gt; &gt; &gt; &gt; performance.io-cache: off<br>
&gt; &gt; &gt; &gt; &gt; &gt; performance.read-ahead: off<br>
&gt; &gt; &gt; &gt; &gt; &gt; performance.quick-read: off<br>
&gt; &gt; &gt; &gt; &gt; &gt; auth.allow: *<br>
&gt; &gt; &gt; &gt; &gt; &gt; user.cifs: enable<br>
&gt; &gt; &gt; &gt; &gt; &gt; nfs.disable: off<br>
&gt; &gt; &gt; &gt; &gt; &gt; [root@stor1 ~]#<br>
&gt; &gt; &gt; &gt; &gt; &gt; ------------------------<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; [image: Inline image 1]<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; On Wed, Jul 29, 2015 at 11:04 PM, Maor Lipchuk &lt;<br>
&gt; &gt; <a href="mailto:mlipchuk@redhat.com">mlipchuk@redhat.com</a>&gt;<br>
&gt; &gt; &gt; &gt; wrote:<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; Hi Punit,<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; Which oVirt version and VDSM version are you using?<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; The exception looks very similar to the scenario described here:<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; <a href="http://permalink.gmane.org/gmane.comp.emulators.ovirt.user/19732" rel="noreferrer" target="_blank">http://permalink.gmane.org/gmane.comp.emulators.ovirt.user/19732</a><br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; Does it helps ?<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; Regards,<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; Maor<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; ----- Original Message -----<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; From: &quot;Punit Dambiwal&quot; &lt;<a href="mailto:hypunit@gmail.com">hypunit@gmail.com</a>&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; To: <a href="mailto:users@ovirt.org">users@ovirt.org</a>, &quot;Dan Kenigsberg&quot; &lt;<a href="mailto:danken@redhat.com">danken@redhat.com</a>&gt;,<br>
&gt; &gt; &quot;Itamar<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; Heim&quot; &lt;<a href="mailto:iheim@redhat.com">iheim@redhat.com</a>&gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; Sent: Wednesday, July 29, 2015 5:22:57 AM<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; Subject: [ovirt-users] can&#39;t add Datastorge | &#39;Sanlock<br>
&gt; &gt; lockspace<br>
&gt; &gt; &gt; &gt; add<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; failure&#39;, &#39;Message too long&#39;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; Hi,<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; I have one testing ovirt cluster with one glusterfs storage<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; (Distributed<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; replicated) and 3 HV nodes...it&#39;s all working fine...but when i<br>
&gt; &gt; &gt; &gt; try to<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; add<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; another glusterfs datastorage (replicateX3),i am not able to<br>
&gt; &gt; add<br>
&gt; &gt; &gt; &gt; the<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; datastore to ovirt and it failed with the following error :-<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; 2015-07-29 10:05:55,194 ERROR<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; [org.ovirt.engine.core.vdsbroker.irsbroker.IrsBrokerCommand]<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; (org.ovirt.thread.pool-8-thread-32) [751c5f25]<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; IrsBroker::Failed::AttachStorageDomainVDS due to:<br>
&gt; &gt; &gt; &gt; IRSErrorException:<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; IRSGenericException: IRSErrorException: Failed to<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; AttachStorageDomainVDS,<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; error = Cannot acquire host id:<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; (u&#39;d0e76dd4-c34a-456e-b7f6-02dc173a3cc1&#39;,<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; SanlockException(90, &#39;Sanlock lockspace add failure&#39;, &#39;Message<br>
&gt; &gt; too<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; long&#39;)),<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; code = 661<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; Engine logs :- <a href="http://paste.ubuntu.com/11957076/" rel="noreferrer" target="_blank">http://paste.ubuntu.com/11957076/</a><br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; Screen shots attached...<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; Thanks,<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; Punit<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; _______________________________________________<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; Users mailing list<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; <a href="mailto:Users@ovirt.org">Users@ovirt.org</a><br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt; <a href="http://lists.ovirt.org/mailman/listinfo/users" rel="noreferrer" target="_blank">http://lists.ovirt.org/mailman/listinfo/users</a><br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt; &gt; _______________________________________________<br>
&gt; &gt; &gt; &gt; &gt; Users mailing list<br>
&gt; &gt; &gt; &gt; &gt; <a href="mailto:Users@ovirt.org">Users@ovirt.org</a><br>
&gt; &gt; &gt; &gt; &gt; <a href="http://lists.ovirt.org/mailman/listinfo/users" rel="noreferrer" target="_blank">http://lists.ovirt.org/mailman/listinfo/users</a><br>
&gt; &gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt; &gt;<br>
&gt; &gt; &gt;<br>
&gt; &gt;<br>
&gt;<br>
</div></div></blockquote></div><br></div>