<div dir="ltr"><br><div class="gmail_extra"><br><div class="gmail_quote">On Mon, Jul 3, 2017 at 11:00 AM, M Mahboubian <span dir="ltr">&lt;<a href="mailto:m_mahboubian@yahoo.com" target="_blank">m_mahboubian@yahoo.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div style="color:#000;background-color:#fff;font-family:Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px"><div id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3359"><span>Hi Yanis,</span></div><div id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3360"><span><br></span></div><div id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3361" dir="ltr"><span>Thank you for your reply. </span></div><span class=""><div id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3361" dir="ltr"><span><br></span></div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3420">| Interesting - what interface are they using?</div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421">| Is that raw or raw sparse? How did you perform the conversion? (or no conversion - just copied the disks over?)</div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421"><br></div></span><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421">The VM disks are in the SAN storage in order to use oVirt we just pointed them to the oVirt VMs. This is how we did it precisely:</div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421">First we created the VMs in oVirt with disks which are the same size as the existing disks. then we deleted these disks which was generated by oVirt and renamed our existing disks to match the deleted ones naming-wise. Finally we started the oVirt VMs and they were able to run and these VMs are always ok without any issue.</div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421"><br></div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421">The new VMs which have problem are from scratch (no template). One thing though, all these new VMs are created based on an CentOS 7 ISO. We have not tried any other flavor of Linux.</div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421"><br></div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421">The kernel 4.1 is actually from Oracle Linux repository since we needed to have OCFS2 support. So after installing oVirt we updated the kernel to Oracle Linux kernel 4.1 since that kernel supports OCFS2.</div></div></div></blockquote><div><br></div><div>Would it be possible to test with the regular CentOS kernel? Just to ensure it&#39;s not the kernel causing this?</div><div>Y.</div><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div style="color:#000;background-color:#fff;font-family:Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px"><span class=""><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421"><br></div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421">| We might need to get libvirt debug logs (and perhaps journal output of the host).<br></div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421"><br></div></span><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421">I&#39;ll get this information and post here.</div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421"><br></div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421">Regards</div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421"><br></div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421"><br></div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421"><br></div><div style="font-family:&quot;Helvetica Neue&quot;,&quot;Segoe UI&quot;,Helvetica,Arial,&quot;Lucida Grande&quot;,sans-serif" dir="ltr" id="m_897362570595642410yui_3_16_0_ym19_1_1499067397139_3421"><br></div> <div class="m_897362570595642410qtdSeparateBR"><br><br></div><div class="m_897362570595642410yahoo_quoted" style="display:block"> <div style="font-family:Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px"> <div style="font-family:HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:16px"><div><div class="h5"> <div dir="ltr"><font size="2" face="Arial"> On Monday, July 3, 2017 3:01 PM, Yaniv Kaul &lt;<a href="mailto:ykaul@redhat.com" target="_blank">ykaul@redhat.com</a>&gt; wrote:<br></font></div>  <br><br> </div></div><div class="m_897362570595642410y_msg_container"><div id="m_897362570595642410yiv5808088584"><div><div dir="ltr"><br clear="none"><div class="m_897362570595642410yiv5808088584gmail_extra"><br clear="none"><div class="m_897362570595642410yiv5808088584gmail_quote"><div><div class="h5">On Mon, Jul 3, 2017 at 6:49 AM, M Mahboubian <span dir="ltr">&lt;<a rel="nofollow" shape="rect" href="mailto:m_mahboubian@yahoo.com" target="_blank">m_mahboubian@yahoo.com</a>&gt;</span> wrote:<br clear="none"><blockquote class="m_897362570595642410yiv5808088584gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div style="color:#000;background-color:#fff;font-family:Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6544">
Hi Yaniv,<div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6543"><br clear="none"></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6566">Thanks for your reply. Apologies for my late reply we had a long holiday here. </div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6565"><br clear="none"></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6564">To answer you:</div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6563"><br clear="none"></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6557">Yes the  guest VM become completely frozen and non responsive as soon as its disk has any activity for example when we shutdown or do a yum update. </div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6556"><br clear="none"></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6555"><br clear="none"></div><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6546"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6554"><span id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6553">Versions of all the components involved - guest OS, host OS (qemu-kvm version), how do you run the VM (vdsm log would be helpful here), exact storage specification (1Gb or 10Gb link? What is the NFS version? What is it hosted on? etc.)</span></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6552"><span> Y.</span></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6551"><span><br clear="none"></span></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6551"><span id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9556">Some facts about our environment:</span></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6551"><span><br clear="none"></span></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6551"><span id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9703">1) Previously, this environment was using XEN using raw disk and we change it to Ovirt (Ovirt were able to read the VMs&#39;s disks without any conversion.) </span></div></div></div></div></div></div></blockquote><div><br clear="none"></div><div>Interesting - what interface are they using?</div><div>Is that raw or raw sparse? How did you perform the conversion? (or no conversion - just copied the disks over?)</div><div> </div><blockquote class="m_897362570595642410yiv5808088584gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div style="color:#000;background-color:#fff;font-family:Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6544"><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6546"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6551"><span id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9800">2) The issue we are facing is not happening for any of the existing VMs. </span></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6551"><span id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9686"><b id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9685">3) This issue only happens for new VMs.</b></span></div></div></div></div></div></div></blockquote><div><br clear="none"></div><div>New VMs from blank, or from a template (as a snapshot over the previous VMs) ?</div><div> </div><blockquote class="m_897362570595642410yiv5808088584gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div style="color:#000;background-color:#fff;font-family:Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6544"><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6546"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6551"><span>4) G</span>uest (kernel v3.10) and host(kernel v4.1) OSes are both CentOS 7 minimal installation. </div></div></div></div></div></div></blockquote><div><br clear="none"></div><div>Kernel 4.1? From where?</div><div> </div><blockquote class="m_897362570595642410yiv5808088584gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div style="color:#000;background-color:#fff;font-family:Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6544"><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6546"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6551"><b id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9591">5) NFS version 4</b> and Using Ovirt 4.1</div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6550"><span>6) </span><b>The network speed is 1 GB.</b></div></div></div></div></div></div></blockquote><div><br clear="none"></div><div>That might be very slow (but should not cause such an issue, unless severely overloaded. </div><div><br clear="none"></div><blockquote class="m_897362570595642410yiv5808088584gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div style="color:#000;background-color:#fff;font-family:Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6544"><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6546"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6550"><span>7) </span>The output for rpm -qa | grep qemu-kvm shows:</div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6550"><b id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9222">     qemu-kvm-common-ev-2.6.0-28. e17_3.6.1.x86_64</b><br clear="none"></div><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6550"><b id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9360"><span id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_8120">     qemu-kvm-tools-ev-</span>2.6.0-28. e17_3.6.1.x86_64</b></div><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6550"><b id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9359">     qemu-kvm-ev-2.6.0-28.e17_3.6. 1.x86_64</b></div></div></div></div></div></div></blockquote><div><br clear="none"></div><div>That&#39;s good - that&#39;s almost the latest-greatest.</div><div> </div><blockquote class="m_897362570595642410yiv5808088584gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div style="color:#000;background-color:#fff;font-family:Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6544"><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6546"><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6550"><b>8) </b>The storage is from a SAN device which is connected to the NFS server using fiber channel.</div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6548"><span><br clear="none"></span></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6548"><span id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_7076">So for example during shutdown also it froze and shows something like this in event section:</span></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6548"><br clear="none"></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6548"><b id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9195">VM ILMU_WEB has been paused due to storage I/O problem.</b></div></div></div></div></div></div></blockquote><div><br clear="none"></div><div>We might need to get libvirt debug logs (and perhaps journal output of the host).</div></div></div><div class="m_897362570595642410yiv5808088584yqt9794303116" id="m_897362570595642410yiv5808088584yqtfd75759"><div>Y.</div><div> </div><blockquote class="m_897362570595642410yiv5808088584gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div style="color:#000;background-color:#fff;font-family:Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6544"><div><div class="h5"><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6546"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6548"><br clear="none"></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6548"><br clear="none"></div>More information:</div><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6546"><br clear="none"></div><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6546">VDSM log at the time of this issue (The issue happened at Jul 3, 2017 9:50:43 AM):</div><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6546"><br clear="none"></div></div></div><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6546"><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_8436"><pre id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_8875"><div><div class="h5">2017-07-03 09:50:37,113+0800 INFO  (jsonrpc/0) [jsonrpc.JsonRpcServer] RPC call Host.getAllVmStats succeeded in 0.00 seconds (__init__:515)
2017-07-03 09:50:37,897+0800 INFO  (jsonrpc/1) [jsonrpc.JsonRpcServer] RPC call Host.getAllVmIoTunePolicies succeeded in 0.02 seconds (__init__:515)
2017-07-03 09:50:42,510+0800 INFO  (jsonrpc/2) [jsonrpc.JsonRpcServer] RPC call Host.getAllVmStats succeeded in 0.00 seconds (__init__:515)
</div></div><b id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9241">2017-07-03 09:50:43,548+0800 INFO  (jsonrpc/3) [dispatcher] Run and protect: repoStats(options=None) (logUtils:51)
2017-07-03 09:50:43,548+0800 INFO  (jsonrpc/3) [dispatcher] Run and protect: repoStats, Return response: {u&#39;e01186c1-7e44-4808-b551- 4722f0f8e84b&#39;: {&#39;code&#39;: 0, &#39;actual&#39;: True, &#39;version&#39;: 4, &#39;acquired&#39;: True, &#39;delay&#39;: &#39;0.000144822&#39;, &#39;lastCheck&#39;: &#39;8.9&#39;, &#39;valid&#39;: True}, u&#39;721b5233-b0ba-4722-8a7d- ba2a372190a0&#39;: {&#39;code&#39;: 0, &#39;actual&#39;: True, &#39;version&#39;: 4, &#39;acquired&#39;: True, &#39;delay&#39;: &#39;0.000327909&#39;, &#39;lastCheck&#39;: &#39;8.9&#39;, &#39;valid&#39;: True}, u&#39;94775bd3-3244-45b4-8a06- 37eff8856afa&#39;: {&#39;code&#39;: 0, &#39;actual&#39;: True, &#39;version&#39;: 4, &#39;acquired&#39;: True, &#39;delay&#39;: &#39;0.000256425&#39;, &#39;lastCheck&#39;: &#39;8.9&#39;, &#39;valid&#39;: True}, u&#39;731bb771-5b73-4b5c-ac46- 56499df97721&#39;: {&#39;code&#39;: 0, &#39;actual&#39;: True, &#39;version&#39;: 0, &#39;acquired&#39;: True, &#39;delay&#39;: &#39;0.000238159&#39;, &#39;lastCheck&#39;: &#39;8.9&#39;, &#39;valid&#39;: True}, u&#39;f620781f-93d4-4410-8697- eb41045cacd6&#39;: {&#39;code&#39;: 0, &#39;actual&#39;: True, &#39;version&#39;: 4, &#39;acquired&#39;: True, &#39;delay&#39;: &#39;0.00022004&#39;, &#39;lastCheck&#39;: &#39;8.9&#39;, &#39;valid&#39;: True}, u&#39;a1a7d0a4-e3b6-4bd5-862b- 96e70dae3f29&#39;: {&#39;code&#39;: 0, &#39;actual&#39;: True, &#39;version&#39;: 0, &#39;acquired&#39;: True, &#39;delay&#39;: &#39;0.000298581&#39;, &#39;lastCheck&#39;: &#39;8.8&#39;, &#39;valid&#39;: True}} (logUtils:54)
</b>2017-07-03 09:50:43,563+0800 INFO  (jsonrpc/3) [jsonrpc.JsonRpcServer] RPC call Host.getStats succeeded in 0.01 seconds (__init__:515)
2017-07-03 09:50:46,737+0800 INFO  (periodic/3) [dispatcher] Run and protect: getVolumeSize(sdUUID=u&#39; 721b5233-b0ba-4722-8a7d- ba2a372190a0&#39;, spUUID=u&#39;b04ca6e4-2660-4eaa- acdb-c1dae4e21f2d&#39;, imgUUID=u&#39;3c26476e-1dae-44d7- 9208-531b91ae5ae1&#39;, volUUID=u&#39;a7e789fb-6646-4d0a- 9b51-f5ab8242c8d5&#39;, options=None) (logUtils:51)
2017-07-03 09:50:46,738+0800 INFO  (periodic/0) [dispatcher] Run and protect: getVolumeSize(sdUUID=u&#39; f620781f-93d4-4410-8697- eb41045cacd6&#39;, spUUID=u&#39;b04ca6e4-2660-4eaa- acdb-c1dae4e21f2d&#39;, imgUUID=u&#39;2158fdae-54e1-413d- a844-73da5d1bb4ca&#39;, volUUID=u&#39;6ee0b0eb-0bba-4e18- 9c00-c1539b632e8a&#39;, options=None) (logUtils:51)
2017-07-03 09:50:46,740+0800 INFO  (periodic/2) [dispatcher] Run and protect: getVolumeSize(sdUUID=u&#39; f620781f-93d4-4410-8697- eb41045cacd6&#39;, spUUID=u&#39;b04ca6e4-2660-4eaa- acdb-c1dae4e21f2d&#39;, imgUUID=u&#39;a967016d-a56b-41e8- b7a2-57903cbd2825&#39;, volUUID=u&#39;784514cb-2b33-431c- b193-045f23c596d8&#39;, options=None) (logUtils:51)
2017-07-03 09:50:46,741+0800 INFO  (periodic/1) [dispatcher] Run and protect: getVolumeSize(sdUUID=u&#39; 721b5233-b0ba-4722-8a7d- ba2a372190a0&#39;, spUUID=u&#39;b04ca6e4-2660-4eaa- acdb-c1dae4e21f2d&#39;, imgUUID=u&#39;bb35c163-f068-4f08- a1c2-28c4cb1b76d9&#39;, volUUID=u&#39;fce7e0a0-7411-4d8c- b72c-2f46c4b4db1e&#39;, options=None) (logUtils:51)
2017-07-03 09:50:46,743+0800 INFO  (periodic/0) [dispatcher] Run and protect: getVolumeSize, Return response: {&#39;truesize&#39;: &#39;6361276416&#39;, &#39;apparentsize&#39;: &#39;107374182400&#39;} (logUtils:54)</pre><pre id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_8875"><br clear="none"></pre><pre id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_8875">......</pre><pre id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_8875">......</pre><pre id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_8875"><br clear="none"></pre><pre id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_8875"></pre><pre id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9311"><b id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9341">2017-07-03 09:52:16,941+0800 INFO  (libvirt/events) [virt.vm] (vmId=&#39;c84f519e-398d-40a3- 85b2-b7e53f3d7f67&#39;) abnormal vm stop device scsi0-0-0-0 error eio (vm:4112)
2017-07-03 09:52:16,941+0800 INFO  (libvirt/events) [virt.vm] (vmId=&#39;c84f519e-398d-40a3- 85b2-b7e53f3d7f67&#39;) CPU stopped: onIOError (vm:4997)
2017-07-03 09:52:16,942+0800 INFO  (libvirt/events) [virt.vm] (vmId=&#39;c84f519e-398d-40a3- 85b2-b7e53f3d7f67&#39;) CPU stopped: onSuspend (vm:4997)
2017-07-03 09:52:16,942+0800 INFO  (libvirt/events) [virt.vm] (vmId=&#39;c84f519e-398d-40a3- 85b2-b7e53f3d7f67&#39;) abnormal vm stop device scsi0-0-0-0 error eio (vm:4112)
2017-07-03 09:52:16,943+0800 INFO  (libvirt/events) [virt.vm] (vmId=&#39;c84f519e-398d-40a3- 85b2-b7e53f3d7f67&#39;) CPU stopped: onIOError (vm:4997)
2017-07-03 09:52:16,943+0800 INFO  (libvirt/events) [virt.vm] (vmId=&#39;c84f519e-398d-40a3- 85b2-b7e53f3d7f67&#39;) abnormal vm stop device scsi0-0-0-0 error eio (vm:4112)
2017-07-03 09:52:16,944+0800 INFO  (libvirt/events) [virt.vm] (vmId=&#39;c84f519e-398d-40a3- 85b2-b7e53f3d7f67&#39;) CPU stopped: onIOError</b></pre><pre id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9311"><b><br clear="none"></b></pre><pre id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9311"><b><br clear="none"></b></pre><pre id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9311"><b><br clear="none"></b></pre></div><span class=""><div class="m_897362570595642410yiv5808088584m_-6379656960604602434qtdSeparateBR"><br clear="none"><br clear="none"></div><div class="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017yqt2677119843" id="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017yqtfd82856"><div class="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017yahoo-quoted-begin" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6545" style="font-size:15px;color:#715ffa;padding-top:15px;margin-top:0"><b id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9344">On Thursday, June 22, 2</b>017, 2:48 PM, Yaniv Kaul &lt;<a rel="nofollow" shape="rect" href="mailto:ykaul@redhat.com" target="_blank">ykaul@redhat.com</a>&gt; wrote:</div><blockquote class="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017iosymail" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6642"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6641"><div dir="ltr" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6640"><br clear="none"><div class="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017gmail_extra" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6643"><br clear="none"><div class="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017gmail_quote" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6644">On Thu, Jun 22, 2017 at 5:07 AM, M Mahboubian <span dir="ltr">&lt;<a rel="nofollow" shape="rect" href="mailto:m_mahboubian@yahoo.com" target="_blank">m_mahboubian@yahoo.com</a>&gt;</span> wrote:<br clear="none"><blockquote class="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017gmail_quote" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6646" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6645">
Dear all,<div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6647">I appreciate if anybody could possibly help with the issue I am facing.</div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6648"><br clear="none"></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6649">In our environment we have 2 hosts 1 NFS server and 1 ovirt engine server. The NFS server provides storage to the VMs in the hosts.</div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6650"><br clear="none"></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6651">I can create new VMs and install os but once i do something like yum update the VM freezes. I can reproduce this every single time I do yum update.</div></div></blockquote><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6652"><br clear="none"></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6653">Is it paused, or completely frozen?</div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_6654"> <br clear="none"></div><blockquote class="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017gmail_quote" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9059" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9058"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9057"><br clear="none"></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9791">what information/log files should I provide you to trubleshoot this?</div></div></blockquote><div><br clear="none"></div><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9834">Versions of all the components involved - guest OS, host OS (qemu-kvm version), how do you run the VM (vdsm log would be helpful here), exact storage specification (1Gb or 10Gb link? What is the NFS version? What is it hosted on? etc.)</div><div> Y.</div><div class="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017yqt6606837936" id="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017yqtfd75418"><div><br clear="none"></div></div><blockquote class="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017gmail_quote" id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9794" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9793"><div class="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017yqt6606837936" id="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017yqtfd33806"><div id="m_897362570595642410yiv5808088584m_-6379656960604602434yui_3_16_0_ym19_1_1499051725992_9792"><br clear="none"></div><div> Regards</div></div>
</div><br clear="none">______________________________ _________________<br clear="none">
Users mailing list<br clear="none">
<a rel="nofollow" shape="rect" href="mailto:Users@ovirt.org" target="_blank">Users@ovirt.org</a><br clear="none">
<a rel="nofollow" shape="rect" href="http://lists.ovirt.org/mailman/listinfo/users" target="_blank">http://lists.ovirt.org/ mailman/listinfo/users</a><div class="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017yqt6606837936" id="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017yqtfd65242"><br clear="none">
<br clear="none"></div></blockquote></div><div class="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017yqt6606837936" id="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017yqtfd02968"><br clear="none"></div></div></div></div></div><blockquote></blockquote></blockquote></div></span></div><div class="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017yqt2677119843" id="m_897362570595642410yiv5808088584m_-6379656960604602434yiv6639019017yqtfd23176">
</div></div></div></div></div></blockquote></div></div><div class="m_897362570595642410yiv5808088584yqt9794303116" id="m_897362570595642410yiv5808088584yqtfd09260"><br clear="none"></div></div></div></div></div><br><br></div>  </div> </div>  </div></div></div></blockquote></div><br></div></div>