<html><head><meta http-equiv="Content-Type" content="text/html; charset=utf-8"></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; line-break: after-white-space;" class="">Were you running gluster under you shared storage? If so, you probably need to setup ganesha nfs yourself.<div class=""><br class=""></div><div class="">If not, check your ha-agent logs and make sure it’s mounting the storage properly and check for errors. Good luck!</div><div class=""><br class=""><div><blockquote type="cite" class=""><hr style="border:none;border-top:solid #B5C4DF 1.0pt;padding:0 0 0 0;margin:10px 0 5px 0;" class=""><span style="margin: -1.3px 0.0px 0.0px 0.0px" id="RwhHeaderAttributes" class=""><font face="Helvetica" size="4" color="#000000" style="font: 13.0px Helvetica; color: #000000" class=""><b class="">From:</b> Jayme &lt;<a href="mailto:jaymef@gmail.com" class="">jaymef@gmail.com</a>&gt;</font></span><br class="">
<span style="margin: -1.3px 0.0px 0.0px 0.0px" class=""><font face="Helvetica" size="4" color="#000000" style="font: 13.0px Helvetica; color: #000000" class=""><b class="">Subject:</b> Re: [ovirt-users] Some major problems after 4.2 upgrade, could really use some assistance</font></span><br class="">
<span style="margin: -1.3px 0.0px 0.0px 0.0px" class=""><font face="Helvetica" size="4" color="#000000" style="font: 13.0px Helvetica; color: #000000" class=""><b class="">Date:</b> January 11, 2018 at 12:28:32 PM CST</font></span><br class="">
<span style="margin: -1.3px 0.0px 0.0px 0.0px" class=""><font face="Helvetica" size="4" color="#000000" style="font: 13.0px Helvetica; color: #000000" class=""><b class="">To:</b> Martin Sivak; <a href="mailto:users@ovirt.org" class="">users@ovirt.org</a></font></span><br class="">
<br class="Apple-interchange-newline"><div class=""><div dir="ltr" class="">This is becoming critical for me, does anyone have any ideas or 
recommendations on what I can do to recover access to hosted VM?&nbsp; As of 
right now I have three hosts that are fully updated, they have the 4.2 
repo and a full yum update was performed on them, there are no new 
updates to apply.&nbsp; The hosted engine had updates as well as a full and 
complete engine-setup, but did not return after being shut down.&nbsp; There 
must be some way I can get the engine running again?&nbsp; Please</div><div class="gmail_extra"><br class=""><div class="gmail_quote">On Thu, Jan 11, 2018 at 8:24 AM, Jayme <span dir="ltr" class="">&lt;<a href="mailto:jaymef@gmail.com" target="_blank" class="">jaymef@gmail.com</a>&gt;</span> wrote:<br class=""><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr" class="">The hosts have all ready been fully updated with 4.2 packages though.<div class=""><br class=""></div><div class="">ex.&nbsp;</div><div class=""><br class=""></div><div class=""><div class="">ovirt-host.x86_64&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 4.2.0-1.el7.centos&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;@ovirt-4.2</div><div class="">ovirt-host-dependencies.x86_<wbr class="">64&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;4.2.0-1.el7.centos&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;@ovirt-4.2</div><div class="">ovirt-host-deploy.noarch&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;1.7.0-1.el7.centos&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;@ovirt-4.2</div><div class="">ovirt-hosted-engine-ha.noarch&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 2.2.2-1.el7.centos&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;@ovirt-4.2</div><div class="">ovirt-hosted-engine-setup.<wbr class="">noarch&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;2.2.3-1.el7.centos&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;@ovirt-4.2</div></div></div><div class="HOEnZb"><div class="h5"><div class="gmail_extra"><br class=""><div class="gmail_quote">On Thu, Jan 11, 2018 at 8:16 AM, Martin Sivak <span dir="ltr" class="">&lt;<a href="mailto:msivak@redhat.com" target="_blank" class="">msivak@redhat.com</a>&gt;</span> wrote:<br class=""><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Hi,<br class="">
<br class="">
yes, you need to upgrade the hosts. Just take the<br class="">
ovirt-hosted-engine-ha and ovirt-hosted-engine-setup packages from<br class="">
ovirt 4.2 repositories.<br class="">
<span class="m_6061824483285160243HOEnZb"><font color="#888888" class=""><br class="">
Martin<br class="">
</font></span><div class="m_6061824483285160243HOEnZb"><div class="m_6061824483285160243h5"><br class="">
On Thu, Jan 11, 2018 at 11:40 AM, Jayme &lt;<a href="mailto:jaymef@gmail.com" target="_blank" class="">jaymef@gmail.com</a>&gt; wrote:<br class="">
&gt; How do I upgrade the hosted engine packages when I can't reach it or do you<br class="">
&gt; mean upgrade the hosts if so how exactly do I do that. As for the missing VM<br class="">
&gt; it appears that the disk image is there but it's missing XML file I have no<br class="">
&gt; idea why or how to recreate it.<br class="">
&gt;<br class="">
&gt; On Jan 11, 2018 4:43 AM, "Martin Sivak" &lt;<a href="mailto:msivak@redhat.com" target="_blank" class="">msivak@redhat.com</a>&gt; wrote:<br class="">
&gt;&gt;<br class="">
&gt;&gt; Hi,<br class="">
&gt;&gt;<br class="">
&gt;&gt; you hit one known issue we already have fixes for (4.1 hosts with 4.2<br class="">
&gt;&gt; engine):<br class="">
&gt;&gt; <a href="https://gerrit.ovirt.org/#/q/status:open+project:ovirt-hosted-engine-ha+branch:v2.1.z+topic:ovf_42_for_41" rel="noreferrer" target="_blank" class="">https://gerrit.ovirt.org/#/q/s<wbr class="">tatus:open+project:ovirt-hoste<wbr class="">d-engine-ha+branch:v2.1.z+<wbr class="">topic:ovf_42_for_41</a><br class="">
&gt;&gt;<br class="">
&gt;&gt; You can try hotfixing it by upgrading hosted engine packages to 4.2 or<br class="">
&gt;&gt; applying the patches manually and installing python-lxml.<br class="">
&gt;&gt;<br class="">
&gt;&gt; I am not sure what happened to your other VM.<br class="">
&gt;&gt;<br class="">
&gt;&gt; Best regards<br class="">
&gt;&gt;<br class="">
&gt;&gt; Martin Sivak<br class="">
&gt;&gt;<br class="">
&gt;&gt; On Thu, Jan 11, 2018 at 6:15 AM, Jayme &lt;<a href="mailto:jaymef@gmail.com" target="_blank" class="">jaymef@gmail.com</a>&gt; wrote:<br class="">
&gt;&gt; &gt; I performed Ovirt 4.2 upgrade on a 3 host cluster with NFS shared<br class="">
&gt;&gt; &gt; storage.<br class="">
&gt;&gt; &gt; The shared storage is mounted from one of the hosts.<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; I upgraded the hosted engine first, downloading the 4.2 rpm, doing a yum<br class="">
&gt;&gt; &gt; update then engine setup which seemed to complete successfully, at the<br class="">
&gt;&gt; &gt; end<br class="">
&gt;&gt; &gt; it powered down the hosted VM but it never came back up.&nbsp; I was unable<br class="">
&gt;&gt; &gt; to<br class="">
&gt;&gt; &gt; start it.<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; I proceeded to upgrade the three hosts, ovirt 4.2 rpm and a full yum<br class="">
&gt;&gt; &gt; update.<br class="">
&gt;&gt; &gt; I also rebooted each of the three hosts.<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; After some time the hosts did come back and almost all of the VMs are<br class="">
&gt;&gt; &gt; running again and seem to be working ok with the exception of two:<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; 1. The hosted VM still will not start, I've tried everything I can think<br class="">
&gt;&gt; &gt; of.<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; 2. A VM that I know existed is not running and does not appear to exist,<br class="">
&gt;&gt; &gt; I<br class="">
&gt;&gt; &gt; have no idea where it is or how to start it.<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; 1. Hosted engine<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; From one of the hosts I get a weird error trying to start it:<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; # hosted-engine --vm-start<br class="">
&gt;&gt; &gt; Command VM.getStats with args {'vmID':<br class="">
&gt;&gt; &gt; '4013c829-c9d7-4b72-90d5-6fe58<wbr class="">137504c'} failed:<br class="">
&gt;&gt; &gt; (code=1, message=Virtual machine does not exist: {'vmId':<br class="">
&gt;&gt; &gt; u'4013c829-c9d7-4b72-90d5-6fe5<wbr class="">8137504c'})<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; From the two other hosts I do not get the same error as above, sometimes<br class="">
&gt;&gt; &gt; it<br class="">
&gt;&gt; &gt; appears to start but --vm-status shows errors such as:&nbsp; Engine status<br class="">
&gt;&gt; &gt; : {"reason": "failed liveliness check", "health": "bad", "vm": "up",<br class="">
&gt;&gt; &gt; "detail": "Up"}<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; Seeing these errors in syslog:<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; Jan 11 01:06:30 host0 libvirtd: 2018-01-11 05:06:30.473+0000: 1910:<br class="">
&gt;&gt; &gt; error :<br class="">
&gt;&gt; &gt; qemuOpenFileAs:3183 : Failed to open file<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; '/var/run/vdsm/storage/248f46f<wbr class="">0-d793-4581-9810-c9d965e2f286/<wbr class="">c2dde892-f978-4dfc-a421-<wbr class="">c8e04cf387f9/23aa0a66-fa6c-<wbr class="">4967-a1e5-fbe47c0cd705':<br class="">
&gt;&gt; &gt; No such file or directory<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; Jan 11 01:06:30 host0 libvirtd: 2018-01-11 05:06:30.473+0000: 1910:<br class="">
&gt;&gt; &gt; error :<br class="">
&gt;&gt; &gt; qemuDomainStorageOpenStat:1149<wbr class="">2 : cannot stat file<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; '/var/run/vdsm/storage/248f46f<wbr class="">0-d793-4581-9810-c9d965e2f286/<wbr class="">c2dde892-f978-4dfc-a421-<wbr class="">c8e04cf387f9/23aa0a66-fa6c-<wbr class="">4967-a1e5-fbe47c0cd705':<br class="">
&gt;&gt; &gt; Bad file descriptor<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; 2. Missing VM.&nbsp; virsh -r list on each host does not show the VM at all.<br class="">
&gt;&gt; &gt; I<br class="">
&gt;&gt; &gt; know it existed and is important.&nbsp; The log on one of the hosts even<br class="">
&gt;&gt; &gt; shows<br class="">
&gt;&gt; &gt; that it started it recently then stopped in 10 or so minutes later:<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; Jan 10 18:47:17 host3 systemd-machined: New machine qemu-9-Berna.<br class="">
&gt;&gt; &gt; Jan 10 18:47:17 host3 systemd: Started Virtual Machine qemu-9-Berna.<br class="">
&gt;&gt; &gt; Jan 10 18:47:17 host3 systemd: Starting Virtual Machine qemu-9-Berna.<br class="">
&gt;&gt; &gt; Jan 10 18:54:45 host3 systemd-machined: Machine qemu-9-Berna terminated.<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; How can I find out the status of the "Berna" VM and get it running<br class="">
&gt;&gt; &gt; again?<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; Thanks so much!<br class="">
&gt;&gt; &gt;<br class="">
&gt;&gt; &gt; ______________________________<wbr class="">_________________<br class="">
&gt;&gt; &gt; Users mailing list<br class="">
&gt;&gt; &gt; <a href="mailto:Users@ovirt.org" target="_blank" class="">Users@ovirt.org</a><br class="">
&gt;&gt; &gt; <a href="http://lists.ovirt.org/mailman/listinfo/users" rel="noreferrer" target="_blank" class="">http://lists.ovirt.org/mailman<wbr class="">/listinfo/users</a><br class="">
&gt;&gt; &gt;<br class="">
</div></div></blockquote></div><br class=""></div>
</div></div></blockquote></div><br class=""></div>
_______________________________________________<br class="">Users mailing list<br class=""><a href="mailto:Users@ovirt.org" class="">Users@ovirt.org</a><br class="">http://lists.ovirt.org/mailman/listinfo/users<br class=""></div></blockquote></div><br class=""></div></body></html>