<div dir="ltr">This is becoming critical for me, does anyone have any ideas or 
recommendations on what I can do to recover access to hosted VM?  As of 
right now I have three hosts that are fully updated, they have the 4.2 
repo and a full yum update was performed on them, there are no new 
updates to apply.  The hosted engine had updates as well as a full and 
complete engine-setup, but did not return after being shut down.  There 
must be some way I can get the engine running again?  Please</div><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Jan 11, 2018 at 8:24 AM, Jayme <span dir="ltr">&lt;<a href="mailto:jaymef@gmail.com" target="_blank">jaymef@gmail.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">The hosts have all ready been fully updated with 4.2 packages though.<div><br></div><div>ex. </div><div><br></div><div><div>ovirt-host.x86_64                                                      4.2.0-1.el7.centos                               @ovirt-4.2</div><div>ovirt-host-dependencies.x86_<wbr>64                                         4.2.0-1.el7.centos                               @ovirt-4.2</div><div>ovirt-host-deploy.noarch                                               1.7.0-1.el7.centos                               @ovirt-4.2</div><div>ovirt-hosted-engine-ha.noarch                                          2.2.2-1.el7.centos                               @ovirt-4.2</div><div>ovirt-hosted-engine-setup.<wbr>noarch                                       2.2.3-1.el7.centos                               @ovirt-4.2</div></div></div><div class="HOEnZb"><div class="h5"><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Jan 11, 2018 at 8:16 AM, Martin Sivak <span dir="ltr">&lt;<a href="mailto:msivak@redhat.com" target="_blank">msivak@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Hi,<br>
<br>
yes, you need to upgrade the hosts. Just take the<br>
ovirt-hosted-engine-ha and ovirt-hosted-engine-setup packages from<br>
ovirt 4.2 repositories.<br>
<span class="m_6061824483285160243HOEnZb"><font color="#888888"><br>
Martin<br>
</font></span><div class="m_6061824483285160243HOEnZb"><div class="m_6061824483285160243h5"><br>
On Thu, Jan 11, 2018 at 11:40 AM, Jayme &lt;<a href="mailto:jaymef@gmail.com" target="_blank">jaymef@gmail.com</a>&gt; wrote:<br>
&gt; How do I upgrade the hosted engine packages when I can&#39;t reach it or do you<br>
&gt; mean upgrade the hosts if so how exactly do I do that. As for the missing VM<br>
&gt; it appears that the disk image is there but it&#39;s missing XML file I have no<br>
&gt; idea why or how to recreate it.<br>
&gt;<br>
&gt; On Jan 11, 2018 4:43 AM, &quot;Martin Sivak&quot; &lt;<a href="mailto:msivak@redhat.com" target="_blank">msivak@redhat.com</a>&gt; wrote:<br>
&gt;&gt;<br>
&gt;&gt; Hi,<br>
&gt;&gt;<br>
&gt;&gt; you hit one known issue we already have fixes for (4.1 hosts with 4.2<br>
&gt;&gt; engine):<br>
&gt;&gt; <a href="https://gerrit.ovirt.org/#/q/status:open+project:ovirt-hosted-engine-ha+branch:v2.1.z+topic:ovf_42_for_41" rel="noreferrer" target="_blank">https://gerrit.ovirt.org/#/q/s<wbr>tatus:open+project:ovirt-hoste<wbr>d-engine-ha+branch:v2.1.z+<wbr>topic:ovf_42_for_41</a><br>
&gt;&gt;<br>
&gt;&gt; You can try hotfixing it by upgrading hosted engine packages to 4.2 or<br>
&gt;&gt; applying the patches manually and installing python-lxml.<br>
&gt;&gt;<br>
&gt;&gt; I am not sure what happened to your other VM.<br>
&gt;&gt;<br>
&gt;&gt; Best regards<br>
&gt;&gt;<br>
&gt;&gt; Martin Sivak<br>
&gt;&gt;<br>
&gt;&gt; On Thu, Jan 11, 2018 at 6:15 AM, Jayme &lt;<a href="mailto:jaymef@gmail.com" target="_blank">jaymef@gmail.com</a>&gt; wrote:<br>
&gt;&gt; &gt; I performed Ovirt 4.2 upgrade on a 3 host cluster with NFS shared<br>
&gt;&gt; &gt; storage.<br>
&gt;&gt; &gt; The shared storage is mounted from one of the hosts.<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; I upgraded the hosted engine first, downloading the 4.2 rpm, doing a yum<br>
&gt;&gt; &gt; update then engine setup which seemed to complete successfully, at the<br>
&gt;&gt; &gt; end<br>
&gt;&gt; &gt; it powered down the hosted VM but it never came back up.  I was unable<br>
&gt;&gt; &gt; to<br>
&gt;&gt; &gt; start it.<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; I proceeded to upgrade the three hosts, ovirt 4.2 rpm and a full yum<br>
&gt;&gt; &gt; update.<br>
&gt;&gt; &gt; I also rebooted each of the three hosts.<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; After some time the hosts did come back and almost all of the VMs are<br>
&gt;&gt; &gt; running again and seem to be working ok with the exception of two:<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; 1. The hosted VM still will not start, I&#39;ve tried everything I can think<br>
&gt;&gt; &gt; of.<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; 2. A VM that I know existed is not running and does not appear to exist,<br>
&gt;&gt; &gt; I<br>
&gt;&gt; &gt; have no idea where it is or how to start it.<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; 1. Hosted engine<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; From one of the hosts I get a weird error trying to start it:<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; # hosted-engine --vm-start<br>
&gt;&gt; &gt; Command VM.getStats with args {&#39;vmID&#39;:<br>
&gt;&gt; &gt; &#39;4013c829-c9d7-4b72-90d5-6fe58<wbr>137504c&#39;} failed:<br>
&gt;&gt; &gt; (code=1, message=Virtual machine does not exist: {&#39;vmId&#39;:<br>
&gt;&gt; &gt; u&#39;4013c829-c9d7-4b72-90d5-6fe5<wbr>8137504c&#39;})<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; From the two other hosts I do not get the same error as above, sometimes<br>
&gt;&gt; &gt; it<br>
&gt;&gt; &gt; appears to start but --vm-status shows errors such as:  Engine status<br>
&gt;&gt; &gt; : {&quot;reason&quot;: &quot;failed liveliness check&quot;, &quot;health&quot;: &quot;bad&quot;, &quot;vm&quot;: &quot;up&quot;,<br>
&gt;&gt; &gt; &quot;detail&quot;: &quot;Up&quot;}<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; Seeing these errors in syslog:<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; Jan 11 01:06:30 host0 libvirtd: 2018-01-11 05:06:30.473+0000: 1910:<br>
&gt;&gt; &gt; error :<br>
&gt;&gt; &gt; qemuOpenFileAs:3183 : Failed to open file<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; &#39;/var/run/vdsm/storage/248f46f<wbr>0-d793-4581-9810-c9d965e2f286/<wbr>c2dde892-f978-4dfc-a421-<wbr>c8e04cf387f9/23aa0a66-fa6c-<wbr>4967-a1e5-fbe47c0cd705&#39;:<br>
&gt;&gt; &gt; No such file or directory<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; Jan 11 01:06:30 host0 libvirtd: 2018-01-11 05:06:30.473+0000: 1910:<br>
&gt;&gt; &gt; error :<br>
&gt;&gt; &gt; qemuDomainStorageOpenStat:1149<wbr>2 : cannot stat file<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; &#39;/var/run/vdsm/storage/248f46f<wbr>0-d793-4581-9810-c9d965e2f286/<wbr>c2dde892-f978-4dfc-a421-<wbr>c8e04cf387f9/23aa0a66-fa6c-<wbr>4967-a1e5-fbe47c0cd705&#39;:<br>
&gt;&gt; &gt; Bad file descriptor<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; 2. Missing VM.  virsh -r list on each host does not show the VM at all.<br>
&gt;&gt; &gt; I<br>
&gt;&gt; &gt; know it existed and is important.  The log on one of the hosts even<br>
&gt;&gt; &gt; shows<br>
&gt;&gt; &gt; that it started it recently then stopped in 10 or so minutes later:<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; Jan 10 18:47:17 host3 systemd-machined: New machine qemu-9-Berna.<br>
&gt;&gt; &gt; Jan 10 18:47:17 host3 systemd: Started Virtual Machine qemu-9-Berna.<br>
&gt;&gt; &gt; Jan 10 18:47:17 host3 systemd: Starting Virtual Machine qemu-9-Berna.<br>
&gt;&gt; &gt; Jan 10 18:54:45 host3 systemd-machined: Machine qemu-9-Berna terminated.<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; How can I find out the status of the &quot;Berna&quot; VM and get it running<br>
&gt;&gt; &gt; again?<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; Thanks so much!<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; ______________________________<wbr>_________________<br>
&gt;&gt; &gt; Users mailing list<br>
&gt;&gt; &gt; <a href="mailto:Users@ovirt.org" target="_blank">Users@ovirt.org</a><br>
&gt;&gt; &gt; <a href="http://lists.ovirt.org/mailman/listinfo/users" rel="noreferrer" target="_blank">http://lists.ovirt.org/mailman<wbr>/listinfo/users</a><br>
&gt;&gt; &gt;<br>
</div></div></blockquote></div><br></div>
</div></div></blockquote></div><br></div>