<div dir="ltr">Thanks for the help!<div><br></div><div>I managed to fix it  :-)</div><div><br></div><div>I made a device from the hosted engine file with losetup and for the LVM again.</div><div>From there I was able to fsck my partition. And answered a lot of y to the list of inconsistences.</div><div><span style="line-height:1.5">I removed the loop back devices.</span></div><div><span style="line-height:1.5">I turned off maintenance mode and hosted engine started :-)</span><br></div><div><span style="line-height:1.5">Few hours later , restore of the pgsql db and scratching my head, v</span><span style="line-height:1.5">ery happy it is running again without any VMS being offline meanwhile :)</span></div><div><br></div><div><span style="line-height:1.5">I will defintely save the way to start hosted-engine with cd iso, as this seems less error sensitive and easier to do.</span><br></div><div><br></div><div><br><br></div><div>Thanks!</div><div><br></div><br><div class="gmail_quote"><div dir="ltr">Op vr 15 apr. 2016 om 11:35 schreef Simone Tiraboschi &lt;<a href="mailto:stirabos@redhat.com" target="_blank">stirabos@redhat.com</a>&gt;:<br></div></div><div class="gmail_quote"><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">On Fri, Apr 15, 2016 at 11:02 AM, Paul Groeneweg | Pazion<br>
&lt;<a href="mailto:paul@pazion.nl" target="_blank">paul@pazion.nl</a>&gt; wrote:<br>
&gt; Thanks!<br>
&gt;<br>
&gt; I managed to get the console through:<br>
&gt;<br>
&gt; hosted-engine --add-console-password<br>
&gt; /bin/remote-viewer vnc://localhost:5900<br>
&gt;<br>
&gt; Turns out, there seems to be some corruption on the partition:<br>
&gt; <a href="http://screencast.com/t/6iR0U3QuI" rel="noreferrer" target="_blank">http://screencast.com/t/6iR0U3QuI</a><br>
&gt;<br>
&gt; Is there a way to boot from CD, so I can start rescue mode?<br>
<br>
Yes,<br>
you have to set global maintenance mode to avoid VM start attempts on<br>
other hosts.<br>
<br>
You have to poweroff the engine VM with:<br>
 hosted-engine --vm-shutdown/--vm-poweroff (probably the second one in<br>
your case)<br>
Then you have to create a copy of<br>
/var/run/ovirt-hosted-engine-ha/vm.conf and you have to manually edit<br>
it in order to attach the ISO image and change the boot order.<br>
At that point you can start the engine VM with your custom configuration with:<br>
 hosted-engine --vm-start --vm-conf=my_custom_vm.conf<br>
<br>
Good luck!<br>
<br>
&gt; Op vr 15 apr. 2016 om 10:58 schreef Martin Sivak &lt;<a href="mailto:msivak@redhat.com" target="_blank">msivak@redhat.com</a>&gt;:<br>
&gt;&gt;<br>
&gt;&gt; Hi,<br>
&gt;&gt;<br>
&gt;&gt; you can access the console using vnc or use virsh to get access to the<br>
&gt;&gt; serial console.<br>
&gt;&gt;<br>
&gt;&gt; Check the following commands on the host where the VM is currently<br>
&gt;&gt; running:<br>
&gt;&gt;<br>
&gt;&gt; virsh -r list<br>
&gt;&gt; virsh -r console HostedEngine<br>
&gt;&gt; virsh -r vncdisplay HostedEngine<br>
&gt;&gt;<br>
&gt;&gt; Those should give you enough pointers to connect to the VM.<br>
&gt;&gt;<br>
&gt;&gt; Regards<br>
&gt;&gt;<br>
&gt;&gt; Martin Sivak<br>
&gt;&gt;<br>
&gt;&gt;<br>
&gt;&gt;<br>
&gt;&gt; On Fri, Apr 15, 2016 at 10:14 AM, Paul Groeneweg | Pazion<br>
&gt;&gt; &lt;<a href="mailto:paul@pazion.nl" target="_blank">paul@pazion.nl</a>&gt; wrote:<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; Tonight my server with NFS hosted-engine mount crashed.<br>
&gt;&gt; &gt; Now all is back online ,except the hosted engine. I can&#39;t ping  or ssh<br>
&gt;&gt; &gt; the<br>
&gt;&gt; &gt; machine<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; when I do hosted-engine --vm-status, I get:<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; ..........<br>
&gt;&gt; &gt; --== Host 2 status ==--<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; Status up-to-date                  : True<br>
&gt;&gt; &gt; Hostname                           : <a href="http://geisha-3.pazion.nl" rel="noreferrer" target="_blank">geisha-3.pazion.nl</a><br>
&gt;&gt; &gt; Host ID                            : 2<br>
&gt;&gt; &gt; Engine status                      : {&quot;reason&quot;: &quot;failed liveliness<br>
&gt;&gt; &gt; check&quot;,<br>
&gt;&gt; &gt; &quot;health&quot;: &quot;bad&quot;, &quot;vm&quot;: &quot;up&quot;, &quot;detail&quot;: &quot;up&quot;}<br>
&gt;&gt; &gt; Score                              : 3400<br>
&gt;&gt; &gt; stopped                            : False<br>
&gt;&gt; &gt; Local maintenance                  : False<br>
&gt;&gt; &gt; crc32                              : d71d7c6b<br>
&gt;&gt; &gt; Host timestamp                     : 4404<br>
&gt;&gt; &gt; ............<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; I tried restarting all services/nfs mounts, start hosted engine on other<br>
&gt;&gt; &gt; hosts, but all the same host up, but liveliness failed and unable to<br>
&gt;&gt; &gt; access<br>
&gt;&gt; &gt; the network/IP.<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; I imagine it is stuck at the console requiring a fsck check maybe?<br>
&gt;&gt; &gt; Is there a way to access the boot display directly?<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; Any help is highly appreciated!<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt;<br>
&gt;&gt; &gt; _______________________________________________<br>
&gt;&gt; &gt; Users mailing list<br>
&gt;&gt; &gt; <a href="mailto:Users@ovirt.org" target="_blank">Users@ovirt.org</a><br>
&gt;&gt; &gt; <a href="http://lists.ovirt.org/mailman/listinfo/users" rel="noreferrer" target="_blank">http://lists.ovirt.org/mailman/listinfo/users</a><br>
&gt;&gt; &gt;<br>
&gt;<br>
&gt;<br>
&gt; _______________________________________________<br>
&gt; Users mailing list<br>
&gt; <a href="mailto:Users@ovirt.org" target="_blank">Users@ovirt.org</a><br>
&gt; <a href="http://lists.ovirt.org/mailman/listinfo/users" rel="noreferrer" target="_blank">http://lists.ovirt.org/mailman/listinfo/users</a><br>
&gt;<br>
</blockquote></div></div>