<div dir="ltr"><div><div><div>Hi All, <br><br></div>I have a 3 node ovirt 4.1 setup. I lost one node due to raid controller issues. Upon restoration I have the following split brain, although the hosts have mounted the storage domains: <br><br><span style="font-family:monospace,monospace">gluster volume heal engine info split-brain<br>Brick gluster0:/gluster/engine/brick<br>/e1c80750-b880-495e-9609-b8bc7760d101/ha_agent<br>Status: Connected<br>Number of entries in split-brain: 1<br><br>Brick gluster1:/gluster/engine/brick<br>/e1c80750-b880-495e-9609-b8bc7760d101/ha_agent<br>Status: Connected<br>Number of entries in split-brain: 1<br><br>Brick gluster2:/gluster/engine/brick<br>/e1c80750-b880-495e-9609-b8bc7760d101/ha_agent<br>Status: Connected<br>Number of entries in split-brain: 1<br></span><br><br></div>Hosted engine status gives the following: <br><br><span style="font-family:monospace,monospace">hosted-engine --vm-status<br>Traceback (most recent call last):<br>  File &quot;/usr/lib64/python2.7/runpy.py&quot;, line 162, in _run_module_as_main<br>    &quot;__main__&quot;, fname, loader, pkg_name)<br>  File &quot;/usr/lib64/python2.7/runpy.py&quot;, line 72, in _run_code<br>    exec code in run_globals<br>  File &quot;/usr/lib/python2.7/site-packages/ovirt_hosted_engine_setup/vm_status.py&quot;, line 173, in &lt;module&gt;<br>    if not status_checker.print_status():<br>  File &quot;/usr/lib/python2.7/site-packages/ovirt_hosted_engine_setup/vm_status.py&quot;, line 103, in print_status<br>    all_host_stats = self._get_all_host_stats()<br>  File &quot;/usr/lib/python2.7/site-packages/ovirt_hosted_engine_setup/vm_status.py&quot;, line 73, in _get_all_host_stats<br>    all_host_stats = ha_cli.get_all_host_stats()<br>  File &quot;/usr/lib/python2.7/site-packages/ovirt_hosted_engine_ha/client/client.py&quot;, line 160, in get_all_host_stats<br>    return self.get_all_stats(self.StatModes.HOST)<br>  File &quot;/usr/lib/python2.7/site-packages/ovirt_hosted_engine_ha/client/client.py&quot;, line 105, in get_all_stats<br>    stats = broker.get_stats_from_storage(service)<br>  File &quot;/usr/lib/python2.7/site-packages/ovirt_hosted_engine_ha/lib/brokerlink.py&quot;, line 233, in get_stats_from_storage<br>    result = self._checked_communicate(request)<br>  File &quot;/usr/lib/python2.7/site-packages/ovirt_hosted_engine_ha/lib/brokerlink.py&quot;, line 261, in _checked_communicate<br>    .format(message or response))<br>ovirt_hosted_engine_ha.lib.exceptions.RequestError: Request failed: failed to read metadata: [Errno 5] Input/output error: &#39;/rhev/data-center/mnt/glusterSD/10.100.100.1:_engine/e1c80750-b880-495e-9609-b8bc7760d101/ha_agent/hosted-engine.metadata&#39;</span><br><br></div><div>Any idea on how to resolve this split brain?<br><br></div><div>Thanx, <br>Alex<br></div><br></div>