<div dir="ltr"><p class="MsoNormal" style="margin:0in 0in 0.0001pt;font-size:11pt"><font face="arial, helvetica, sans-serif">A large number of my virtual machines are reporting in a paused state but they are actually up and running. Unfortunately I don&#39;t look at this cluster very often so I don&#39;t know exactly when it got into this state, I believe it may have happened a couple months back when I deployed a change to /etc/vdsm/vdsm.conf to throttle virtual machines migrations.  I deployed this change via puppet and had puppet cycle the vdsm daemon.  All of the vdsm daemons in the cluster were restarted in a short period of time. Since this happened some time back all the logs have rotated off.<u></u><u></u></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;font-size:11pt"><font face="arial, helvetica, sans-serif"><u></u> <u></u></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;font-size:11pt"><font face="arial, helvetica, sans-serif">I have tried restarting vdsmd and libvirtd, but that doesn&#39;t appear to return the virtual machines to an up state.  The output of &quot;vdsClient -s 0 getAllVmStats&quot; reports them as paused, &quot;virsh -r list --all&quot; reports them as running.  From the GUI I can click run and the VM will show “Up” in the GUI and vdsClient.  But if I restart vdsm, the VM&#39;s revert back to displaying a paused state.  I did find that the *.recovery files in /var/run/vdsm contain a status of Paused even when the GUI and vdsClient are reporting it as up. I did try and change the status in this file while vdsm was down and then start vdsm, but it had no effect and the entry in the *.recovery file which  reverted to paused.<u></u><u></u></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;font-size:11pt"><font face="arial, helvetica, sans-serif"><u></u> <u></u></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;font-size:11pt"><font face="arial, helvetica, sans-serif">p335<u></u><u></u></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;font-size:11pt"><font face="arial, helvetica, sans-serif">sasS&#39;status&#39;<u></u><u></u></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;font-size:11pt"><font face="arial, helvetica, sans-serif">p336<u></u><u></u></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;font-size:11pt"><font face="arial, helvetica, sans-serif">S&#39;Paused&#39;<u></u><u></u></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;font-size:11pt"><font face="arial, helvetica, sans-serif"><u></u> <u></u></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;font-size:11pt"><font face="arial, helvetica, sans-serif">Any idea what might have caused the VM&#39;s to report as paused and how to recover from it? <u></u><u></u></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;font-size:11pt"><font face="arial, helvetica, sans-serif"><u></u> <u></u></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;font-size:11pt"><font face="arial, helvetica, sans-serif">I am running<u></u><u></u></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;font-size:11pt"><font face="arial, helvetica, sans-serif">ovirt-3.3.4-1 and vdsm-4.13.3-4</font></p></div>