<div dir="ltr"><div>Anyone know how to fix this broken task ?<br><br></div><div>It&#39;s persisted through a reboot of all hosts and the engine, something needs deleting from the database to clear the task and release the locked disk<br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On 8 September 2016 at 13:25, Maton, Brett <span dir="ltr">&lt;<a href="mailto:matonb@ltresources.co.uk" target="_blank">matonb@ltresources.co.uk</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Thanks for the pointer Mikhail, however I don&#39;t get any tasks listed with that command:<br><br>vdsClient -s 0 getAllTasksStatuses<br><br>/usr/share/vdsm/vdsClient.py:<wbr>33: DeprecationWarning: vdscli uses xmlrpc. since ovirt 3.6 xmlrpc is deprecated, please use vdsm.jsonrpcvdscli<br>  from vdsm import utils, vdscli, constants<br><br>{&#39;status&#39;: {&#39;message&#39;: &#39;OK&#39;, &#39;code&#39;: 0}, &#39;allTasksStatus&#39;: {}}<br><br></div><div class="HOEnZb"><div class="h5"><div class="gmail_extra"><br><div class="gmail_quote">On 8 September 2016 at 09:51, Краснобаев Михаил <span dir="ltr">&lt;<a href="mailto:milo1@ya.ru" target="_blank">milo1@ya.ru</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div>Hi,</div><div> </div><div>There is a way to cancel a running task  -  look here <a href="http://lists.ovirt.org/pipermail/users/2014-November/028946.html" target="_blank">http://lists.ovirt.org/piperma<wbr>il/users/2014-November/028946.<wbr>html</a></div><div>I was able to stop snapshot deletion this way.</div><div> </div><div>Best, Mikhail.</div><div> </div><div>08.09.2016, 08:14, &quot;Maton, Brett&quot; &lt;<a href="mailto:matonb@ltresources.co.uk" target="_blank">matonb@ltresources.co.uk</a>&gt;:</div><blockquote type="cite"><div><div><div><div><div>Any suggestions ?<br><br></div>THe task has been hung for 5 days now, I can&#39;t start the machine or destroy it.<br><br></div></div><div><br><div>On 7 September 2016 at 06:49, Maton, Brett <span>&lt;<a href="mailto:matonb@ltresources.co.uk" target="_blank">matonb@ltresources.co.uk</a>&gt;</span> wrote:<br><blockquote style="margin:0 0 0 0.8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div><div>Sorry just hit reply....<br><br></div>I&#39;m seeing these errors in the logs which look related to the problem:<br><br><br><span>2016-09-07 06</span>:46:35,123 ERROR [org.ovirt.engine.core.bll.tas<wbr>ks.CommandCallbacksPoller] (DefaultQuartzScheduler6) [19c58c0d] Failed invoking callback end method &#39;onFailed&#39; for command &#39;<span>07608003</span>-ca05-4e2e-b917-85ce5<wbr>25c011b&#39; with exception &#39;null&#39;, the callback is marked for end method retries<br><span>2016-09-07 06</span>:46:45,184 ERROR [<a href="http://org.ovirt.engine.core.bll.Com">org.ovirt.engine.core.bll.Com</a><wbr>mandsFactory] (DefaultQuartzScheduler7) [19c58c0d] Error in invocating CTOR of command &#39;LiveMigrateDisk&#39;: null<br><span>2016-09-07 06</span>:46:45,185 ERROR [org.ovirt.engine.core.bll.tas<wbr>ks.CommandCallbacksPoller] (DefaultQuartzScheduler7) [19c58c0d] Failed invoking callback end method &#39;onFailed&#39; for command &#39;<span>07608003</span>-ca05-4e2e-b917-85ce5<wbr>25c011b&#39; with exception &#39;null&#39;, the callback is marked for end method retries</div><div><div><div><div><div><div><br><div>On 5 September 2016 at 06:46, Nir Soffer <span>&lt;<a href="mailto:nsoffer@redhat.com" target="_blank">nsoffer@redhat.com</a>&gt;</span> wrote:<br><blockquote style="margin:0px 0px 0px 0.8ex;border-left:1px solid #cccccc;padding-left:1ex">Hi Maton,<br> <br> Please reply to the list, not to me directly.<br> <br> Ala, can you look at this? is this a known issue?<br> <br> Thanks,<br> Nir<br><div><div><br> On Mon, Sep 5, 2016 at 8:43 AM, Maton, Brett &lt;<a href="mailto:matonb@ltresources.co.uk" target="_blank">matonb@ltresources.co.uk</a>&gt; wrote:<br> &gt; Log files as requested<br> &gt;<br> &gt; <a href="https://ufile.io/4fc35" target="_blank">https://ufile.io/4fc35</a> vdsm log<br> &gt; <a href="https://ufile.io/e9836" target="_blank">https://ufile.io/e9836</a> engine 03-Sep<br> &gt; <a href="https://ufile.io/15f37" target="_blank">https://ufile.io/15f37</a> engine 04-Sep<br> &gt;<br> &gt; vdsm log stops on the 01-Sep...<br> &gt;<br> &gt; Couple of entries from the event log:<br> &gt;<br> &gt; Sep 3, 2016 7:31:07 PM    Snapshot &#39;Auto-generated for Live Storage<br> &gt; Migration&#39; deletion for VM &#39;lv01&#39; has been completed.<br> &gt; Sep 3, 2016 6:46:46 PM    Snapshot &#39;Auto-generated for Live Storage<br> &gt; Migration&#39; deletion for VM &#39;lv01&#39; was initiated by SYSTEM<br> &gt;<br> &gt; And the related tasks<br> &gt;<br> &gt; Removing Snapshot Auto-generated for Live Storage Migration of VM lv01<br> &gt; Sep 3, 2016 6:46:44 PM        N/A    29f45ca9<br> &gt; Validating    Sep 3, 2016 6:46:44 PM    until    Sep 3, 2016 6:46:44 PM<br> &gt; Executing    Sep 3, 2016 6:46:44 PM    until    Sep 3, 2016 7:31:06 PM<br> &gt;<br> &gt; Finalizing    Sep 3, 2016 7:31:06 PM        N/A<br> &gt;<br> &gt;<br> &gt;<br> &gt; On 4 September 2016 at 14:27, Nir Soffer &lt;<a href="mailto:nsoffer@redhat.com" target="_blank">nsoffer@redhat.com</a>&gt; wrote:<br> &gt;&gt;<br> &gt;&gt; On Sun, Sep 4, 2016 at 12:40 PM, Maton, Brett &lt;<a href="mailto:matonb@ltresources.co.uk" target="_blank">matonb@ltresources.co.uk</a>&gt;<br> &gt;&gt; wrote:<br> &gt;&gt;&gt;<br> &gt;&gt;&gt; How do I fix / kill a hung vdsm task?<br> &gt;&gt;&gt;<br> &gt;&gt;&gt; It seems to have completed the task but is stuck finalising.<br> &gt;&gt;&gt;<br> &gt;&gt;&gt; Removing Snapshot Auto-generated for Live Storage Migration<br> &gt;&gt;&gt; Validating<br> &gt;&gt;&gt; Executing<br> &gt;&gt;&gt; (hour glass) Finalizing<br> &gt;&gt;&gt;<br> &gt;&gt;&gt; Task has been &#39;stuck&#39; finalising for over 13 hours<br> &gt;&gt;<br> &gt;&gt;<br> &gt;&gt; Can you share engine and vdsm logs since the time the merge was started?<br> &gt;&gt;<br> &gt;&gt; Nir<br> &gt;<br> &gt;</div></div></blockquote></div></div></div></div></div></div></div></div></blockquote></div></div></div></div>,<p>______________________________<wbr>_________________<br>Users mailing list<br><a href="mailto:Users@ovirt.org" target="_blank">Users@ovirt.org</a><br><a href="http://lists.ovirt.org/mailman/listinfo/users" target="_blank">http://lists.ovirt.org/mailman<wbr>/listinfo/users</a></p></blockquote><span><font color="#888888"><div> </div><div> </div><div>-- </div><div>С уважением, Краснобаев Михаил.</div><div> </div><div> </div></font></span></blockquote></div><br></div>
</div></div></blockquote></div><br></div>