<div dir="ltr"><div>Hello,</div><div><br></div><div>I Tried this solution , but to some vms not was resolved.</div><div>Logs:</div><div><br></div><div>src logs:</div><div><br></div><div>Thread-12::DEBUG::2016-12-06 08:50:58,112::check::327::storage.check::(_check_completed) FINISH check u&#39;/rhev/data-center/mnt/192.168.144.6:_home_iso/b5fa054f-0d3d-458b-a891-13fd9383ee7d/dom_md/metadata&#39; rc=0 err=bytearray(b&#39;0+1 records in\n0+1 records out\n328 bytes (328 B) copied, 0.000474535 s, 691 kB/s\n&#39;) elapsed=0.08<br>Thread-2374888::WARNING::2016-12-06 08:50:58,815::migration::671::virt.vm::(monitor_migration) vmId=`9b5ab7b4-1045-4858-b24c-1f5a9f6172c3`::The migration took 520 seconds which is exceeding the configured maximum time for migrations of 512 seconds. The migration will be aborted.<br>Thread-2374888::DEBUG::2016-12-06 08:50:58,816::migration::715::virt.vm::(stop) vmId=`9b5ab7b4-1045-4858-b24c-1f5a9f6172c3`::stopping migration monitor thread<br>Thread-2374888::DEBUG::2016-12-06 08:50:58,816::migration::570::virt.vm::(stop) vmId=`9b5ab7b4-1045-4858-b24c-1f5a9f6172c3`::stopping migration downtime thread<br>Thread-2374888::DEBUG::2016-12-06 08:50:58,817::migration::629::virt.vm::(run) vmId=`9b5ab7b4-1045-4858-b24c-1f5a9f6172c3`::stopped migration monitor thread<br>Thread-2374886::DEBUG::2016-12-06 08:50:59,098::migration::715::virt.vm::(stop) vmId=`9b5ab7b4-1045-4858-b24c-1f5a9f6172c3`::stopping migration monitor thread<br>Thread-2374886::ERROR::2016-12-06 08:50:59,098::migration::252::virt.vm::(_recover) vmId=`9b5ab7b4-1045-4858-b24c-1f5a9f6172c3`::operation aborted: migration job: canceled by client<br>Thread-2374886::DEBUG::2016-12-06 08:50:59,098::stompreactor::408::jsonrpc.AsyncoreClient::(send) Sending response<br>Thread-2374886::DEBUG::2016-12-06 08:50:59,321::__init__::208::jsonrpc.Notification::(emit) Sending event {&quot;params&quot;: {&quot;notify_time&quot;: 6040272640, &quot;9b5ab7b4-1045-4858-b24c-1f5a9f6172c3&quot;: {&quot;status&quot;: &quot;Migration Source&quot;}}, &quot;jsonrpc&quot;: &quot;2.0&quot;, &quot;method&quot;: &quot;|virt|VM_status|9b5ab7b4-1045-4858-b24c-1f5a9f6172c3&quot;}<br>Thread-2374886::ERROR::2016-12-06 08:50:59,322::migration::381::virt.vm::(run) vmId=`9b5ab7b4-1045-4858-b24c-1f5a9f6172c3`::Failed to migrate<br>Traceback (most recent call last):<br>  File &quot;/usr/share/vdsm/virt/migration.py&quot;, line 363, in run<br>    self._startUnderlyingMigration(time.time())<br>  File &quot;/usr/share/vdsm/virt/migration.py&quot;, line 438, in _startUnderlyingMigration<br>    self._perform_with_downtime_thread(duri, muri)<br>  File &quot;/usr/share/vdsm/virt/migration.py&quot;, line 489, in _perform_with_downtime_thread<br>    self._perform_migration(duri, muri)<br>  File &quot;/usr/share/vdsm/virt/migration.py&quot;, line 476, in _perform_migration<br>    self._vm._dom.migrateToURI3(duri, params, flags)<br>  File &quot;/usr/lib/python2.7/site-packages/vdsm/virt/virdomain.py&quot;, line 69, in f<br>    ret = attr(*args, **kwargs)<br>  File &quot;/usr/lib/python2.7/site-packages/vdsm/libvirtconnection.py&quot;, line 123, in wrapper<br>    ret = f(*args, **kwargs)<br>  File &quot;/usr/lib/python2.7/site-packages/vdsm/utils.py&quot;, line 916, in wrapper<br>    return func(inst, *args, **kwargs)<br>  File &quot;/usr/lib64/python2.7/site-packages/libvirt.py&quot;, line 1836, in migrateToURI3<br>    if ret == -1: raise libvirtError (&#39;virDomainMigrateToURI3() failed&#39;, dom=self)<br>libvirtError: operation aborted: migration job: canceled by client<br>Thread-12::DEBUG::2016-12-06 08:50:59,875::check::296::storage.check::(_start_process) START check &#39;/dev/c2dc0101-748e-4a7b-9913-47993eaa52bd/metadata&#39; cmd=[&#39;/usr/bin/taskset&#39;, &#39;--cpu-list&#39;, &#39;0-31&#39;, &#39;/usr/bin/dd&#39;, &#39;if=/dev/c2dc0101-748e-4a7b-9913-47993eaa52bd/metadata&#39;, &#39;of=/dev/null&#39;, &#39;bs=4096&#39;, &#39;count=1&#39;, &#39;iflag=direct&#39;] delay=0.00<br>mailbox.SPMMonitor::DEBUG::2016-12-06 08:50:59,914::storage_mailbox::733::Storage.Misc.excCmd::(_checkForMail) /usr/bin/taskset --cpu-list 0-31 dd if=/rhev/data-center/77e24b20-9d21-4952-a089-3c5c592b4e6d/mastersd/dom_md/inbox iflag=direct,fullblock count=1 bs=1024000 (cwd None)</div><div><br></div><div>dst log:</div><div><br></div><div>libvirtEventLoop::DEBUG::2016-12-06 08:50:59,080::task::995::Storage.TaskManager.Task::(_decref) Task=`7446f040-c5f4-497c-b4a5-8934921a7b89`::ref 1 aborting False<br>libvirtEventLoop::DEBUG::2016-12-06 08:50:59,080::fileUtils::190::Storage.fileUtils::(cleanupdir) Removing directory: /var/run/vdsm/storage/6e5cce71-3438-4045-9d54-6071<br>23e0557e/413a560d-4919-4870-88d6-f7fedbb77523<br>libvirtEventLoop::DEBUG::2016-12-06 08:50:59,080::lvm::288::Storage.Misc.excCmd::(cmd) /usr/bin/taskset --cpu-list 0-31 /usr/bin/sudo -n /usr/sbin/lvm lvs --config &#39; de<br>vices { preferred_names = [&quot;^/dev/mapper/&quot;] ignore_suspended_devices=1 write_cache_state=0 disable_after_error_count=3 filter = [ &#39;\&#39;&#39;a|/dev/mapper/36005076300810a4db80<br>0000000000002|&#39;\&#39;&#39;, &#39;\&#39;&#39;r|.*|&#39;\&#39;&#39; ] }  global {  locking_type=1  prioritise_write_locks=1  wait_for_locks=1  use_lvmetad=0 }  backup {  retain_min = 50  retain_days = 0<br> } &#39; --noheadings --units b --nosuffix --separator &#39;|&#39; --ignoreskippedcluster -o uuid,name,vg_name,attr,size,seg_start_pe,devices,tags 6e5cce71-3438-4045-9d54-607123e05<br>57e (cwd None)<br>jsonrpc.Executor/6::DEBUG::2016-12-06 08:50:59,090::__init__::530::jsonrpc.JsonRpcServer::(_handle_request) Calling &#39;VM.destroy&#39; in bridge with {u&#39;vmID&#39;: u&#39;9b5ab7b4-104<br>5-4858-b24c-1f5a9f6172c3&#39;}<br>jsonrpc.Executor/6::DEBUG::2016-12-06 08:50:59,090::API::314::vds::(destroy) About to destroy VM 9b5ab7b4-1045-4858-b24c-1f5a9f6172c3<br>jsonrpc.Executor/6::DEBUG::2016-12-06 08:50:59,091::vm::4171::virt.vm::(destroy) vmId=`9b5ab7b4-1045-4858-b24c-1f5a9f6172c3`::destroy Called<br>Thread-51550::ERROR::2016-12-06 08:50:59,091::vm::759::virt.vm::(_startUnderlyingVm) vmId=`9b5ab7b4-1045-4858-b24c-1f5a9f6172c3`::Failed to start a migration destinatio<br>n vm<br>Traceback (most recent call last):<br>  File &quot;/usr/share/vdsm/virt/vm.py&quot;, line 725, in _startUnderlyingVm<br>    self._completeIncomingMigration()<br>  File &quot;/usr/share/vdsm/virt/vm.py&quot;, line 3071, in _completeIncomingMigration<br>    self._incomingMigrationFinished.isSet(), usedTimeout)<br>  File &quot;/usr/share/vdsm/virt/vm.py&quot;, line 3154, in _attachLibvirtDomainAfterMigration<br>    raise MigrationError(e.get_error_message())<br>MigrationError: Domain not found: no domain with matching uuid &#39;9b5ab7b4-1045-4858-b24c-1f5a9f6172c3&#39;<br>Thread-51550::INFO::2016-12-06 08:50:59,093::vm::1308::virt.vm::(setDownStatus) vmId=`9b5ab7b4-1045-4858-b24c-1f5a9f6172c3`::Changed state to Down: VM failed to migrate (code=8)</div><div><br></div><div><br></div><div><br></div><div>Logs Attached.</div><div><br></div><div>any ideas?</div><div><br></div><div>Very thanks.<br></div><div><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">2016-12-06 4:16 GMT-03:00 Yedidyah Bar David <span dir="ltr">&lt;<a href="mailto:didi@redhat.com" target="_blank">didi@redhat.com</a>&gt;</span>:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><span>On Mon, Dec 5, 2016 at 10:25 PM, Marcelo Leandro &lt;<a href="mailto:marceloltmm@gmail.com">marceloltmm@gmail.com</a>&gt; wrote:<br>
&gt; Hello<br>
&gt; I am with problem, I can not migrate vm.<br>
&gt; Can someone help me?<br>
&gt;<br>
&gt; Message in log:<br>
&gt;<br>
&gt; Src vdsm log:<br>
&gt;<br>
&gt; Thread-89514 :: WARNING :: <a href="tel:2016-12-05%2017" value="+12016120517">2016-12-05 17</a>: 01: 49,542 :: migration :: 683 ::<br>
&gt; virt.vm ::: monitor_migration vmId = `f38b9f7d-5bd0-4bdf-885c-<wbr>e03e8d6bc70e`<br>
&gt; :: Migration Stalling: remaining<br>
&gt; (56MiB)&gt; lowmark (2MiB). Refer to RHBZ # 919201.<br>
&gt; Thread-89514 :: DEBUG :: 2016-12-05 17: 01: 49,543 :: migration :: 689 ::<br>
&gt; virt.vm ::: monitor_migration vmId = `f38b9f7d-5bd0-4bdf-885c-<wbr>e03e8d6bc70e`<br>
&gt; :: new Iteration detected: 15<br>
&gt; Thread-89514 :: WARNING :: 2016-12-05 17: 01: 49,543 :: migration :: 704 ::<br>
&gt; virt.vm ::: monitor_migration vmId = `f38b9f7d-5bd0-4bdf-885c-<wbr>e03e8d6bc70e`<br>
&gt; :: Migration Is stuck: Has not pro<br>
&gt; Gressed in 240.071660042 seconds. Aborting.<br>
<br>
</span>This is usually a result of a too-busy VM, changing its memory faster than<br>
the migration process can copy the changes to the destination.<br>
<br>
You can try changing the cluster migration policy to &quot;suspend workload<br>
if needed&quot;.<br>
<br>
For more details/background, see also:<br>
<br>
<a href="https://www.ovirt.org/develop/release-management/features/migration-enhancements/" target="_blank" rel="noreferrer">https://www.ovirt.org/develop/<wbr>release-management/features/<wbr>migration-enhancements/</a><br>
<br>
Best,<br>
<div><div class="h5"><br>
&gt; Thread-89514 :: DEBUG :: <a href="tel:2016-12-05%2017" value="+12016120517">2016-12-05 17</a>: 01: 49,544 :: migration :: 715 ::<br>
&gt; virt.vm ::: stop} vmId = `f38b9f7d-5bd0-4bdf-885c-<wbr>e03e8d6bc70e` :: stopping<br>
&gt; Migration monitor thread<br>
&gt; Thread-89514 :: DEBUG :: 2016-12-05 17: 01: 49,545 :: migration :: 570 ::<br>
&gt; virt.vm ::: stop) vmId = `f38b9f7d-5bd0-4bdf-885c-<wbr>e03e8d6bc70e` :: stopping<br>
&gt; Migration downtime thread<br>
&gt; Thread-89514 :: DEBUG :: 2016-12-05 17: 01: 49,545 :: migration :: 629 ::<br>
&gt; virt.vm ::: (run) vmId = `f38b9f7d-5bd0-4bdf-885c-<wbr>e03e8d6bc70e` :: stopped<br>
&gt; Migration monitor thread<br>
&gt; Thread-89513 :: DEBUG :: 2016-12-05 17: 01: 49,766 :: migration :: 715 ::<br>
&gt; virt.vm ::: stop} vmId = `f38b9f7d-5bd0-4bdf-885c-<wbr>e03e8d6bc70e` :: stopping<br>
&gt; Migration monitor thread<br>
&gt; Thread-89513 :: ERROR :: 2016-12-05 17: 01: 49,767 :: migration :: 252 ::<br>
&gt; virt.vm :: (_ recover) vmId = `f38b9f7d-5bd0-4bdf-885c-<wbr>e03e8d6bc70e` ::<br>
&gt; operation Aborted: migration job: cancel<br>
&gt; D by cliente<br>
&gt;<br>
&gt; Dst vdsm.log:<br>
&gt;<br>
&gt; Periodic / 13 :: WARNING :: 2016-12-05 17: 01: 49,791 :: sampling :: 483 ::<br>
&gt; virt.sampling.StatsCache: :( put) dropped stale old sample: sampled<br>
&gt; 4303678.080000 stored 4303693.070000<br>
&gt; Periodic / 13 :: DEBUG :: 2016-12-05 17: 01: 49,791 :: executor :: 221 ::<br>
&gt; Executor :: (_ run) Worker was discarded<br>
&gt; Jsonrpc.Executor / 0 :: DEBUG :: 2016-12-05 17: 01: 49,792 :: __ init __ ::<br>
&gt; 530 :: jsonrpc.JsonRpcServer :: (_ handle_request) Calling &#39;VM.destroy&#39; in<br>
&gt; bridge with {u&#39;vmID &#39; : U&#39;f38b9f7d-5bd0-4bdf-885c-<wbr>e03e8d6bc70e &#39;}<br>
&gt; Jsonrpc.Executor / 0 :: DEBUG :: 2016-12-05 17: 01: 49,793 :: API :: 314 ::<br>
&gt; vds :::( destroy) About to destroy VM f38b9f7d-5bd0-4bdf-885c-<wbr>e03e8d6bc70e<br>
&gt; Jsonrpc.Executor / 0 :: DEBUG :: 2016-12-05 17:01:49,793 :: vm :: 4171 ::<br>
&gt; virt.vm :::( destroy) vmId = `f38b9f7d-5bd0-4bdf-885c-<wbr>e03e8d6bc70e`: :<br>
&gt; Destroy Called<br>
&gt; Thread-483 :: ERROR :: 2016-12-05 17: 01: 49,793 :: vm :: 759 :: virt.vm ::<br>
&gt; (_ startUnderlyingVm) vmId = `f38b9f7d-5bd0-4bdf-885c-<wbr>e03e8d6bc70e` ::<br>
&gt; Failed To start a migration destination vm<br>
&gt; Traceback (most recent call last):<br>
&gt;   File &quot;/usr/share/vdsm/virt/vm.py&quot;, line 725, in _startUnderlyingVm<br>
&gt;     Self._<wbr>completeIncomingMigration ()<br>
&gt;   File &quot;/usr/share/vdsm/virt/vm.py&quot;, line 3071, in<br>
&gt; _completeIncomingMigration<br>
&gt;     Self._<wbr>incomingMigrationFinished.<wbr>isSet (), usedTimeout)<br>
&gt;   File &quot;/usr/share/vdsm/virt/vm.py&quot;, line 3154, in<br>
&gt; _<wbr>attachLibvirtDomainAfterMigrat<wbr>ion<br>
&gt;     Raise MigrationError (e.get_error_message ())<br>
&gt; MigrationError: Domain not found: no domain with matching uuid<br>
&gt; &#39;f38b9f7d-5bd0-4bdf-885c-<wbr>e03e8d6bc70e&#39;<br>
&gt;<br>
&gt; The logs attached.<br>
&gt; Thanks.<br>
&gt;<br>
</div></div>&gt; ______________________________<wbr>_________________<br>
&gt; Users mailing list<br>
&gt; <a href="mailto:Users@ovirt.org">Users@ovirt.org</a><br>
&gt; <a href="http://lists.ovirt.org/mailman/listinfo/users" target="_blank" rel="noreferrer">http://lists.ovirt.org/<wbr>mailman/listinfo/users</a><br>
&gt;<br>
<span class="HOEnZb"><font color="#888888"><br>
<br>
<br>
--<br>
Didi<br>
</font></span></blockquote></div><br></div>