<div dir="ltr"><div><div>Indeed reverting back to an older vdsm clears up the above issue. However now I the issue is see is:<br>Thread-18::ERROR::2013-01-23 15:50:42,885::task::833::TaskManager.Task::(_setError) Task=`08709e68-bcbc-40d8-843a-d69d4df40ac6`::Unexpected error<br>
Traceback (most recent call last):<br>  File &quot;/usr/share/vdsm/storage/task.py&quot;, line 840, in _run<br>    return fn(*args, **kargs)<br>  File &quot;/usr/share/vdsm/logUtils.py&quot;, line 42, in wrapper<br>    res = f(*args, **kwargs)<br>
  File &quot;/usr/share/vdsm/storage/hsm.py&quot;, line 923, in connectStoragePool<br>    masterVersion, options)<br>  File &quot;/usr/share/vdsm/storage/hsm.py&quot;, line 970, in _connectStoragePool<br>    res = pool.connect(hostID, scsiKey, msdUUID, masterVersion)<br>
  File &quot;/usr/share/vdsm/storage/sp.py&quot;, line 643, in connect<br>    self.__rebuild(msdUUID=msdUUID, masterVersion=masterVersion)<br>  File &quot;/usr/share/vdsm/storage/sp.py&quot;, line 1167, in __rebuild<br>    self.masterDomain = self.getMasterDomain(msdUUID=msdUUID, masterVersion=masterVersion)<br>
  File &quot;/usr/share/vdsm/storage/sp.py&quot;, line 1506, in getMasterDomain<br>    raise se.StoragePoolMasterNotFound(self.spUUID, msdUUID)<br>StoragePoolMasterNotFound: Cannot find master domain: &#39;spUUID=f90a0d1c-06ca-11e2-a05b-00151712f280, msdUUID=67534cca-1327-462a-b455-a04464084b31&#39;<br>
Thread-18::DEBUG::2013-01-23 15:50:42,887::task::852::TaskManager.Task::(_run) Task=`08709e68-bcbc-40d8-843a-d69d4df40ac6`::Task._run: 08709e68-bcbc-40d8-843a-d69d4df40ac6 (&#39;f90a0d1c-06ca-11e2-a05b-00151712f280&#39;, 2, &#39;f90a0d1c-06ca-11e2-a05b-00151712f280&#39;, &#39;67534cca-1327-462a-b455-a04464084b31&#39;, 433) {} failed - stopping task<br>
<br></div>This is with vdsm built from <br><table class="" style="padding:8px 4px;border-spacing:0px;color:rgb(0,0,0);font-family:monospace;font-size:small;font-style:normal;font-variant:normal;font-weight:normal;letter-spacing:normal;line-height:normal;text-align:start;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;background-color:rgb(255,255,255)">
<tbody><tr><td style="padding:2px 5px;font-size:12px;vertical-align:top">commit</td><td class="" style="padding:2px 5px;font-size:12px;vertical-align:top;font-family:monospace">25a2d8572ad32352227c98a86631300fbd6523c1</td>
</tr></tbody></table><br></div>- DHC<br></div><div class="gmail_extra"><br><br><div class="gmail_quote">On Wed, Jan 23, 2013 at 10:44 AM, Dead Horse <span dir="ltr">&lt;<a href="mailto:deadhorseconsulting@gmail.com" target="_blank">deadhorseconsulting@gmail.com</a>&gt;</span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div><div>VDSM was built from:<br>commit 166138e37e75767b32227746bb671b1dab9cdd5e<br><br></div>Attached is the full vdsm log<br>
<br></div>I should also note that from engine perspective it sees the master storage domain as locked and the others as unknown. <br>
</div><div class="HOEnZb"><div class="h5"><div class="gmail_extra"><br><br><div class="gmail_quote">On Wed, Jan 23, 2013 at 2:49 AM, Dan Kenigsberg <span dir="ltr">&lt;<a href="mailto:danken@redhat.com" target="_blank">danken@redhat.com</a>&gt;</span> wrote:<br>

<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div>On Tue, Jan 22, 2013 at 04:02:24PM -0600, Dead Horse wrote:<br>
&gt; Any ideas on this one? (from VDSM log):<br>
&gt; Thread-25::DEBUG::2013-01-22<br>
&gt; 15:35:29,065::BindingXMLRPC::914::vds::(wrapper) client [3.57.111.30]::call<br>
&gt; getCapabilities with () {}<br>
&gt; Thread-25::ERROR::2013-01-22 15:35:29,113::netinfo::159::root::(speed)<br>
&gt; cannot read ib0 speed<br>
&gt; Traceback (most recent call last):<br>
&gt;   File &quot;/usr/lib64/python2.6/site-packages/vdsm/netinfo.py&quot;, line 155, in<br>
&gt; speed<br>
&gt;     s = int(file(&#39;/sys/class/net/%s/speed&#39; % dev).read())<br>
&gt; IOError: [Errno 22] Invalid argument<br>
&gt;<br>
&gt; Causes VDSM to fail to attach storage<br>
<br>
</div>I doubt that this is the cause of the failure, as vdsm has always<br>
reported &quot;0&quot; for ib devices, and still is.<br>
<br>
Does a former version works with your Engine?<br>
Could you share more of your vdsm.log? I suppose the culprit lies in one<br>
one of the storage-related commands, not in statistics retrieval.<br>
<div><div><br>
&gt;<br>
&gt; Engine side sees:<br>
&gt; ERROR [org.ovirt.engine.core.bll.storage.NFSStorageHelper]<br>
&gt; (QuartzScheduler_Worker-96) [553ef26e] The connection with details<br>
&gt; 192.168.0.1:/ovirt/ds failed because of error code 100 and error message<br>
&gt; is: general exception<br>
&gt; 2013-01-22 15:35:30,160 INFO<br>
&gt; [org.ovirt.engine.core.bll.SetNonOperationalVdsCommand]<br>
&gt; (QuartzScheduler_Worker-96) [1ab78378] Running command:<br>
&gt; SetNonOperationalVdsCommand internal: true. Entities affected :  ID:<br>
&gt; 8970b3fe-1faf-11e2-bc1f-00151712f280 Type: VDS<br>
&gt; 2013-01-22 15:35:30,200 INFO<br>
&gt; [org.ovirt.engine.core.vdsbroker.SetVdsStatusVDSCommand]<br>
&gt; (QuartzScheduler_Worker-96) [1ab78378] START,<br>
&gt; SetVdsStatusVDSCommand(HostName = kezan, HostId =<br>
&gt; 8970b3fe-1faf-11e2-bc1f-00151712f280, status=NonOperational,<br>
&gt; nonOperationalReason=STORAGE_DOMAIN_UNREACHABLE), log id: 4af5c4cd<br>
&gt; 2013-01-22 15:35:30,211 INFO<br>
&gt; [org.ovirt.engine.core.vdsbroker.SetVdsStatusVDSCommand]<br>
&gt; (QuartzScheduler_Worker-96) [1ab78378] FINISH, SetVdsStatusVDSCommand, log<br>
&gt; id: 4af5c4cd<br>
&gt; 2013-01-22 15:35:30,242 ERROR<br>
&gt; [org.ovirt.engine.core.dal.dbbroker.auditloghandling.AuditLogDirector]<br>
&gt; (QuartzScheduler_Worker-96) [1ab78378] Try to add duplicate audit log<br>
&gt; values with the same name. Type: VDS_SET_NONOPERATIONAL_DOMAIN. Value:<br>
&gt; storagepoolname<br>
&gt;<br>
&gt; Engine = latest master<br>
&gt; VDSM = latest master<br>
<br>
</div></div>Since &quot;latest master&quot; is an unstable reference by definition, I&#39;m sure<br>
that History would thank you if you post the exact version (git hash?)<br>
of the code.<br>
<br>
&gt; node = el6<br>
<br>
</blockquote></div><br></div>
</div></div></blockquote></div><br></div>