<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=iso-8859-1">
<meta name="Generator" content="Microsoft Exchange Server">
<!-- converted from text --><style><!-- .EmailQuote { margin-left: 1pt; padding-left: 4pt; border-left: #800000 2px solid; } --></style>
</head>
<body>
<div>
<div>Hello Didi,</div>
<div>this is a clean install of the first host. (I am trying a disaster scenario and will later restore the backup)</div>
<div>
<div class="x_acompli_signature"><br>
-- <br>
Daniel Helgenberger <br>
m box bewegtbild GmbH <br>
<br>
P: <a href="tel:&#43;49/30/2408781-22">&#43;49/30/2408781-22</a> <br>
F: <a href="tel:&#43;49/30/2408781-10">&#43;49/30/2408781-10</a> <br>
<br>
ACKERSTR. 19 <br>
D-10115 BERLIN <br>
<br>
<br>
<a href="http://www.m-box.de">www.m-box.de</a> <a href="http://www.monkeymen.tv">
www.monkeymen.tv</a> <br>
<br>
Geschäftsführer: Martin Retschitzegger / Michaela Göllner <br>
Handeslregister: Amtsgericht Charlottenburg / HRB 112767 </div>
<br>
</div>
<br>
<br>
<br>
<div class="x_gmail_quote">On Wed, May 13, 2015 at 12:22 AM -0700, &quot;Yedidyah Bar David&quot;
<span dir="ltr">&lt;<a href="mailto:didi@redhat.com" target="_blank">didi@redhat.com</a>&gt;</span> wrote:<br>
<br>
</div>
</div>
<font size="2"><span style="font-size:10pt;">
<div class="PlainText">----- Original Message -----<br>
&gt; From: &quot;Daniel Helgenberger&quot; &lt;daniel.helgenberger@m-box.de&gt;<br>
&gt; To: users@ovirt.org<br>
&gt; Sent: Tuesday, May 12, 2015 8:48:42 PM<br>
&gt; Subject: [ovirt-users] HE setup failing: Cannot set temporary password for console connection<br>
&gt; <br>
&gt; Hello,<br>
&gt; <br>
&gt; a week ago I set up a HE (3.5.2) with no problems; now this fails.<br>
<br>
You mean you re-deploy the same host (clean setup), or adding another host?<br>
<br>
&gt; I<br>
&gt; suspect storage trouble but cannot pinpoint it. Did someth. change there<br>
&gt; with the recent async release?<br>
&gt; <br>
&gt; The storage domain is NFS3 via a 1G link to a ZFS storage appliance. The<br>
&gt; export is working quite fast; tested with iozone running for over 24h<br>
&gt; without problems.<br>
&gt; <br>
&gt; It starts with the &quot;Verifying sanlock lockspace initialization&quot; phase;<br>
&gt; which lasts about 7min (!).<br>
&gt; <br>
&gt; In the end it seems sanlock is locking the domain down. I can only get<br>
&gt; it back by stopping sanlock and vdsm.<br>
&gt; <br>
&gt; Attached is the full vdsm lock.<br>
&gt; <br>
&gt; <br>
&gt; Thanks!<br>
&gt; <br>
&gt; vdsm:<br>
&gt; <br>
&gt; Thread-27::ERROR::2015-05-12<br>
&gt; 19:17:51,470::domainMonitor::256::Storage.DomainMonitorThread::(_monitorDomain)<br>
&gt; Error while collecting domain 2f83ea82-e110-465d-a2a6-ac30534a9f6a<br>
&gt; monitoring information<br>
&gt; Traceback (most recent call last):<br>
&gt;&nbsp;&nbsp; File &quot;/usr/share/vdsm/storage/domainMonitor.py&quot;, line 232, in<br>
&gt;&nbsp;&nbsp; _monitorDomain<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; self.domain.selftest()<br>
&gt;&nbsp;&nbsp; File &quot;/usr/share/vdsm/storage/sdc.py&quot;, line 49, in __getattr__<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; return getattr(self.getRealDomain(), attrName)<br>
&gt;&nbsp;&nbsp; File &quot;/usr/share/vdsm/storage/sdc.py&quot;, line 52, in getRealDomain<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; return self._cache._realProduce(self._sdUUID)<br>
&gt;&nbsp;&nbsp; File &quot;/usr/share/vdsm/storage/sdc.py&quot;, line 122, in _realProduce<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; domain = self._findDomain(sdUUID)<br>
&gt;&nbsp;&nbsp; File &quot;/usr/share/vdsm/storage/sdc.py&quot;, line 141, in _findDomain<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; dom = findMethod(sdUUID)<br>
&gt;&nbsp;&nbsp; File &quot;/usr/share/vdsm/storage/nfsSD.py&quot;, line 122, in findDomain<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; return NfsStorageDomain(NfsStorageDomain.findDomainPath(sdUUID))<br>
&gt;&nbsp;&nbsp; File &quot;/usr/share/vdsm/storage/nfsSD.py&quot;, line 112, in findDomainPath<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; raise se.StorageDomainDoesNotExist(sdUUID)<br>
&gt; StorageDomainDoesNotExist: Storage domain does not exist:<br>
&gt; ('2f83ea82-e110-465d-a2a6-ac30534a9f6a',)<br>
&gt; <br>
&gt; <br>
&gt; Detector thread::DEBUG::2015-05-12<br>
&gt; 19:24:33,163::BindingXMLRPC::1173::XmlDetector::(handleSocket) xml over http<br>
&gt; detected from ('127.0.0.1', 47076)<br>
&gt; Thread-93::DEBUG::2015-05-12<br>
&gt; 19:24:33,166::BindingXMLRPC::1133::vds::(wrapper) client [127.0.0.1]::call<br>
&gt; vmSetTicket with ('e3d350c5-6254-4908-99e9-d60ca2e046f7', '5435uOVP',<br>
&gt; '10800', 'disconnect', {}) {}<br>
&gt; Thread-93::ERROR::2015-05-12<br>
&gt; 19:24:33,166::BindingXMLRPC::1152::vds::(wrapper) unexpected error<br>
&gt; Traceback (most recent call last):<br>
&gt;&nbsp;&nbsp; File &quot;/usr/share/vdsm/rpc/BindingXMLRPC.py&quot;, line 1136, in wrapper<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; res = f(*args, **kwargs)<br>
&gt;&nbsp;&nbsp; File &quot;/usr/share/vdsm/rpc/BindingXMLRPC.py&quot;, line 383, in vmSetTicket<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; return vm.setTicket(password, ttl, existingConnAction, params)<br>
&gt;&nbsp;&nbsp; File &quot;/usr/share/vdsm/API.py&quot;, line 642, in setTicket<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; return v.setTicket(password, ttl, existingConnAction, params)<br>
&gt;&nbsp;&nbsp; File &quot;/usr/share/vdsm/virt/vm.py&quot;, line 4834, in setTicket<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; graphics = _domParseStr(self._dom.XMLDesc(0)).childNodes[0]. \<br>
&gt; AttributeError: 'NoneType' object has no attribute 'XMLDesc'<br>
&gt; <br>
&gt; and:<br>
&gt; <br>
&gt; Thread-91::DEBUG::2015-05-12<br>
&gt; 19:25:15,152::libvirtconnection::143::root::(wrapper) Unknown libvirterror:<br>
&gt; ecode: 38 edom: 42 level: 2 message: Failed to acquire lock: No space left<br>
&gt; on device<br>
&gt; Thread-91::DEBUG::2015-05-12<br>
&gt; 19:25:15,154::vm::2294::vm.Vm::(_startUnderlyingVm)<br>
&gt; vmId=`e3d350c5-6254-4908-99e9-d60ca2e046f7`::_ongoingCreations released<br>
&gt; Thread-91::ERROR::2015-05-12<br>
&gt; 19:25:15,154::vm::2331::vm.Vm::(_startUnderlyingVm)<br>
&gt; vmId=`e3d350c5-6254-4908-99e9-d60ca2e046f7`::The vm start process failed<br>
&gt; Traceback (most recent call last):<br>
&gt;&nbsp;&nbsp; File &quot;/usr/share/vdsm/virt/vm.py&quot;, line 2271, in _startUnderlyingVm<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; self._run()<br>
&gt;&nbsp;&nbsp; File &quot;/usr/share/vdsm/virt/vm.py&quot;, line 3335, in _run<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; self._connection.createXML(domxml, flags),<br>
&gt;&nbsp;&nbsp; File &quot;/usr/lib/python2.7/site-packages/vdsm/libvirtconnection.py&quot;, line<br>
&gt;&nbsp;&nbsp; 111, in wrapper<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; ret = f(*args, **kwargs)<br>
&gt;&nbsp;&nbsp; File &quot;/usr/lib64/python2.7/site-packages/libvirt.py&quot;, line 3427, in<br>
&gt;&nbsp;&nbsp; createXML<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; if ret is None:raise libvirtError('virDomainCreateXML() failed',<br>
&gt;&nbsp;&nbsp;&nbsp;&nbsp; conn=self)<br>
&gt; libvirtError: Failed to acquire lock: No space left on device<br>
&gt; <br>
&gt; sanlock:<br>
&gt; 2015-05-12 19:11:27&#43;0200 4338 [708]: s2 lockspace<br>
&gt; 2f83ea82-e110-465d-a2a6-ac30534a9f6a:1:/rhev/data-center/mnt/10.11.0.30:_volumes_ovirt_engine/2f83ea82-e110-465d-a2a6-ac30534a9f6a/dom_md/ids:0<br>
&gt; 2015-05-12 19:11:48&#43;0200 4359 [702]: s2 host 1 1 4338<br>
&gt; 9f9fb274-9ae8-490e-bfba-72a743b0ebb2.hv01.sec.i<br>
&gt; 2015-05-12 19:11:48&#43;0200 4359 [702]: s2 host 250 1 0<br>
&gt; 9f9fb274-9ae8-490e-bfba-72a743b0ebb2.hv01.sec.i<br>
&gt; 2015-05-12 19:11:48&#43;0200 4359 [707]: s2:r2 resource<br>
&gt; 2f83ea82-e110-465d-a2a6-ac30534a9f6a:SDM:/rhev/data-center/mnt/10.11.0.30:_volumes_ovirt_engine/2f83ea82-e110-465d-a2a6-ac30534a9f6a/dom_md/leases:1048576<br>
&gt; for 3,11,4167<br>
&gt; 2015-05-12 19:23:26&#43;0200 5057 [708]: s3 lockspace<br>
&gt; 2f83ea82-e110-465d-a2a6-ac30534a9f6a:1:/rhev/data-center/mnt/10.11.0.30:_volumes_ovirt_engine/2f83ea82-e110-465d-a2a6-ac30534a9f6a/dom_md/ids:0<br>
&gt; 2015-05-12 19:23:48&#43;0200 5079 [702]: s3 host 1 2 5058<br>
&gt; 9f9fb274-9ae8-490e-bfba-72a743b0ebb2.hv01.sec.i<br>
&gt; 2015-05-12 19:23:48&#43;0200 5079 [702]: s3 host 250 1 0<br>
&gt; 9f9fb274-9ae8-490e-bfba-72a743b0ebb2.hv01.sec.i<br>
&gt; 2015-05-12 19:24:53&#43;0200 5144 [702]: cmd 9 target pid 4893 not found<br>
&gt; 2015-05-12 19:25:14&#43;0200 5165 [708]: r3 cmd_acquire 2,9,4893 invalid<br>
&gt; lockspace found -1 failed 0 name 2f83ea82-e110-465d-a2a6-ac30534a9f6a<br>
&gt; <br>
&gt; --<br>
&gt; Daniel Helgenberger<br>
&gt; m box bewegtbild GmbH<br>
&gt; <br>
&gt; P: &#43;49/30/2408781-22<br>
&gt; F: &#43;49/30/2408781-10<br>
&gt; <br>
&gt; ACKERSTR. 19<br>
&gt; D-10115 BERLIN<br>
&gt; <br>
&gt; <br>
&gt; <a href="http://www.m-box.de">www.m-box.de</a>&nbsp; <a href="http://www.monkeymen.tv">
www.monkeymen.tv</a><br>
&gt; <br>
&gt; Geschäftsführer: Martin Retschitzegger / Michaela Göllner<br>
&gt; Handeslregister: Amtsgericht Charlottenburg / HRB 112767<br>
&gt; <br>
&gt; _______________________________________________<br>
&gt; Users mailing list<br>
&gt; Users@ovirt.org<br>
&gt; <a href="http://lists.ovirt.org/mailman/listinfo/users">http://lists.ovirt.org/mailman/listinfo/users</a><br>
&gt; <br>
<br>
-- <br>
Didi<br>
<br>
</div>
</span></font>
</body>
</html>