<div dir="ltr">Thank you, I will try to increase to 20 and see what happens. Bug is filed: <a href="https://bugzilla.redhat.com/show_bug.cgi?id=1175255">https://bugzilla.redhat.com/show_bug.cgi?id=1175255</a></div><div class="gmail_extra"><br><div class="gmail_quote">On 17 December 2014 at 11:48, Yeela Kaplan <span dir="ltr">&lt;<a href="mailto:ykaplan@redhat.com" target="_blank">ykaplan@redhat.com</a>&gt;</span> wrote:<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Hi,<br>
You are right, the problem is with the file handlers.<br>
You can increase the number of handlers in pool using the vdsm config file, which is supposed to be under the following directory in your system:<br>
<br>
/usr/lib/python2.6/site-packages/vdsm/config.py<br>
<br>
The default value for &#39;process_pool_max_slots_per_domain&#39; is 10, so you can increase it by a bit, but not too much.<br>
<br>
But I suspect the problem is in a larger scale, and this is only a temporary relief for your system and this needs much more attention and a proper fix.<br>
could you please open a bug on RHEV/vdsm in bugzilla stating all of the details of your setup and logs?<br>
<br>
thanks,<br>
Yeela<br>
<div><div class="h5"><br>
----- Original Message -----<br>
&gt; From: &quot;Tiemen Ruiten&quot; &lt;<a href="mailto:t.ruiten@rdmedia.com">t.ruiten@rdmedia.com</a>&gt;<br>
&gt; To: &quot;<a href="mailto:Users@ovirt.org">Users@ovirt.org</a>&quot; &lt;<a href="mailto:users@ovirt.org">users@ovirt.org</a>&gt;<br>
&gt; Sent: Wednesday, December 17, 2014 10:53:39 AM<br>
&gt; Subject: Re: [ovirt-users] ERROR &#39;no free file handlers in pool&#39; while creating VM from template<br>
&gt;<br>
&gt; Would this be limits for the vdsm process? Then what is the proper way to<br>
&gt; change ulimits for VDSM?<br>
&gt;<br>
&gt; On 16 December 2014 at 20:45, Donny Davis &lt; <a href="mailto:donny@cloudspin.me">donny@cloudspin.me</a> &gt; wrote:<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; The only thing I can think of would be file hard and soft limits, but I am no<br>
&gt; oVirt pro.<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; &#39;no free file handlers in pool&#39; that would make sense to me…<br>
&gt;<br>
&gt; Donny<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; From: Tiemen Ruiten [mailto: <a href="mailto:t.ruiten@rdmedia.com">t.ruiten@rdmedia.com</a> ]<br>
&gt; Sent: Tuesday, December 16, 2014 12:40 PM<br>
&gt; To: Donny Davis<br>
&gt; Cc: <a href="mailto:Users@ovirt.org">Users@ovirt.org</a><br>
&gt; Subject: Re: [ovirt-users] ERROR &#39;no free file handlers in pool&#39; while<br>
&gt; creating VM from template<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; About 25-30. The nodes are Xeon(R) CPU E5-2650 0 @ 2.00GHz with 16<br>
&gt; hyperthreaded cores and 64 GB of RAM each. At the moment I created the VM,<br>
&gt; processor load on both nodes was less than 1.<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; On 16 December 2014 at 20:29, Donny Davis &lt; <a href="mailto:donny@cloudspin.me">donny@cloudspin.me</a> &gt; wrote:<br>
&gt;<br>
&gt; What is the VM load you are running on your servers?<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; -----Original Message-----<br>
&gt; From: <a href="mailto:users-bounces@ovirt.org">users-bounces@ovirt.org</a> [mailto: <a href="mailto:users-bounces@ovirt.org">users-bounces@ovirt.org</a> ] On Behalf Of<br>
&gt; Tiemen Ruiten<br>
&gt; Sent: Tuesday, December 16, 2014 12:27 PM<br>
&gt; To: <a href="mailto:users@ovirt.org">users@ovirt.org</a><br>
&gt; Subject: [ovirt-users] ERROR &#39;no free file handlers in pool&#39; while creating<br>
&gt; VM from template<br>
&gt;<br>
&gt; Hello,<br>
&gt;<br>
&gt; I ran into a nasty problem today when creating a new, cloned VM from a<br>
&gt; template (one virtual 20 GBdisk) on our two-node oVirt cluster: on the node<br>
&gt; where I started a VM creation job, load skyrocketed and some VMs stopped<br>
&gt; responding until and after the job failed. Everything recovered without<br>
&gt; intervention, but this obviously shouldn&#39;t happen. I have attached the<br>
&gt; relevant vdsm log file. The button to create the VM was pressed around<br>
&gt; 11:17, the first error in the vdsm log is at 11:23:58.<br>
&gt;<br>
&gt; The ISO domain is a gluster volume exposed via NFS, the storage domain for<br>
&gt; the VM&#39;s is also a gluster volume. The underlying filesystem is ZFS.<br>
&gt; The hypervisor nodes are full CentOS 6 installs.<br>
&gt;<br>
&gt; I&#39;m guessing the &#39;no free file handlers in pool&#39; in the vdsm log file is key<br>
&gt; here. What can I do to prevent this from happening again? Apart from not<br>
&gt; creating new VMs of course :)<br>
&gt;<br>
&gt; Tiemen<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; --<br>
&gt;<br>
&gt;<br>
&gt; Tiemen Ruiten<br>
&gt; Systems Engineer<br>
&gt; R&amp;D Media<br>
&gt;<br>
&gt;<br>
&gt; --<br>
&gt; Tiemen Ruiten<br>
&gt; Systems Engineer<br>
&gt; R&amp;D Media<br>
&gt;<br>
</div></div>&gt; _______________________________________________<br>
&gt; Users mailing list<br>
&gt; <a href="mailto:Users@ovirt.org">Users@ovirt.org</a><br>
&gt; <a href="http://lists.ovirt.org/mailman/listinfo/users" target="_blank">http://lists.ovirt.org/mailman/listinfo/users</a><br>
&gt;<br>
</blockquote></div><br clear="all"><div><br></div>-- <br><div class="gmail_signature"><div dir="ltr">Tiemen Ruiten<br>Systems Engineer<br>R&amp;D Media<br></div></div>
</div>