<div dir="ltr"><div class="gmail_extra"><div class="gmail_quote">On Wed, Aug 31, 2016 at 9:06 PM, Nir Soffer <span dir="ltr">&lt;<a href="mailto:nsoffer@redhat.com" target="_blank">nsoffer@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-style:solid;border-left-color:rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div class="gmail_extra"><div class="gmail_quote"><span class="gmail-">On Wed, Aug 31, 2016 at 8:06 PM, Federico Alberto Sayd <span dir="ltr">&lt;<a href="mailto:fsayd@uncu.edu.ar" target="_blank">fsayd@uncu.edu.ar</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-style:solid;border-left-color:rgb(204,204,204);padding-left:1ex">
  
    
  
  <div bgcolor="#FFFFFF">
    <p>Hello Nir:</p>
    <p><br>
    </p>
    <p>I followed your instructions , added the config file, restarted
      vdsm, and today I have the vdsm logs from a host:</p>
    <p><a href="https://drive.google.com/file/d/0ByrwZ1AkYuyeR1hmRm90a1R6MEk/view?usp=sharing" target="_blank">https://drive.google.com/file/<wbr>d/0ByrwZ1AkYuyeR1hmRm90a1R6MEk<wbr>/view?usp=sharing</a></p>
    <p>Please tell me if you see anything related to the memory issue.</p></div></blockquote><div><br></div></span><div>This logs start when vdsm is using 567640 kB (554 MiB) - very unusual.</div><div><br></div><div>The memory usage grow by 18 MiB during one day. No garbage collection</div><div>issues. This smells like we keep some data forever for no reason.</div><div><br></div><div><div><div>$ grep rss= vdsm-leak.log | head -n 1<br></div><div>Thread-33::DEBUG::2016-08-30 12:01:43,845::health::122::<wbr>health::(_check_resources) user=1.73%, sys=1.65%, rss=567640 kB (+44), threads=57</div></div><div><br></div><div> $ grep rss= vdsm-leak.log | tail -n 1</div><div>Thread-33::DEBUG::2016-08-31 13:00:36,913::health::122::<wbr>health::(_check_resources) user=4.18%, sys=1.87%, rss=586584 kB (+0), threads=52</div></div><div><br></div><div>I would like to see the logs since vdsm was started  - do you have them?</div><div><br></div><div>Also, can you describe the workload on this hypervisor?</div><div><br></div><div>- how many vms are running at the same time</div><div>- how many vms are started and stopped per hour</div><div>- using default vdsm.conf? if not, please attach your conf</div></div></div></div></blockquote><div><br></div><div>I could reproduce similar leak in master - it seems that we leak about 1MiB</div><div>for each vm started and stopped.</div><div><br></div><div>I opened this bug:</div><div><a href="https://bugzilla.redhat.com/1372205">https://bugzilla.redhat.com/1372205</a><br></div><div><br></div><div>Please check if this bug match your issue. If it does, please add</div><div>your logs and other info to this bug.</div><div><br></div><div>Thanks,</div><div>Nir</div></div></div></div>