<META HTTP-EQUIV="Content-Type" CONTENT="text/html; charset=iso-8859-1">
<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"><head><meta name=Generator content="Microsoft Word 15 (filtered medium)"><style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0cm;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:#0563C1;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:#954F72;
        text-decoration:underline;}
span.E-MailFormatvorlage17
        {mso-style-type:personal-compose;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;}
@page WordSection1
        {size:612.0pt 792.0pt;
        margin:72.0pt 72.0pt 72.0pt 72.0pt;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body lang=EN-US link="#0563C1" vlink="#954F72"><div class=WordSection1><p class=MsoNormal>Hey OpenVZ users,<o:p></o:p></p><p class=MsoNormal>I&#8217;m currently encountering a weird issue but don&#8217;t know how to fix it.<o:p></o:p></p><p class=MsoNormal>Some containers on our node are freaking out sometimes. That&#8217;s not the issue. It&#8217;s customer related.<o:p></o:p></p><p class=MsoNormal>However they take the node almost down. The host node has an IO delay of 30-50% at that time and needs about 5 minutes to<o:p></o:p></p><p class=MsoNormal>Become stable again. SSH login is (almost) impossible. Shell is not running properly.<o:p></o:p></p><p class=MsoNormal><br>Dmesg reports the following:<o:p></o:p></p><p class=MsoNormal>__ratelimit: 1892 callbacks suppressed<o:p></o:p></p><p class=MsoNormal>Fatal resource shortage: privvmpages, UB 371.<o:p></o:p></p><p class=MsoNormal>Fatal resource shortage: privvmpages, UB 371.<o:p></o:p></p><p class=MsoNormal>Fatal resource shortage: privvmpages, UB 371.<o:p></o:p></p><p class=MsoNormal>Fatal resource shortage: privvmpages, UB 371.<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>After taking a look at the bean counters of that container I got the following:<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>----------------------------------------------------------------<o:p></o:p></p><p class=MsoNormal>CT 371&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; | HELD Bar% Lim%| MAXH Bar% Lim%| BAR | LIM | FAIL<o:p></o:p></p><p class=MsoNormal>-------------+---------------+---------------+-----+-----+------<o:p></o:p></p><p class=MsoNormal>&nbsp;&nbsp;&nbsp;&nbsp; kmemsize|45.8M&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - | 223M&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp; lockedpages|&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp; 32K&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; 4G|&nbsp;&nbsp; 4G|&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp; privvmpages|3.25G&nbsp; 27%&nbsp; 27%|&nbsp; 12G 100% 100%|&nbsp; 12G| &nbsp;12G|&nbsp; 303K<o:p></o:p></p><p class=MsoNormal>&nbsp;&nbsp;&nbsp;&nbsp; shmpages| 114M&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - | 147M&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; numproc| 127&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - | 318&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp;&nbsp;&nbsp; physpages|1.08G&nbsp;&nbsp; -&nbsp;&nbsp; 26%|&nbsp;&nbsp; 4G&nbsp;&nbsp; -&nbsp; 100%|&nbsp;&nbsp; - |&nbsp;&nbsp; 4G|&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp; vmguarpages|&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; 8G|&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal> oomguarpages|1008M&nbsp; 24%&nbsp;&nbsp; - |2.45G&nbsp; 61%&nbsp;&nbsp; - |&nbsp;&nbsp; 4G|&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp;&nbsp; numtcpsock|&nbsp; 31&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - | 173&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp;&nbsp;&nbsp;&nbsp; numflock|&nbsp; 21&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp; 48&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; numpty|&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; 1&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp;&nbsp; numsiginfo|&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - | 102&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp;&nbsp;&nbsp; tcpsndbuf|1.22M&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |16.6M&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp;&nbsp;&nbsp; tcprcvbuf| 496K&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - | 2.7M&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal> othersockbuf|81.3K&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |5.72M&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp; dgramrcvbuf|&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - | 117K&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal> numothersock|&nbsp; 66&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - | 284&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp;&nbsp; dcachesize|24.8M&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - | 178M&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; numfile|2.69K&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |3.13K&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><p class=MsoNormal>&nbsp;&nbsp;&nbsp; numiptent|&nbsp; 62&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp; 62&nbsp;&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp; - |&nbsp;&nbsp;&nbsp; -<o:p></o:p></p><div style='mso-element:para-border-div;border:none;border-bottom:solid windowtext 1.0pt;padding:0cm 0cm 1.0pt 0cm'><p class=MsoNormal style='border:none;padding:0cm'>&nbsp;&nbsp;&nbsp; swappages| 367M&nbsp;&nbsp; -&nbsp;&nbsp;&nbsp; 9%| 986M&nbsp;&nbsp; -&nbsp;&nbsp; 24%|&nbsp;&nbsp; - |&nbsp;&nbsp; 4G|&nbsp;&nbsp;&nbsp; -<o:p></o:p></p></div><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>A failure count of 300.000 on privvmpages is not normal. However I&#8217;m using vSWAP and the RAM is limited to 12G.<o:p></o:p></p><p class=MsoNormal>Node has 30GB of 64GB free, so that&#8217;s not the issue.<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>Anyone has a clue, why the host is almost going down? A single container shouldn&#8217;t affect the hosts performance.<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>Currently running pve-kernel-2.6.32-43-pve: 2.6.32-166(pve-kernel-2.6.32-43-pve: 2.6.32-166) with vzctl 4.9-4.<o:p></o:p></p><p class=MsoNormal>Containers are using the ploop layout and are laying on a LVM(root lvm partition).<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>Thank you for your time.<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>-----------------------------------------------------------------------------------------<o:p></o:p></p><p class=MsoNormal>If you have any further questions, please let us know.<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal><span lang=DE>Mit freundlichen Gr&uuml;&szlig;en / With best regards <o:p></o:p></span></p><p class=MsoNormal>Henry Spanka | myVirtualserver Development Team<o:p></o:p></p></div></body></html>