<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">
<meta name="Generator" content="Microsoft Word 12 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
{font-family:"Cambria Math";
panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
{font-family:Calibri;
panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
{margin:0in;
margin-bottom:.0001pt;
font-size:11.0pt;
font-family:"Calibri","sans-serif";}
a:link, span.MsoHyperlink
{mso-style-priority:99;
color:blue;
text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
{mso-style-priority:99;
color:purple;
text-decoration:underline;}
p.MsoListParagraph, li.MsoListParagraph, div.MsoListParagraph
{mso-style-priority:34;
margin-top:0in;
margin-right:0in;
margin-bottom:0in;
margin-left:.5in;
margin-bottom:.0001pt;
font-size:11.0pt;
font-family:"Calibri","sans-serif";}
span.EmailStyle17
{mso-style-type:personal;
font-family:"Calibri","sans-serif";
color:windowtext;}
span.EmailStyle18
{mso-style-type:personal-reply;
font-family:"Calibri","sans-serif";
color:#1F497D;}
.MsoChpDefault
{mso-style-type:export-only;
font-size:10.0pt;}
@page WordSection1
{size:8.5in 11.0in;
margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
{page:WordSection1;}
/* List Definitions */
@list l0
{mso-list-id:1165512418;
mso-list-type:hybrid;
mso-list-template-ids:954995116 67698711 67698713 67698715 67698703 67698713 67698715 67698703 67698713 67698715;}
@list l0:level1
{mso-level-number-format:alpha-lower;
mso-level-text:"%1\)";
mso-level-tab-stop:none;
mso-level-number-position:left;
text-indent:-.25in;}
ol
{margin-bottom:0in;}
ul
{margin-bottom:0in;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal">Hi , <o:p></o:p></p>
<p class="MsoNormal">I was working on creating container with memory limits sing Cgroup APIs in libct . Attached is the test program .
<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">While testing I figured out that the limits were not getting set and I debugged it further to find :
<o:p></o:p></p>
<p class="MsoNormal">In src/cgroups.c , function cgroups_create() which is called in local_spawn_cb() when state is yet not set to CT_RUNNING calls local_config_controller() and that postpones the cgroup configuration .
<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Hence I changed cgroups_create() to call config_controller() instead of local_config_controller()<o:p></o:p></p>
<p class="MsoNormal">As follows ret = config_controller(ct, cfg->ctype, cfg->param, cfg->value);
<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">With this change, the cgroup limits are getting set correctly for the process which spawns/enters in the container . <o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Qn : Does this change look correct or is there something missing in my test program. <o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Also In future, would libct have an API to support changing cgroup limits while container is running ?<o:p></o:p></p>
<p class="MsoNormal" style="margin-left:.25in"><o:p> </o:p></p>
<p class="MsoNormal">Thanks and Regards ,<o:p></o:p></p>
<p class="MsoNormal">Monali. <o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Test program <o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">/*<o:p></o:p></p>
<p class="MsoNormal">* Test creation of container with cgroup controller. Impose memory limits .
<o:p></o:p></p>
<p class="MsoNormal"> */<o:p></o:p></p>
<p class="MsoNormal">#define _XOPEN_SOURCE<o:p></o:p></p>
<p class="MsoNormal">#include <libct.h><o:p></o:p></p>
<p class="MsoNormal">#include <stdio.h><o:p></o:p></p>
<p class="MsoNormal">#include <sys/mman.h><o:p></o:p></p>
<p class="MsoNormal">#include <fcntl.h><o:p></o:p></p>
<p class="MsoNormal">#include <string.h><o:p></o:p></p>
<p class="MsoNormal">#include <stdlib.h><o:p></o:p></p>
<p class="MsoNormal">#include <unistd.h><o:p></o:p></p>
<p class="MsoNormal">#include <libct.h><o:p></o:p></p>
<p class="MsoNormal">#include <stdio.h><o:p></o:p></p>
<p class="MsoNormal">#include <unistd.h><o:p></o:p></p>
<p class="MsoNormal">#include <sys/mman.h><o:p></o:p></p>
<p class="MsoNormal">#include <string.h><o:p></o:p></p>
<p class="MsoNormal">#include "test.h"<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">#define CPUS "0"<o:p></o:p></p>
<p class="MsoNormal">#define STR_HELPER(x) #x<o:p></o:p></p>
<p class="MsoNormal">#define STR(x) STR_HELPER(x)<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">#define MEMLIMIT 134217728 //128 MB <o:p></o:p></p>
<p class="MsoNormal">#define MEMLIMIT_STR STR(MEMLIMIT)<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">#define LOWER_THAN_LIMIT 104857600 //100 MB<o:p></o:p></p>
<p class="MsoNormal">#define LOWER_THAN_LIMIT_STR STR(LOWER_THAN_LIMIT)<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">// For testing Define STRESS_MEM_STR to either LOWER_THAN_LIMIT_STR or MEMLIMIT_STR
<o:p></o:p></p>
<p class="MsoNormal">//#define STRESS_MEM_STR LOWER_THAN_LIMIT_STR <o:p></o:p></p>
<p class="MsoNormal">#define STRESS_MEM_STR MEMLIMIT_STR <o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">int is_memory_limit_correct(const char *expected_limit)<o:p></o:p></p>
<p class="MsoNormal">{<o:p></o:p></p>
<p class="MsoNormal"> int ret = 0;<o:p></o:p></p>
<p class="MsoNormal"> FILE *f = NULL;<o:p></o:p></p>
<p class="MsoNormal"> char buf[1024] = {'\0'};<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"> f = fopen("/sys/fs/cgroup/memory/test1/memory.limit_in_bytes", "r");<o:p></o:p></p>
<p class="MsoNormal"> if (!f) {<o:p></o:p></p>
<p class="MsoNormal"> fprintf(stderr, "Unable to open memory limit file !\n");<o:p></o:p></p>
<p class="MsoNormal"> goto err;<o:p></o:p></p>
<p class="MsoNormal"> }<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"> if (fscanf(f, "%s", buf) != 1) {<o:p></o:p></p>
<p class="MsoNormal"> fprintf(stderr, "fscanf failed!\n");<o:p></o:p></p>
<p class="MsoNormal"> goto err;<o:p></o:p></p>
<p class="MsoNormal"> }<o:p></o:p></p>
<p class="MsoNormal"> printf(" /sys/fs/cgroup/memory/test1/memory.limit_in_bytes now contains %s \n",buf);<o:p></o:p></p>
<p class="MsoNormal"> ret = !strcmp(buf, expected_limit);<o:p></o:p></p>
<p class="MsoNormal">err:<o:p></o:p></p>
<p class="MsoNormal"> fclose(f);<o:p></o:p></p>
<p class="MsoNormal"> return ret;<o:p></o:p></p>
<p class="MsoNormal">}<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">int main(int argc, char **argv)<o:p></o:p></p>
<p class="MsoNormal">{<o:p></o:p></p>
<p class="MsoNormal"> libct_session_t s;<o:p></o:p></p>
<p class="MsoNormal"> ct_handler_t ct;<o:p></o:p></p>
<p class="MsoNormal"> ct_process_desc_t p;<o:p></o:p></p>
<p class="MsoNormal"> int ret = 0;<o:p></o:p></p>
<p class="MsoNormal"> int state = 0;<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"> s = libct_session_open_local();<o:p></o:p></p>
<p class="MsoNormal"> ct = libct_container_create(s, "test1");<o:p></o:p></p>
<p class="MsoNormal"> p = libct_process_desc_create(s);<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"> libct_controller_add(ct, CTL_MEMORY);<o:p></o:p></p>
<p class="MsoNormal"> ret = libct_controller_configure(ct, CTL_MEMORY, "memory.limit_in_bytes", MEMLIMIT_STR);<o:p></o:p></p>
<p class="MsoNormal"> ret = libct_controller_configure(ct, CTL_MEMORY, "memory.memsw.limit_in_bytes", MEMLIMIT_STR);<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"> char *stress_a[8];<o:p></o:p></p>
<p class="MsoNormal"> int ret_pid = 0;<o:p></o:p></p>
<p class="MsoNormal"> stress_a[0] = "/usr/bin/stress";<o:p></o:p></p>
<p class="MsoNormal"> stress_a[1] = "--vm";<o:p></o:p></p>
<p class="MsoNormal"> stress_a[2] = "1";<o:p></o:p></p>
<p class="MsoNormal"> stress_a[3] = "--vm-bytes";<o:p></o:p></p>
<p class="MsoNormal"> stress_a[4] = STRESS_MEM_STR;<o:p></o:p></p>
<p class="MsoNormal"> stress_a[5] = "--vm-hang";<o:p></o:p></p>
<p class="MsoNormal"> stress_a[6] = "0";<o:p></o:p></p>
<p class="MsoNormal"> stress_a[7]= NULL;<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"> ret_pid = libct_container_spawn_execv(ct,p, "/usr/bin/stress",stress_a);<o:p></o:p></p>
<p class="MsoNormal"> printf("\n libct_container_spawn_execv returned %d \n", ret_pid);<o:p></o:p></p>
<p class="MsoNormal"> if (ret_pid <= 0 )<o:p></o:p></p>
<p class="MsoNormal"> return fail("Can't spawn stress program in container");<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal" style="text-indent:.5in">state = libct_container_state(ct);<o:p></o:p></p>
<p class="MsoNormal" style="text-indent:.5in">printf("\n After spawn_exec state of the container is %d \n",state);<o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal"> if (!is_memory_limit_correct(MEMLIMIT_STR))<o:p></o:p></p>
<p class="MsoNormal"> return fail("Memory settings dont match to the expected value");<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"> if (libct_container_wait(ct) < 0)<o:p></o:p></p>
<p class="MsoNormal"> goto err;<o:p></o:p></p>
<p class="MsoNormal"> libct_container_destroy(ct);<o:p></o:p></p>
<p class="MsoNormal"> libct_session_close(s);<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"> return pass("Memory limited CT is OK");<o:p></o:p></p>
<p class="MsoNormal">err:<o:p></o:p></p>
<p class="MsoNormal"> return fail("Something wrong");<o:p></o:p></p>
<p class="MsoNormal">}<o:p></o:p></p>
</div>
</body>
</html>