<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
</head>
<body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;" class="">
Hi All,
<div class=""><br class="">
</div>
<div class="">We had 3 local GPFS filesystems on our cluster \u2026 let\u2019s call them gpfs0, gpfs1, and gpfs2. &nbsp;gpfs0 is for project space (i.e. groups can buy quota in 1 TB increments there). &nbsp;gpfs1 is scratch and gpfs2 is home.</div>
<div class=""><br class="">
</div>
<div class="">We are combining gpfs0 and gpfs1 into one new filesystem (gpfs3) \u2026 we\u2019re doing this for multiple reasons that aren\u2019t really pertinent to my question here, but suffice it to say I have discussed our plan with some of IBM\u2019s GPFS people and they
 agree that it\u2019s the thing for us to do.</div>
<div class=""><br class="">
</div>
<div class="">gpfs3 will have a scratch fileset with no fileset quota, but user and group quotas (just like the gpfs1 filesystem currently has). &nbsp;We will also move all the filesets from gpfs0 over to gpfs3 - those use fileset quotas only - no user or group
 quotas.</div>
<div class=""><br class="">
</div>
<div class="">I have created the new gpfs3 filesystem, the scratch fileset within it, and one of the project filesets coming over from gpfs0. &nbsp;I\u2019ve also moved my scratch directory to the gpfs3 scratch fileset. &nbsp;When I run mmlsquota I see (please note, I\u2019ve
 changed names of things to protect the guilty):</div>
<div class=""><br class="">
</div>
<div class="">
<div class="">kevin@gateway: mmlsquota -u kevin --block-size auto</div>
<div class="">&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;Block Limits &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;| &nbsp; &nbsp; File Limits</div>
<div class="">Filesystem type &nbsp; &nbsp; &nbsp; &nbsp; blocks &nbsp; &nbsp; &nbsp;quota &nbsp; &nbsp; &nbsp;limit &nbsp; in_doubt &nbsp; &nbsp;grace | &nbsp; &nbsp;files &nbsp; quota &nbsp; &nbsp;limit in_doubt &nbsp; &nbsp;grace &nbsp;Remarks</div>
<div class="">gpfs0 &nbsp; &nbsp; USR &nbsp; &nbsp; &nbsp; &nbsp; no limits &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;</div>
<div class=""><br class="">
</div>
<div class="">&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;Block Limits &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;| &nbsp; &nbsp; File Limits</div>
<div class="">Filesystem type &nbsp; &nbsp; &nbsp; &nbsp; blocks &nbsp; &nbsp; &nbsp;quota &nbsp; &nbsp; &nbsp;limit &nbsp; in_doubt &nbsp; &nbsp;grace | &nbsp; &nbsp;files &nbsp; quota &nbsp; &nbsp;limit in_doubt &nbsp; &nbsp;grace &nbsp;Remarks</div>
<div class="">gpfs1 &nbsp; &nbsp; USR &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;2.008G &nbsp; &nbsp; &nbsp; &nbsp;50G &nbsp; &nbsp; &nbsp; 200G &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; none | &nbsp; &nbsp; &nbsp; &nbsp;3 &nbsp;100000 &nbsp;1000000 &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; none&nbsp;</div>
<div class=""><br class="">
</div>
<div class="">&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;Block Limits &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;| &nbsp; &nbsp; File Limits</div>
<div class="">Filesystem type &nbsp; &nbsp; &nbsp; &nbsp; blocks &nbsp; &nbsp; &nbsp;quota &nbsp; &nbsp; &nbsp;limit &nbsp; in_doubt &nbsp; &nbsp;grace | &nbsp; &nbsp;files &nbsp; quota &nbsp; &nbsp;limit in_doubt &nbsp; &nbsp;grace &nbsp;Remarks</div>
<div class="">gpfs2 &nbsp; &nbsp; USR &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;11.69G &nbsp; &nbsp; &nbsp; &nbsp;25G &nbsp; &nbsp; &nbsp; &nbsp;35G &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; none | &nbsp; &nbsp; 8453 &nbsp;100000 &nbsp; 200000 &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; none&nbsp;</div>
<div class=""><br class="">
</div>
<div class="">&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;Block Limits &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; | &nbsp; &nbsp; File Limits</div>
<div class="">Filesystem Fileset &nbsp; &nbsp;type &nbsp; &nbsp; &nbsp; &nbsp; blocks &nbsp; &nbsp; &nbsp;quota &nbsp; &nbsp; &nbsp;limit &nbsp; in_doubt &nbsp; &nbsp;grace | &nbsp; &nbsp;files &nbsp; quota &nbsp; &nbsp;limit in_doubt &nbsp; &nbsp;grace &nbsp;Remarks</div>
<div class="">gpfs3 &nbsp; &nbsp; root &nbsp; &nbsp; &nbsp; USR &nbsp; &nbsp; &nbsp; &nbsp; no limits &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;</div>
<div class="">gpfs3 &nbsp; &nbsp; scratch &nbsp; &nbsp;USR &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;31.04G &nbsp; &nbsp; &nbsp; &nbsp;50G &nbsp; &nbsp; &nbsp; 200G &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; none | &nbsp; &nbsp; 2134 &nbsp;200000 &nbsp;1000000 &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; none&nbsp;</div>
<div class="">gpfs3 &nbsp; &nbsp; fakegroup &nbsp;USR &nbsp; &nbsp; &nbsp; &nbsp; no limits &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;</div>
<div class="">kevin@gateway:</div>
<div class=""><br class="">
</div>
<div class="">My question is this \u2026 why am I seeing the \u201croot\u201d and \u201cfakegroup\u201d filesets listed in the output for gpfs3? &nbsp;They don\u2019t show up for gpfs0 and the also exist there.</div>
<div class=""><br class="">
</div>
<div class="">Is it possibly because there are no user quotas whatsoever for gpfs0 and there are user quotas on the gpfs3:scratch fileset? &nbsp;If so, that still doesn\u2019t make sense as to why mmlsquota would think it needs to show the filesets within that filesystem
 that don\u2019t have user quotas. &nbsp;In fact, we don\u2019t *want* that to happen, as we have certain groups that deal with various types of restricted data and we\u2019d prefer that their existence not be advertised to everyone on the cluster.</div>
<div class=""><br class="">
</div>
<div class="">Oh, we\u2019re still in the process of upgrading clients on our cluster, but this output is from a client running 4.2.2.1, in case that matters. &nbsp;Thanks all...</div>
<div class="">
<div class="">\u2014</div>
<div class="">Kevin Buterbaugh - Senior System Administrator</div>
<div class="">Vanderbilt University - Advanced Computing Center for Research and Education</div>
<div class=""><a href="mailto:Kevin.Buterbaugh@vanderbilt.edu" class="">Kevin.Buterbaugh@vanderbilt.edu</a>&nbsp;- (615)875-9633</div>
<div class=""><br class="">
</div>
<br class="Apple-interchange-newline">
</div>
<br class="">
</div>
</body>
</html>