<font size=2 face="sans-serif">Hi Atmane, </font><br><br><font size=2 face="sans-serif">There can be two meaning of available
free space?</font><br><font size=2 face="sans-serif">One what is available on existing filesystem.
For this you rightly referred to df -h command o/p. This is the actual
free space available in already created filesystem.</font><br><br><tt><font size=2>Filesystem &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
Size &nbsp;Used Avail Use% Mounted on<br><br>/dev/gpfs1 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;49T &nbsp; 18T
&nbsp; 31T &nbsp;38% /gpfs1<br>/dev/gpfs2 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;53T &nbsp; 13T
&nbsp; 40T &nbsp;25% /gpfs2<br>/dev/gpfs3 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;25T &nbsp;4.9T
&nbsp; 20T &nbsp;21% /gpfs3<br>/dev/gpfs4 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;11T &nbsp;133M
&nbsp; 11T &nbsp; 1% /gpfs4<br>/dev/gpfs5 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 323T &nbsp; 34T &nbsp;290T
&nbsp;11% /gpfs5<br></font></tt><br><font size=2 face="sans-serif">The other is free space available in
DA. For which as every one said use mmlsrecoverygroup &lt;recovery group
name&gt; -L</font><br><font size=2 face="sans-serif">Please note that is will give you raw
free capacity. For usable free capacity in DA you have to add RAID over
head.</font><br><font size=2 face="sans-serif">But based on your o/p you have very
little/no free space left in DA. </font><br><br><tt><font size=2>[root@server1 ~]#mmlsrecoverygroup<br><br> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;declustered<br> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;arrays
with<br>recovery group &nbsp; &nbsp; &nbsp; &nbsp;vdisks &nbsp; &nbsp; vdisks &nbsp;servers<br>------------------ &nbsp;----------- &nbsp;------ &nbsp;-------<br>BB1RGL &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp;3 &nbsp; &nbsp; &nbsp;18 &nbsp;server1,server2<br>BB1RGR &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp;3 &nbsp; &nbsp; &nbsp;18 &nbsp;server2,server1<br>--------------------------------------------------------------<br>[root@server ~]# mmlsrecoverygroup BB1RGL -L<br><br> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; declustered<br>recovery group &nbsp; &nbsp; &nbsp; arrays &nbsp; &nbsp; vdisks &nbsp;pdisks
&nbsp;format version<br>----------------- &nbsp;----------- &nbsp;------ &nbsp;------ &nbsp;--------------<br>BB1RGL &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; 3 &nbsp; &nbsp; &nbsp;18 &nbsp; &nbsp; 119 &nbsp;4.2.0.1<br><br>declustered &nbsp; needs &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;replace &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;scrub &nbsp; &nbsp; &nbsp; background
activity<br> &nbsp; array &nbsp; &nbsp; service &nbsp;vdisks &nbsp;pdisks &nbsp;spares
&nbsp;threshold &nbsp;free space &nbsp;duration &nbsp;task &nbsp; progress
&nbsp;priority<br>----------- &nbsp;------- &nbsp;------ &nbsp;------ &nbsp;------ &nbsp;---------
&nbsp;---------- &nbsp;-------- &nbsp;-------------------------<br>LOG &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;no &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;1 &nbsp; &nbsp; &nbsp; 3 &nbsp; &nbsp; 0,0 &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;1 &nbsp; &nbsp; 558 GiB &nbsp; 14 days &nbsp;scrub &nbsp; &nbsp;
&nbsp; 51% &nbsp;low<br>DA1 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;no &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
11 &nbsp; &nbsp; &nbsp;58 &nbsp; &nbsp;2,31 &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;2 &nbsp; &nbsp; &nbsp;12 GiB &nbsp; 14 days &nbsp;scrub &nbsp; &nbsp;
&nbsp; 78% &nbsp;low<br>DA2 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;no &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;6 &nbsp; &nbsp; &nbsp;58 &nbsp; &nbsp;2,31 &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;2 &nbsp; &nbsp;4096 MiB &nbsp; 14 days &nbsp;scrub &nbsp; &nbsp;
&nbsp; 10% &nbsp;low<br></font></tt><br><br><font size=2 face="sans-serif">Thanks,<br><br>Sandeep Naik<br>Elastic Storage server / GPFS Test <br>ETZ-B, Hinjewadi Pune India<br>(+91) 8600994314</font><br><br><br><br><br><font size=1 color=#5f5f5f face="sans-serif">From: &nbsp; &nbsp; &nbsp;
&nbsp;</font><font size=1 face="sans-serif">&quot;Kumaran Rajaram&quot;
&lt;kums@us.ibm.com&gt;</font><br><font size=1 color=#5f5f5f face="sans-serif">To: &nbsp; &nbsp; &nbsp;
&nbsp;</font><font size=1 face="sans-serif">gpfsug main discussion
list &lt;gpfsug-discuss@spectrumscale.org&gt;, atmane &nbsp; &nbsp; &nbsp;
&nbsp;khiredine &lt;a.khiredine@meteo.dz&gt;</font><br><font size=1 color=#5f5f5f face="sans-serif">Date: &nbsp; &nbsp; &nbsp;
&nbsp;</font><font size=1 face="sans-serif">09/07/2017 10:22 PM</font><br><font size=1 color=#5f5f5f face="sans-serif">Subject: &nbsp; &nbsp;
&nbsp; &nbsp;</font><font size=1 face="sans-serif">Re: [gpfsug-discuss]
get free space in GSS</font><br><font size=1 color=#5f5f5f face="sans-serif">Sent by: &nbsp; &nbsp;
&nbsp; &nbsp;</font><font size=1 face="sans-serif">gpfsug-discuss-bounces@spectrumscale.org</font><br><hr noshade><br><br><br><font size=2 face="Arial">Hi Atmane,</font><font size=3><br></font><font size=2 color=red face="Arial"><br>&gt;&gt; I can not find the free space</font><font size=3><br></font><font size=2 face="Arial"><br>Based on your output below, your setup currently has two recovery groups
BB1RGL and BB1RGR.</font><font size=3><br></font><font size=2 face="Arial"><br>Issue &quot;</font><font size=2 color=blue face="Arial"><i>mmlsrecoverygroup
BB1RGL -L</i></font><font size=2 face="Arial">&quot; and &quot;</font><font size=2 color=blue face="Arial"><i>mmlsrecoverygroup
BB1RGR -L</i></font><font size=2 face="Arial">&quot; to obtain free space
in each DA.</font><font size=3><br></font><font size=2 face="Arial"><br>Based on your &quot;</font><font size=2 color=blue face="Arial"><i>mmlsrecoverygroup
BB1RGL -L</i></font><font size=2 face="Arial">&quot; output below, BB1RGL
&quot;DA1&quot; has 12GiB and &quot;DA2&quot; has 4GiB free space. The
metadataOnly and dataOnly vdisk/NSD are created from DA1 and DA2. </font><font size=3><br></font><font size=2 color=blue face="Arial"><i><br> declustered &nbsp; needs &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;replace &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;scrub &nbsp; &nbsp; &nbsp; background
activity<br> &nbsp; array &nbsp; &nbsp; service &nbsp;vdisks &nbsp;pdisks &nbsp;spares
&nbsp;threshold &nbsp;free space &nbsp;duration &nbsp;task &nbsp; progress
&nbsp;priority<br>----------- &nbsp;------- &nbsp;------ &nbsp;------ &nbsp;------ &nbsp;---------
&nbsp;---------- &nbsp;-------- &nbsp;-------------------------<br>LOG &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;no &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;1 &nbsp; &nbsp; &nbsp; 3 &nbsp; &nbsp; 0,0 &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;1 &nbsp; &nbsp; 558 GiB &nbsp; 14 days &nbsp;scrub &nbsp; &nbsp;
&nbsp; 51% &nbsp;low<br>DA1 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;no &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
11 &nbsp; &nbsp; &nbsp;58 &nbsp; &nbsp;2,31 &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;2 &nbsp; &nbsp; &nbsp;12 GiB &nbsp; 14 days &nbsp;scrub &nbsp; &nbsp;
&nbsp; 78% &nbsp;low<br>DA2 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;no &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;6 &nbsp; &nbsp; &nbsp;58 &nbsp; &nbsp;2,31 &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;2 &nbsp; &nbsp;4096 MiB &nbsp; 14 days &nbsp;scrub &nbsp; &nbsp;
&nbsp; 10% &nbsp;low</i></font><font size=3><br></font><font size=2 face="Arial"><br>In addition, you may use &quot;</font><font size=2 color=blue face="Arial"><i>mmlsnsd</i></font><font size=2 face="Arial">&quot;
to obtain mapping of file-system to vdisk/NSD + use &quot;</font><font size=2 color=blue face="Arial"><i>mmdf
&lt;fs&gt;</i></font><font size=2 face="Arial">&quot; command to query
user or available capacity on a GPFS file system.</font><font size=3><br></font><font size=2 face="Arial"><br>Hope this helps,<br>-Kums</font><font size=3><br><br><br><br><br></font><font size=1 color=#5f5f5f face="sans-serif"><br>From: &nbsp; &nbsp; &nbsp; &nbsp;</font><font size=1 face="sans-serif">atmane
khiredine &lt;a.khiredine@meteo.dz&gt;</font><font size=1 color=#5f5f5f face="sans-serif"><br>To: &nbsp; &nbsp; &nbsp; &nbsp;</font><font size=1 face="sans-serif">Laurence
Horrocks-Barlow &lt;laurence@qsplace.co.uk&gt;, &quot;gpfsug main &nbsp;
&nbsp; &nbsp; &nbsp;discussion list&quot; &lt;gpfsug-discuss@spectrumscale.org&gt;</font><font size=1 color=#5f5f5f face="sans-serif"><br>Date: &nbsp; &nbsp; &nbsp; &nbsp;</font><font size=1 face="sans-serif">07/09/2017
08:27 AM</font><font size=1 color=#5f5f5f face="sans-serif"><br>Subject: &nbsp; &nbsp; &nbsp; &nbsp;</font><font size=1 face="sans-serif">Re:
[gpfsug-discuss] get free space in GSS</font><font size=1 color=#5f5f5f face="sans-serif"><br>Sent by: &nbsp; &nbsp; &nbsp; &nbsp;</font><font size=1 face="sans-serif">gpfsug-discuss-bounces@spectrumscale.org</font><font size=3><br></font><hr noshade><font size=3><br><br></font><tt><font size=2><br>thank you very much for replying. I can not find the free space<br><br>Here is the output of mmlsrecoverygroup<br><br>[root@server1 ~]#mmlsrecoverygroup<br><br> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;declustered<br> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;arrays
with<br>recovery group &nbsp; &nbsp; &nbsp; &nbsp;vdisks &nbsp; &nbsp; vdisks &nbsp;servers<br>------------------ &nbsp;----------- &nbsp;------ &nbsp;-------<br>BB1RGL &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp;3 &nbsp; &nbsp; &nbsp;18 &nbsp;server1,server2<br>BB1RGR &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp;3 &nbsp; &nbsp; &nbsp;18 &nbsp;server2,server1<br>--------------------------------------------------------------<br>[root@server ~]# mmlsrecoverygroup BB1RGL -L<br><br> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; declustered<br>recovery group &nbsp; &nbsp; &nbsp; arrays &nbsp; &nbsp; vdisks &nbsp;pdisks
&nbsp;format version<br>----------------- &nbsp;----------- &nbsp;------ &nbsp;------ &nbsp;--------------<br>BB1RGL &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; 3 &nbsp; &nbsp; &nbsp;18 &nbsp; &nbsp; 119 &nbsp;4.2.0.1<br><br>declustered &nbsp; needs &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;replace &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;scrub &nbsp; &nbsp; &nbsp; background
activity<br> &nbsp; array &nbsp; &nbsp; service &nbsp;vdisks &nbsp;pdisks &nbsp;spares
&nbsp;threshold &nbsp;free space &nbsp;duration &nbsp;task &nbsp; progress
&nbsp;priority<br>----------- &nbsp;------- &nbsp;------ &nbsp;------ &nbsp;------ &nbsp;---------
&nbsp;---------- &nbsp;-------- &nbsp;-------------------------<br>LOG &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;no &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;1 &nbsp; &nbsp; &nbsp; 3 &nbsp; &nbsp; 0,0 &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;1 &nbsp; &nbsp; 558 GiB &nbsp; 14 days &nbsp;scrub &nbsp; &nbsp;
&nbsp; 51% &nbsp;low<br>DA1 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;no &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
11 &nbsp; &nbsp; &nbsp;58 &nbsp; &nbsp;2,31 &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;2 &nbsp; &nbsp; &nbsp;12 GiB &nbsp; 14 days &nbsp;scrub &nbsp; &nbsp;
&nbsp; 78% &nbsp;low<br>DA2 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;no &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;6 &nbsp; &nbsp; &nbsp;58 &nbsp; &nbsp;2,31 &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp;2 &nbsp; &nbsp;4096 MiB &nbsp; 14 days &nbsp;scrub &nbsp; &nbsp;
&nbsp; 10% &nbsp;low<br><br> &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;declustered
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; checksum<br>vdisk &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; RAID code &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;array &nbsp; &nbsp; vdisk size
&nbsp;block size &nbsp;granularity &nbsp;state remarks<br>------------------ &nbsp;------------------ &nbsp;----------- &nbsp;----------
&nbsp;---------- &nbsp;----------- &nbsp;----- -------<br>gss0_logtip &nbsp; &nbsp; &nbsp; &nbsp; 3WayReplication &nbsp; &nbsp; LOG
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 128 MiB &nbsp; &nbsp; &nbsp;1
MiB &nbsp; &nbsp; &nbsp; 512 &nbsp; &nbsp; &nbsp;ok &nbsp; &nbsp;logTip<br>gss0_loghome &nbsp; &nbsp; &nbsp; &nbsp;4WayReplication &nbsp; &nbsp; DA1
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;40 GiB &nbsp; &nbsp; &nbsp;1
MiB &nbsp; &nbsp; &nbsp; 512 &nbsp; &nbsp; &nbsp;ok &nbsp; &nbsp;log<br>BB1RGL_GPFS4_META1 &nbsp; &nbsp;4WayReplication &nbsp; &nbsp; DA1 &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 451 GiB &nbsp; &nbsp; &nbsp;1 MiB &nbsp;
&nbsp; 32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS4_DATA1 &nbsp; &nbsp;8+2p &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp;DA1 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;5133 GiB
&nbsp; &nbsp; &nbsp;1 MiB &nbsp; &nbsp; 32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS1_META1 &nbsp; &nbsp;4WayReplication &nbsp; &nbsp; DA1 &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 451 GiB &nbsp; &nbsp; &nbsp;1 MiB &nbsp;
&nbsp; 32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS1_DATA1 &nbsp; &nbsp;8+2p &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp;DA1 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;12
TiB &nbsp; &nbsp; &nbsp;1 MiB &nbsp; &nbsp; 32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS3_META1 &nbsp; 4WayReplication &nbsp; &nbsp; DA1 &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; 451 GiB &nbsp; &nbsp; &nbsp;1 MiB &nbsp; &nbsp;
32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS3_DATA1 &nbsp; 8+2p &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp;DA1 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;12 TiB
&nbsp; &nbsp; &nbsp;1 MiB &nbsp; &nbsp; 32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS2_META1 &nbsp; 4WayReplication &nbsp; &nbsp; DA1 &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; 451 GiB &nbsp; &nbsp; &nbsp;1 MiB &nbsp; &nbsp;
32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS2_DATA1 &nbsp; 8+2p &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp;DA1 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;13 TiB
&nbsp; &nbsp; &nbsp;2 MiB &nbsp; &nbsp; 32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS2_META2 &nbsp; 4WayReplication &nbsp; &nbsp; DA2 &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; 451 GiB &nbsp; &nbsp; &nbsp;1 MiB &nbsp; &nbsp;
32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS2_DATA2 &nbsp; 8+2p &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp;DA2 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;13 TiB
&nbsp; &nbsp; &nbsp;2 MiB &nbsp; &nbsp; 32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS1_META2 &nbsp; &nbsp;4WayReplication &nbsp; &nbsp; DA2 &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 451 GiB &nbsp; &nbsp; &nbsp;1 MiB &nbsp;
&nbsp; 32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS1_DATA2 &nbsp; &nbsp;8+2p &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp;DA2 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;12
TiB &nbsp; &nbsp; &nbsp;1 MiB &nbsp; &nbsp; 32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS5_META1 &nbsp; 4WayReplication &nbsp; &nbsp; DA1 &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; 750 GiB &nbsp; &nbsp; &nbsp;1 MiB &nbsp; &nbsp;
32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS5_DATA1 &nbsp; 8+2p &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp;DA1 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;70 TiB
&nbsp; &nbsp; 16 MiB &nbsp; &nbsp; 32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS5_META2 &nbsp; 4WayReplication &nbsp; &nbsp; DA2 &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; 750 GiB &nbsp; &nbsp; &nbsp;1 MiB &nbsp; &nbsp;
32 KiB &nbsp; &nbsp; ok<br>BB1RGL_GPFS5_DATA2 &nbsp; 8+2p &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp;DA2 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;90 TiB
&nbsp; &nbsp; 16 MiB &nbsp; &nbsp; 32 KiB &nbsp; &nbsp; ok<br><br>config data &nbsp; &nbsp; &nbsp; &nbsp; declustered array &nbsp; VCD spares
&nbsp; &nbsp; actual rebuild spare space &nbsp; &nbsp; &nbsp; &nbsp; remarks<br>------------------ &nbsp;------------------ &nbsp;------------- &nbsp;---------------------------------
&nbsp;----------------<br>rebuild space &nbsp; &nbsp; &nbsp; DA1 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; 31 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 34 pdisk<br>rebuild space &nbsp; &nbsp; &nbsp; DA2 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; 31 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 35 pdisk<br><br><br>config data &nbsp; &nbsp; &nbsp; &nbsp; max disk group fault tolerance
&nbsp; &nbsp; actual disk group fault tolerance &nbsp;remarks<br>------------------ &nbsp;--------------------------------- &nbsp;---------------------------------
&nbsp;----------------<br>rg descriptor &nbsp; &nbsp; &nbsp; 1 enclosure + 1 drawer &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; 1 enclosure + 1 drawer &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; limiting fault tolerance<br>system index &nbsp; &nbsp; &nbsp; &nbsp;2 enclosure &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;1 enclosure
+ 1 drawer &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; limited by rg descriptor<br><br>vdisk &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; max disk group fault
tolerance &nbsp; &nbsp; actual disk group fault tolerance &nbsp;remarks<br>------------------ &nbsp;--------------------------------- &nbsp;---------------------------------
&nbsp;----------------<br>gss0_logtip &nbsp; &nbsp; &nbsp; &nbsp; 2 enclosure &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;1 enclosure
+ 1 drawer &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; limited by rg descriptor<br>gss0_loghome &nbsp; &nbsp; &nbsp; &nbsp;1 enclosure + 1 drawer &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; 1 enclosure + 1 drawer<br>BB1RGL_GPFS4_META1 &nbsp; &nbsp;1 enclosure + 1 drawer &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; 1 enclosure + 1 drawer<br>BB1RGL_GPFS4_DATA1 &nbsp; &nbsp;2 drawer &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 2 drawer<br>BB1RGL_GPFS1_META1 &nbsp; &nbsp;1 enclosure + 1 drawer &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; 1 enclosure + 1 drawer<br>BB1RGL_GPFS1_DATA1 &nbsp; &nbsp;2 drawer &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 2 drawer<br>BB1RGL_GPFS3_META1 &nbsp; 1 enclosure + 1 drawer &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; 1 enclosure + 1 drawer<br>BB1RGL_GPFS3_DATA1 &nbsp; 2 drawer &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 2 drawer<br>BB1RGL_GPFS2_META1 &nbsp; 1 enclosure + 1 drawer &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; 1 enclosure + 1 drawer<br>BB1RGL_GPFS2_DATA1 &nbsp; 2 drawer &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 2 drawer<br>BB1RGL_GPFS2_META2 &nbsp; 3 enclosure &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;1 enclosure + 1 drawer
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; limited by rg descriptor<br>BB1RGL_GPFS2_DATA2 &nbsp; 2 drawer &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 2 drawer<br>BB1RGL_GPFS1_META2 &nbsp; &nbsp;3 enclosure &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;1 enclosure + 1
drawer &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; limited by rg descriptor<br>BB1RGL_GPFS1_DATA2 &nbsp; &nbsp;2 drawer &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 2 drawer<br>BB1RGL_GPFS5_META1 &nbsp; 1 enclosure + 1 drawer &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; 1 enclosure + 1 drawer<br>BB1RGL_GPFS5_DATA1 &nbsp; 2 drawer &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 2 drawer<br>BB1RGL_GPFS5_META2 &nbsp; 3 enclosure &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;1 enclosure + 1 drawer
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; limited by rg descriptor<br>BB1RGL_GPFS5_DATA2 &nbsp; 2 drawer &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 2 drawer<br><br>active recovery group server &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; servers<br>----------------------------------------------- &nbsp;-------<br>server1 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;
server1,server2<br><br><br>Atmane Khiredine<br>HPC System Administrator | Office National de la Mtorologie<br>Tl : +213 21 50 73 93 # 303 | Fax : +213 21 50 79 40 | E-mail : a.khiredine@meteo.dz<br>________________________________<br>De : Laurence Horrocks-Barlow [laurence@qsplace.co.uk]<br>Envoy : dimanche 9 juillet 2017 09:58<br> : gpfsug main discussion list; atmane khiredine; gpfsug-discuss@spectrumscale.org<br>Objet : Re: [gpfsug-discuss] get free space in GSS<br><br>You can check the recovery groups to see if there is any remaining space.<br><br>I don't have access to my test system to confirm the syntax however if
memory serves.<br><br>Run mmlsrecoverygroup to get a list of all the recovery groups then:<br><br>mmlsrecoverygroup &lt;YOURRECOVERYGROUP&gt; -L<br><br>This will list all your declustered arrays and their free space.<br><br>Their might be another method, however this way has always worked well
for me.<br><br>-- Lauz<br><br><br><br>On 9 July 2017 09:00:07 BST, Atmane &lt;a.khiredine@meteo.dz&gt; wrote:<br><br>Dear all,<br><br>My name is Khiredine Atmane and I am a HPC system administrator at the<br>National Office of Meteorology Algeria . We have a GSS24 running<br>gss2.5.10.3&lt;</font></tt><a href=http://2.5.10.3/><tt><font size=2 color=blue><u>http://2.5.10.3</u></font></tt></a><tt><font size=2>&gt;-3b
and gpfs-4.2.0.3&lt;</font></tt><a href=http://4.2.0.3/><tt><font size=2 color=blue><u>http://4.2.0.3</u></font></tt></a><tt><font size=2>&gt;.<br><br>GSS configuration: 4 enclosures, 6 SSDs, 1 empty slots, 239 disks total,
0<br>NVRAM partitions<br><br>disks = 3Tb<br>SSD = 200 Gb<br>df -h<br>Filesystem &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; Size &nbsp;Used Avail
Use% Mounted on<br><br>/dev/gpfs1 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;49T &nbsp; 18T
&nbsp; 31T &nbsp;38% /gpfs1<br>/dev/gpfs2 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;53T &nbsp; 13T
&nbsp; 40T &nbsp;25% /gpfs2<br>/dev/gpfs3 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;25T &nbsp;4.9T
&nbsp; 20T &nbsp;21% /gpfs3<br>/dev/gpfs4 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;11T &nbsp;133M
&nbsp; 11T &nbsp; 1% /gpfs4<br>/dev/gpfs5 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 323T &nbsp; 34T &nbsp;290T
&nbsp;11% /gpfs5<br><br>Total Is 461 To<br><br>I think we have more space<br>Could anyone make recommendation to troubleshoot find how many free space<br>in GSS ?<br>How to find the available space ?<br>Thank you!<br><br>Atmane<br><br><br><br>--<br>Sent from my Android device with K-9 Mail. Please excuse my brevity.<br>_______________________________________________<br>gpfsug-discuss mailing list<br>gpfsug-discuss at spectrumscale.org</font></tt><font size=3 color=blue><u><br></u></font><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss"><tt><font size=2 color=blue><u>http://gpfsug.org/mailman/listinfo/gpfsug-discuss</u></font></tt></a><tt><font size=2><br></font></tt><font size=3><br><br></font><tt><font size=2>_______________________________________________<br>gpfsug-discuss mailing list<br>gpfsug-discuss at spectrumscale.org<br></font></tt><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss"><tt><font size=2>http://gpfsug.org/mailman/listinfo/gpfsug-discuss</font></tt></a><tt><font size=2><br></font></tt><br><br><BR>