<html><body><div style="font-family: arial, helvetica, sans-serif; font-size: 12pt; color: #000000"><div>Dear,</div><div>&nbsp; &nbsp;Since this moning I have a couple of disk (7) in down state, I have tried to start them again but after that they change to unrecovered.</div><div>&nbsp; &nbsp;These "failed" disk are only DATA. Both pool Data and Metadata has two failures groups, and set replica to 2. The Metadata disks are in two different enclosures one for each filure group. The filesystem has been unmounted , but when i have tried to run the mmfsck told me the I should remove the down disk</div><div>&nbsp;</div><div>&nbsp; &nbsp;[root@gpfs06 ~]# mmlsdisk gpfs2 -L | grep -v up</div><div>disk&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;driver&nbsp; &nbsp;sector&nbsp; &nbsp; &nbsp;failure holds&nbsp; &nbsp; holds&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; storage</div><div>------------ -------- ------ ----------- -------- ----- ------------- ------------ ------- ------------ ---------</div><div>.....</div><div>nsd18jbod1&nbsp; &nbsp;nsd&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;512&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;2 No&nbsp; &nbsp; &nbsp; &nbsp;Yes&nbsp; &nbsp;to be emptied unrecovered&nbsp; &nbsp; &nbsp; &nbsp;26 data&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp;</div><div>nsd19jbod1&nbsp; &nbsp;nsd&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;512&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;2 No&nbsp; &nbsp; &nbsp; &nbsp;Yes&nbsp; &nbsp;ready&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;unrecovered&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 27 data&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp;</div><div>nsd19jbod2&nbsp; &nbsp;nsd&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;512&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;3 No&nbsp; &nbsp; &nbsp; &nbsp;Yes&nbsp; &nbsp;ready&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;down&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 46 data&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp;</div><div>nsd24jbod2&nbsp; &nbsp;nsd&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;512&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;3 No&nbsp; &nbsp; &nbsp; &nbsp;Yes&nbsp; &nbsp;ready&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;down&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 51 data&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp;</div><div>nsd57jbod1&nbsp; &nbsp;nsd&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;512&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;2 No&nbsp; &nbsp; &nbsp; &nbsp;Yes&nbsp; &nbsp;ready&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;down&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 109 data&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp;</div><div>nsd61jbod1&nbsp; &nbsp;nsd&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;512&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;2 No&nbsp; &nbsp; &nbsp; &nbsp;Yes&nbsp; &nbsp;ready&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;down&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;113 data&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp;</div><div>nsd71jbod1&nbsp; &nbsp;nsd&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;512&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;2 No&nbsp; &nbsp; &nbsp; &nbsp;Yes&nbsp; &nbsp;ready&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;down&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;123 data&nbsp; &nbsp; &nbsp;</div><div>.....</div><div><br data-mce-bogus="1"></div><div>Any help is welcomed.</div><div>Regards, I</div></div>
<br><br></body></html>