<html><head><meta http-equiv="Content-Type" content="text/html charset=utf-8"></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;" class="">The licensing model was my last point \u2014 if the OP uses FPO just to create data resiliency they increase their cost (or curtail their access).<div class=""><br class=""></div><div class="">I was really asking if there was a real, technical positive for using FPO in this example, as I could only come up with equivalences and negatives.<br class=""><div class=""><br class=""></div><div class=""><div class=""><div class="">
--&nbsp;<br class="">Stephen<br class=""><br class=""><br class="">

</div>
<br class=""><div><blockquote type="cite" class=""><div class="">On Nov 30, 2016, at 10:55 PM, Ken Hill &lt;<a href="mailto:kenh@us.ibm.com" class="">kenh@us.ibm.com</a>&gt; wrote:</div><br class="Apple-interchange-newline"><div class=""><font size="2" face="sans-serif" class="">Hello Stephen,</font><br class=""><br class=""><font size="2" face="sans-serif" class="">There are three licensing models for
Spectrum Scale | GPFS:</font><br class=""><br class=""><font size="2" face="sans-serif" class="">Server</font><br class=""><font size="2" face="sans-serif" class="">FPO</font><br class=""><font size="2" face="sans-serif" class="">Client</font><br class=""><br class=""><font size="2" face="sans-serif" class="">I think the thing you might be missing
is the associated cost per function. </font><br class=""><br class=""><font size="2" face="sans-serif" class="">Regards,</font><br class=""><br class=""><font size="3" color="#8f8f8f" face="Arial" class=""><b class="">Ken Hill</b></font><font size="2" face="Arial" class=""><br class="">Technical Sales Specialist | Software Defined Solution Sales<br class="">IBM Systems</font><p class=""><table width="776" style="border-collapse:collapse;" class=""><tbody class=""><tr height="8" class=""><td width="776" colspan="3" style="border-style:none none none none;border-color:#000000;border-width:0px 0px 0px 0px;padding:0px 0px;" class=""><hr class=""></td></tr><tr height="8" class=""><td width="159" style="border-style:none none none none;border-color:#000000;border-width:0px 0px 0px 0px;padding:0px 0px;" class=""><font size="1" color="#4181c0" face="Arial" class=""><b class="">Phone:</b></font><font size="3" face="Arial" class=""></font><font size="1" face="Arial" class="">1-540-207-7270</font><font size="1" color="#4181c0" face="Arial" class=""><b class=""><br class="">E-mail:</b></font><font size="3" face="Arial" class=""> </font><a href="mailto:kenh@us.ibm.com" target="_blank" class=""><font size="1" color="#5f5f5f" face="Arial" class=""><u class="">kenh@us.ibm.com</u></font></a></td><td width="616" style="border-style:none none none none;border-color:#000000;border-width:0px 0px 0px 0px;padding:0px 0px;" class=""><div align="right" class=""><a href="http://www.ibm.com/us-en/" class=""><span id="cid:_4_C5F22620C5F220700015917C8525807C">&lt;Mail Attachment.png&gt;</span></a><font size="3" class="">&nbsp;
</font><a href="http://www-03.ibm.com/systems/platformcomputing/products/lsf/" class=""><span id="cid:_4_C5F22A3CC5F220700015917C8525807C">&lt;Mail Attachment.png&gt;</span></a><font size="3" class="">&nbsp;
</font><a href="http://www-03.ibm.com/systems/platformcomputing/products/high-performance-services/index.html" class=""><span id="cid:_4_C5F22EB4C5F220700015917C8525807C">&lt;Mail Attachment.png&gt;</span></a><font size="3" class="">&nbsp;
</font><a href="http://www-03.ibm.com/systems/platformcomputing/products/symphony/index.html" class=""><span id="cid:_4_C5F2332CC5F220700015917C8525807C">&lt;Mail Attachment.png&gt;</span></a><font size="3" class="">&nbsp;
</font><a href="http://www-03.ibm.com/systems/storage/spectrum/" class=""><span id="cid:_4_C5F237A4C5F220700015917C8525807C">&lt;Mail Attachment.png&gt;</span></a><font size="3" class="">&nbsp;
</font><a href="http://www-01.ibm.com/software/tivoli/csi/cloud-storage/" class=""><span id="cid:_4_C5F23C1CC5F220700015917C8525807C">&lt;Mail Attachment.png&gt;</span></a><font size="3" class="">&nbsp;
</font><a href="http://www-01.ibm.com/software/tivoli/csi/backup-recovery/" class=""><span id="cid:_4_C5F24094C5F220700015917C8525807C">&lt;Mail Attachment.png&gt;</span></a><font size="3" class="">&nbsp;
</font><a href="http://www-03.ibm.com/systems/storage/tape/ltfs/index.html" class=""><span id="cid:_4_C5F2450CC5F220700015917C8525807C">&lt;Mail Attachment.png&gt;</span></a><font size="3" class="">&nbsp;
</font><a href="http://www-03.ibm.com/systems/storage/spectrum/" class=""><span id="cid:_4_C5F24984C5F220700015917C8525807C">&lt;Mail Attachment.png&gt;</span></a><font size="3" class="">&nbsp;
</font><a href="http://www-03.ibm.com/systems/storage/spectrum/scale/" class=""><span id="cid:_4_C5F24DFCC5F220700015917C8525807C">&lt;Mail Attachment.png&gt;</span></a><font size="3" class="">&nbsp;
</font><a href="https://www.ibm.com/marketplace/cloud/object-storage/us/en-us" class=""><span id="cid:_4_C5F25274C5F220700015917C8525807C">&lt;Mail Attachment.png&gt;</span></a><font size="3" class="">&nbsp;
<br class=""></font><font size="1" face="Arial" class=""><br class="">2300 Dulles Station Blvd<br class="">Herndon, VA 20171-6133<br class="">United States</font></div></td><td width="6" valign="top" style="border-style:none none none none;border-color:#000000;border-width:0px 0px 0px 0px;padding:0px 0px;" class=""></td></tr></tbody></table><br class=""><br class=""><br class=""><br class=""><br class=""><font size="1" color="#5f5f5f" face="sans-serif" class="">From: &nbsp; &nbsp; &nbsp;
&nbsp;</font><font size="1" face="sans-serif" class="">Stephen Ulmer &lt;<a href="mailto:ulmer@ulmer.org" class="">ulmer@ulmer.org</a>&gt;</font><br class=""><font size="1" color="#5f5f5f" face="sans-serif" class="">To: &nbsp; &nbsp; &nbsp;
&nbsp;</font><font size="1" face="sans-serif" class="">gpfsug main discussion
list &lt;<a href="mailto:gpfsug-discuss@spectrumscale.org" class="">gpfsug-discuss@spectrumscale.org</a>&gt;</font><br class=""><font size="1" color="#5f5f5f" face="sans-serif" class="">Date: &nbsp; &nbsp; &nbsp;
&nbsp;</font><font size="1" face="sans-serif" class="">11/30/2016 09:46 PM</font><br class=""><font size="1" color="#5f5f5f" face="sans-serif" class="">Subject: &nbsp; &nbsp;
&nbsp; &nbsp;</font><font size="1" face="sans-serif" class="">Re: [gpfsug-discuss]
Strategies - servers with local SAS disks</font><br class=""><font size="1" color="#5f5f5f" face="sans-serif" class="">Sent by: &nbsp; &nbsp;
&nbsp; &nbsp;</font><font size="1" face="sans-serif" class=""><a href="mailto:gpfsug-discuss-bounces@spectrumscale.org" class="">gpfsug-discuss-bounces@spectrumscale.org</a></font><br class=""></p><hr noshade="" class=""><br class=""><br class=""><br class=""><font size="3" class="">I don\u2019t understand what FPO provides here that mirroring
doesn\u2019t:</font><ul class=""><li class=""><font size="3" class="">You can still use failure domains \u2014 one for each node.</font></li><li class=""><font size="3" class="">Both still have redundancy for the data; you can lose
a disk or a node.</font></li><li class=""><font size="3" class="">The data has to be re-striped in the event of a disk failure
\u2014 no matter what.</font></li></ul><br class=""><font size="3" class="">Also, the FPO license doesn\u2019t allow for regular clients
to access the data -- only server and FPO nodes.</font><br class=""><br class=""><font size="3" class="">What am I missing?</font><br class=""><br class=""><font size="3" class="">Liberty,</font><br class=""><br class=""><font size="3" class="">-- </font><br class=""><font size="3" class="">Stephen<br class=""><br class=""></font><br class=""><br class=""><font size="3" class="">On Nov 30, 2016, at 3:51 PM, Andrew Beattie &lt;</font><a href="mailto:abeattie@au1.ibm.com" class=""><font size="3" color="blue" class=""><u class="">abeattie@au1.ibm.com</u></font></a><font size="3" class="">&gt;
wrote:</font><br class=""><br class=""><font size="2" face="Arial" class="">Bob,</font><br class=""><font size="2" face="Arial" class="">&nbsp;</font><br class=""><font size="2" face="Arial" class="">If your not going to use integrated Raid
controllers in the servers, then FPO would seem to be the most resilient
scenario.</font><br class=""><font size="2" face="Arial" class="">yes it has its own overheads, but with that
many drives to manage, a JOBD architecture and manual restriping doesn't
sound like fun</font><br class=""><font size="2" face="Arial" class="">&nbsp;</font><br class=""><font size="2" face="Arial" class="">If you are going down the path of integrated
raid controllers then any form of distributed raid is probably the best
scenario, Raid 6 obviously.</font><br class=""><font size="2" face="Arial" class="">&nbsp;</font><br class=""><font size="2" face="Arial" class="">How many Nodes are you planning on building?
&nbsp;The more nodes the more value FPO is likely to bring as you can be
more specific in how the data is written to the nodes.</font><br class=""><font size="2" face="Arial" class="">&nbsp;</font><br class=""><font size="3" color="#80803f" face="Arial" class=""><b class="">Andrew Beattie</b></font><br class=""><font size="2" face="Arial" class=""><b class="">Software Defined Storage &nbsp;- IT Specialist</b></font><br class=""><font size="1" color="#3f8080" face="Arial" class=""><b class="">Phone: </b></font><font size="1" face="Arial" class="">614-2133-7927</font><br class=""><font size="1" color="#3f8080" face="Arial" class=""><b class="">E-mail: </b></font><a href="mailto:abeattie@au1.ibm.com" class=""><font size="1" color="#4f4f4f" face="Arial" class=""><u class="">abeattie@au1.ibm.com</u></font></a><br class=""><font size="2" face="Arial" class="">&nbsp;</font><br class=""><font size="2" face="Arial" class="">&nbsp;</font><br class=""><font size="2" face="Arial" class="">----- Original message -----<br class="">From: "Oesterlin, Robert" &lt;</font><a href="mailto:Robert.Oesterlin@nuance.com" class=""><font size="2" color="blue" face="Arial" class=""><u class="">Robert.Oesterlin@nuance.com</u></font></a><font size="2" face="Arial" class="">&gt;<br class="">Sent by: </font><a href="mailto:gpfsug-discuss-bounces@spectrumscale.org" class=""><font size="2" color="blue" face="Arial" class=""><u class="">gpfsug-discuss-bounces@spectrumscale.org</u></font></a><font size="2" face="Arial" class=""><br class="">To: gpfsug main discussion list &lt;</font><a href="mailto:gpfsug-discuss@spectrumscale.org" class=""><font size="2" color="blue" face="Arial" class=""><u class="">gpfsug-discuss@spectrumscale.org</u></font></a><font size="2" face="Arial" class="">&gt;<br class="">Cc:<br class="">Subject: [gpfsug-discuss] Strategies - servers with local SAS disks<br class="">Date: Thu, Dec 1, 2016 12:34 AM<br class=""> </font><p class=""><font size="2" face="Arial" class="">Looking for feedback/strategies in setting
up several GPFS servers with local SAS. They would all be part of the same
file system. The systems are all similar in configuration - 70 4TB drives.
</font></p><div class=""><font size="2" face="Arial" class="">&nbsp;</font><br class="webkit-block-placeholder"></div><p class=""><font size="2" face="Arial" class="">Options I\u2019m considering:</font></p><div class=""><font size="2" face="Arial" class="">&nbsp;</font><br class="webkit-block-placeholder"></div><p class=""><font size="2" face="Arial" class="">- Create RAID arrays of the disks on each
server (worried about the RAID rebuild time when a drive fails with 4,
6, 8TB drives)</font></p><p class=""><font size="2" face="Arial" class="">- No RAID with 2 replicas, single drive per
NSD. When a drive fails, recreate the NSD \u2013 but then I need to fix up
the data replication via restripe</font></p><p class=""><font size="2" face="Arial" class="">- FPO \u2013 with multiple failure groups - &nbsp;letting
the system manage replica placement and then have GPFS due the restripe
on disk failure automatically</font></p><div class=""><font size="2" face="Arial" class="">&nbsp;</font><br class="webkit-block-placeholder"></div><p class=""><font size="2" face="Arial" class="">Comments or other ideas welcome.</font></p><div class=""><font size="2" face="Arial" class="">&nbsp;</font><br class="webkit-block-placeholder"></div><p class=""><font size="2" face="Arial" class="">Bob Oesterlin<br class="">Sr Principal Storage Engineer, Nuance<br class="">507-269-0413</font></p><div class=""><font size="2" face="Times New Roman" class="">&nbsp;</font><br class="webkit-block-placeholder"></div><div class=""><font size="2" face="Arial" class="">&nbsp;</font><br class="webkit-block-placeholder"></div><p class=""><tt class=""><font size="2" class="">_______________________________________________<br class="">gpfsug-discuss mailing list<br class="">gpfsug-discuss at </font></tt><a href="http://spectrumscale.org/" class=""><tt class=""><font size="2" color="blue" class=""><u class="">spectrumscale.org</u></font></tt></a><tt class=""><font size="2" color="blue" class=""><u class=""><br class=""></u></font></tt><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" target="_blank" class=""><tt class=""><font size="2" color="blue" class=""><u class="">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</u></font></tt></a><br class=""><font size="2" face="Arial" class="">&nbsp;</font><br class=""><font size="3" class=""><br class="">_______________________________________________<br class="">gpfsug-discuss mailing list<br class="">gpfsug-discuss at </font><a href="http://spectrumscale.org/" class=""><font size="3" color="blue" class=""><u class="">spectrumscale.org</u></font></a><font size="3" color="blue" class=""><u class=""><br class=""></u></font><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" class=""><font size="3" color="blue" class=""><u class="">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</u></font></a><br class=""><tt class=""><font size="2" class="">_______________________________________________<br class="">gpfsug-discuss mailing list<br class="">gpfsug-discuss at <a href="http://spectrumscale.org" class="">spectrumscale.org</a><br class=""></font></tt><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" class=""><tt class=""><font size="2" class="">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</font></tt></a><tt class=""><font size="2" class=""><br class=""></font></tt><br class=""><br class=""><br class="">
_______________________________________________<br class="">gpfsug-discuss mailing list<br class="">gpfsug-discuss at <a href="http://spectrumscale.org" class="">spectrumscale.org</a><br class=""><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss" class="">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</a><br class=""></p></div></blockquote></div><br class=""></div></div></div></body></html>