<html><body><p><font size="2" face="sans-serif">Thanks Stephan.</font><br><font size="2" face="sans-serif">This will be looked into and accordingly prioritized by the offering manager team. Incase the IBM team has any further questions on this then we will get back to you.</font><br><br><font size="2" face="sans-serif">Regards, The Spectrum Scale (GPFS) team<br><br>------------------------------------------------------------------------------------------------------------------<br>If you feel that your question can benefit other users of &nbsp;Spectrum Scale (GPFS), then please post it to the public IBM developerWroks Forum at <a href="https://www.ibm.com/developerworks/community/forums/html/forum?id=11111111-0000-0000-0000-000000000479">https://www.ibm.com/developerworks/community/forums/html/forum?id=11111111-0000-0000-0000-000000000479</a>. <br><br>If your query concerns a potential software error in Spectrum Scale (GPFS) and you have an IBM software maintenance contract please contact &nbsp;1-800-237-5511 in the United States or your local IBM Service Center in other countries. <br><br>The forum is informally monitored as time permits and should not be used for priority messages to the Spectrum Scale (GPFS) team.</font><br><br><img width="16" height="16" src="cid:1__=0ABB02CFDFF542A98f9e8a93df938690@ibm.com" border="0" alt="Inactive hide details for &quot;Stephan Graf&quot; ---09-06-2022 11.31.01 AM---Hi, I have create an IDEA for it:"><font size="2" color="#424282" face="sans-serif">&quot;Stephan Graf&quot; ---09-06-2022 11.31.01 AM---Hi, I have create an IDEA for it:</font><br><br><font size="1" color="#5F5F5F" face="sans-serif">From:        </font><font size="1" face="sans-serif">&quot;Stephan Graf&quot; &lt;st.graf@fz-juelich.de&gt;</font><br><font size="1" color="#5F5F5F" face="sans-serif">To:        </font><font size="1" face="sans-serif">&lt;gpfsug-discuss@gpfsug.org&gt;</font><br><font size="1" color="#5F5F5F" face="sans-serif">Date:        </font><font size="1" face="sans-serif">09-06-2022 11.31 AM</font><br><font size="1" color="#5F5F5F" face="sans-serif">Subject:        </font><font size="1" face="sans-serif">[EXTERNAL] Re: [gpfsug-discuss] Protection against silent data corruption</font><br><font size="1" color="#5F5F5F" face="sans-serif">Sent by:        </font><font size="1" face="sans-serif">&quot;gpfsug-discuss&quot; &lt;gpfsug-discuss-bounces@gpfsug.org&gt;</font><br><hr width="100%" size="2" align="left" noshade style="color:#8091A5; "><br><br><br><tt><font size="2">Hi,<br><br>I have create an IDEA for it: <br></font></tt><tt><font size="2"><a href="https://ibm-sys-storage.ideas.ibm.com/ideas/GPFS-I-851">https://ibm-sys-storage.ideas.ibm.com/ideas/GPFS-I-851</a></font></tt><tt><font size="2"><br><br>Stephan<br><br><br>Am 08.06.2022 um 20:35 schrieb IBM Spectrum Scale:<br>&gt; Hi Stephen,<br>&gt; <br>&gt; Currently such a feature is not available in Spectrum Scale product.<br>&gt; <br>&gt; <br>&gt; Regards, The Spectrum Scale (GPFS) team<br>&gt; <br>&gt; ------------------------------------------------------------------------------------------------------------------<br>&gt; If you feel that your question can benefit other users of  Spectrum <br>&gt; Scale (GPFS), then please post it to the public IBM developerWroks Forum <br>&gt; at <br>&gt; </font></tt><tt><font size="2"><a href="https://www.ibm.com/developerworks/community/forums/html/forum?id=11111111-0000-0000-0000-000000000479">https://www.ibm.com/developerworks/community/forums/html/forum?id=11111111-0000-0000-0000-000000000479</a></font></tt><tt><font size="2">&nbsp;<br>&gt; &lt;</font></tt><tt><font size="2"><a href="https://www.ibm.com/developerworks/community/forums/html/forum?id=11111111-0000-0000-0000-000000000479">https://www.ibm.com/developerworks/community/forums/html/forum?id=11111111-0000-0000-0000-000000000479</a></font></tt><tt><font size="2">&gt;. <br>&gt; <br>&gt; <br>&gt; If your query concerns a potential software error in Spectrum Scale <br>&gt; (GPFS) and you have an IBM software maintenance contract please contact <br>&gt; &nbsp; 1-800-237-5511 in the United States or your local IBM Service Center <br>&gt; in other countries.<br>&gt; <br>&gt; The forum is informally monitored as time permits and should not be used <br>&gt; for priority messages to the Spectrum Scale (GPFS) team.<br>&gt; <br>&gt; Inactive hide details for &quot;Stephen Ulmer&quot; ---02-06-2022 11.32.27 <br>&gt; PM---This only adds a checksum to the NSD wire protocol. The q&quot;Stephen <br>&gt; Ulmer&quot; ---02-06-2022 11.32.27 PM---This only adds a checksum to the NSD <br>&gt; wire protocol. The question was about detecting data corruption<br>&gt; <br>&gt; From: &quot;Stephen Ulmer&quot; &lt;ulmer@ulmer.org&gt;<br>&gt; To: &quot;gpfsug main discussion list&quot; &lt;gpfsug-discuss@gpfsug.org&gt;<br>&gt; Date: 02-06-2022 11.32 PM<br>&gt; Subject: [EXTERNAL] Re: [gpfsug-discuss] Protection against silent data <br>&gt; corruption<br>&gt; Sent by: &quot;gpfsug-discuss&quot; &lt;gpfsug-discuss-bounces@gpfsug.org&gt;<br>&gt; <br>&gt; ------------------------------------------------------------------------<br>&gt; <br>&gt; <br>&gt; <br>&gt; This only adds a checksum to the NSD wire protocol. The question was <br>&gt; about detecting data corruption at rest. -- Stephen On Jun 2, 2022, at <br>&gt; 1:01 PM, Achim Rehor &lt;Achim.Rehor@de.ibm.com&gt; wrote: hi Stephan, <br>&gt; \u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d\u200d<br>&gt; <br>&gt; This only adds a checksum to the NSD wire protocol. The question was <br>&gt; about detecting data corruption at rest.<br>&gt; <br>&gt; -- <br>&gt; Stephen<br>&gt; <br>&gt; <br>&gt; &nbsp; &nbsp; On Jun 2, 2022, at 1:01 PM, Achim Rehor &lt;_Achim.Rehor@de.ibm.com_<br>&gt; &nbsp; &nbsp; &lt;</font></tt><tt><font size="2"><a href="mailto:Achim.Rehor@de.ibm.com">mailto:Achim.Rehor@de.ibm.com</a></font></tt><tt><font size="2">&gt;&gt; wrote:<br>&gt; <br>&gt; &nbsp; &nbsp; hi Stephan,<br>&gt; <br>&gt; &nbsp; &nbsp; there is, see mmchconfig man page :<br>&gt; <br>&gt; &nbsp; &nbsp; nsdCksumTraditional<br>&gt; &nbsp; &nbsp; This attribute enables checksum data-integrity checking between a<br>&gt; &nbsp; &nbsp; traditional NSD client node and its NSD server. Valid values are yes<br>&gt; &nbsp; &nbsp; and no. The default value is no.<br>&gt; &nbsp; &nbsp; (Traditional in this context means that the NSD client and server<br>&gt; &nbsp; &nbsp; are configured with IBM Spectrum Scale rather than with IBM Spectrum<br>&gt; &nbsp; &nbsp; Scale RAID.<br>&gt; &nbsp; &nbsp; The latter is a component of IBM Elastic Storage Server (ESS) and of<br>&gt; &nbsp; &nbsp; IBM GPFS Storage Server (GSS).)<br>&gt; <br>&gt; &nbsp; &nbsp; The checksum procedure detects any corruption by the network of the<br>&gt; &nbsp; &nbsp; data in the NSD RPCs that are exchanged between the NSD client and the<br>&gt; &nbsp; &nbsp; server. A checksum error triggers a request to retransmit the message.<br>&gt; <br>&gt; &nbsp; &nbsp; When this attribute is enabled on a client node, the client<br>&gt; &nbsp; &nbsp; indicates in each of its requests to the server that it is using<br>&gt; &nbsp; &nbsp; checksums. The server uses checksums only in<br>&gt; &nbsp; &nbsp; response to client requests in which the indicator is set. A client<br>&gt; &nbsp; &nbsp; node that accesses a file system that belongs to another cluster can<br>&gt; &nbsp; &nbsp; use checksums in the same way.<br>&gt; <br>&gt; &nbsp; &nbsp; You can change the value of the this attribute for an entire cluster<br>&gt; &nbsp; &nbsp; without shutting down the mmfsd daemon, or for one or more nodes<br>&gt; &nbsp; &nbsp; without restarting the nodes.<br>&gt; <br>&gt; &nbsp; &nbsp; Note:<br>&gt; &nbsp; &nbsp; * Enabling this feature can result in significant I/O performance<br>&gt; &nbsp; &nbsp; degradation and a considerable increase in CPU usage.<br>&gt; <br>&gt; &nbsp; &nbsp; * To enable checksums for a subset of the nodes in a cluster, issue<br>&gt; &nbsp; &nbsp; a command like the following one:<br>&gt; &nbsp; &nbsp; &nbsp;   mmchconfig nsdCksumTraditional=yes -i -N &lt;subset-of-nodes&gt;<br>&gt; <br>&gt; &nbsp; &nbsp; &nbsp;   The -N flag is valid for this attribute.<br>&gt; <br>&gt; &nbsp; &nbsp; -- <br>&gt; &nbsp; &nbsp; Mit freundlichen Grüßen / Kind regards<br>&gt; <br>&gt; &nbsp; &nbsp; Achim Rehor<br>&gt; <br>&gt; &nbsp; &nbsp; Technical Support Specialist S\u200bpectrum Scale and ESS (SME)<br>&gt; &nbsp; &nbsp; Advisory Product Services Professional<br>&gt; &nbsp; &nbsp; IBM Systems Storage Support - EMEA<br>&gt; <br>&gt; &nbsp; &nbsp; _Achim.Rehor@de.ibm.com_<br>&gt; &nbsp; &nbsp; &lt;</font></tt><tt><font size="2"><a href="mailto:Achim.Rehor@de.ibm.com">mailto:Achim.Rehor@de.ibm.com</a></font></tt><tt><font size="2">&gt; +49-170-4521194<br>&gt; &nbsp; &nbsp; IBM Deutschland GmbH<br>&gt; &nbsp; &nbsp; Vorsitzender des Aufsichtsrats: Sebastian Krause<br>&gt; &nbsp; &nbsp; Geschäftsführung: Gregor Pillen (Vorsitzender), Nicole Reimer,<br>&gt; &nbsp; &nbsp; Gabriele Schwarenthorer, Christine Rupp, Frank Theisen<br>&gt; &nbsp; &nbsp; Sitz der Gesellschaft: Ehningen / Registergericht: Amtsgericht<br>&gt; &nbsp; &nbsp; Stuttgart, HRB 14562 / WEEE-Reg.-Nr. DE 99369940<br>&gt; <br>&gt; <br>&gt; &nbsp; &nbsp; -----Original Message-----<br>&gt; &nbsp; &nbsp; *From*: Stephan Graf &lt;_st.graf@fz-juelich.de_<br>&gt; &nbsp; &nbsp; &lt;</font></tt><tt><font size="2"><a href="mailto:Stephan%20Graf%20%3cst.graf@fz-juelich.de%3e">mailto:Stephan%20Graf%20%3cst.graf@fz-juelich.de%3e</a></font></tt><tt><font size="2">&gt;&gt;<br>&gt; &nbsp; &nbsp; *Reply-To*: gpfsug main discussion list &lt;_gpfsug-discuss@gpfsug.org_<br>&gt; &nbsp; &nbsp; &lt;</font></tt><tt><font size="2"><a href="mailto:gpfsug%20main%20discussion%20list%20%3cgpfsug-discuss@gpfsug.org%3e">mailto:gpfsug%20main%20discussion%20list%20%3cgpfsug-discuss@gpfsug.org%3e</a></font></tt><tt><font size="2">&gt;&gt;<br>&gt; &nbsp; &nbsp; *To*: gpfsug-discuss &lt;_gpfsug-discuss@gpfsug.org_<br>&gt; &nbsp; &nbsp; &lt;</font></tt><tt><font size="2"><a href="mailto:gpfsug-discuss%20%3cgpfsug-discuss@gpfsug.org%3e">mailto:gpfsug-discuss%20%3cgpfsug-discuss@gpfsug.org%3e</a></font></tt><tt><font size="2">&gt;&gt;<br>&gt; &nbsp; &nbsp; *Subject*: [EXTERNAL] [gpfsug-discuss] Protection against silent<br>&gt; &nbsp; &nbsp; data corruption<br>&gt; &nbsp; &nbsp; *Date*: Thu, 02 Jun 2022 16:31:43 +0200<br>&gt; <br>&gt; &nbsp; &nbsp; Hi,<br>&gt; <br>&gt; &nbsp; &nbsp; I am wondering if there is an option in SS to enable some checking to<br>&gt; &nbsp; &nbsp; detect silent data corruption.<br>&gt; <br>&gt; &nbsp; &nbsp; Form GNR I know that there is End-to-End integrity. So a checksum is<br>&gt; &nbsp; &nbsp; stored in addition.<br>&gt; <br>&gt; &nbsp; &nbsp; The background is that we are facing an issue where in some files<br>&gt; &nbsp; &nbsp; (which<br>&gt; &nbsp; &nbsp; have data replication =  2) the mmrestripefile is reporting, that one<br>&gt; &nbsp; &nbsp; block is mismatching it's copy (the storage cluster is running SS<br>&gt; &nbsp; &nbsp; without GNR).<br>&gt; &nbsp; &nbsp; We have validated that the copied block is fine, but the original<br>&gt; &nbsp; &nbsp; one is<br>&gt; &nbsp; &nbsp; broken (and this is what is returned on read access).<br>&gt; &nbsp; &nbsp; SS right now in our installation is unable to determine which is the<br>&gt; &nbsp; &nbsp; correct one.<br>&gt; &nbsp; &nbsp; Is there any option to enable this kind of feature in SS? If not, does<br>&gt; &nbsp; &nbsp; it make sense to create an &quot;IDEA&quot; for it?<br>&gt; <br>&gt; &nbsp; &nbsp; Stephan<br>&gt; <br>&gt; &nbsp; &nbsp; _______________________________________________<br>&gt; &nbsp; &nbsp; gpfsug-discuss mailing list<br>&gt; &nbsp; &nbsp; gpfsug-discuss at _gpfsug.org_ &lt;</font></tt><tt><font size="2"><a href="http://gpfsug.org">http://gpfsug.org</a></font></tt><tt><font size="2">&gt;<br>&gt; &nbsp; &nbsp; _</font></tt><tt><font size="2"><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org_">http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org_</a></font></tt><tt><font size="2"><br>&gt; &nbsp; &nbsp; &lt;</font></tt><tt><font size="2"><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org">http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org</a></font></tt><tt><font size="2">&gt;<br>&gt; &nbsp; &nbsp; _______________________________________________<br>&gt; &nbsp; &nbsp; gpfsug-discuss mailing list<br>&gt; &nbsp; &nbsp; gpfsug-discuss at _gpfsug.org_ &lt;</font></tt><tt><font size="2"><a href="http://gpfsug.org">http://gpfsug.org</a></font></tt><tt><font size="2">&gt;_<br>&gt; &nbsp; &nbsp; __</font></tt><tt><font size="2"><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org_">http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org_</a></font></tt><tt><font size="2"><br>&gt; &nbsp; &nbsp; &lt;</font></tt><tt><font size="2"><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org">http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org</a></font></tt><tt><font size="2">&gt;<br>&gt; <br>&gt; _______________________________________________<br>&gt; gpfsug-discuss mailing list<br>&gt; gpfsug-discuss at gpfsug.org<br>&gt; </font></tt><tt><font size="2"><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org">http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org</a></font></tt><tt><font size="2">&nbsp;<br>&gt; &lt;</font></tt><tt><font size="2"><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org">http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org</a></font></tt><tt><font size="2">&gt;<br>&gt; <br>&gt; <br>&gt; <br>&gt; <br>&gt; <br>&gt; _______________________________________________<br>&gt; gpfsug-discuss mailing list<br>&gt; gpfsug-discuss at gpfsug.org<br>&gt; </font></tt><tt><font size="2"><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org">http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org</a></font></tt><tt><font size="2"><br><br>-- <br>Stephan Graf<br>Juelich Supercomputing Centre<br><br>Phone: &nbsp;+49-2461-61-6578<br>Fax: &nbsp; &nbsp;+49-2461-61-6656<br>E-mail: st.graf@fz-juelich.de<br>WWW: &nbsp; &nbsp;</font></tt><tt><font size="2"><a href="http://www.fz-juelich.de/jsc/">http://www.fz-juelich.de/jsc/</a></font></tt><tt><font size="2"><br>---------------------------------------------------------------------------------------------<br>---------------------------------------------------------------------------------------------<br>Forschungszentrum Juelich GmbH<br>52425 Juelich<br>Sitz der Gesellschaft: Juelich<br>Eingetragen im Handelsregister des Amtsgerichts Dueren Nr. HR B 3498<br>Vorsitzender des Aufsichtsrats: MinDir Volker Rieke<br>Geschaeftsfuehrung: Prof. Dr.-Ing. Wolfgang Marquardt (Vorsitzender),<br>Karsten Beneke (stellv. Vorsitzender), Dr. Astrid Lambrecht,<br>Prof. Dr. Frauke Melchior<br>---------------------------------------------------------------------------------------------<br>---------------------------------------------------------------------------------------------<br>[attachment &quot;smime.p7s&quot; deleted by Huzefa H Pancha/India/IBM] _______________________________________________<br>gpfsug-discuss mailing list<br>gpfsug-discuss at gpfsug.org<br></font></tt><tt><font size="2"><a href="http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org">http://gpfsug.org/mailman/listinfo/gpfsug-discuss_gpfsug.org</a></font></tt><tt><font size="2"><br></font></tt><br><br><BR>
<BR>
</body></html>