<html><head><meta http-equiv="content-type" content="text/html; charset=utf-8"></head><body dir="auto">Dave,<div><br></div><div>Spectrum Scale does not support de-duplication, it does support compression. </div><div>You can however use block storage that supports over subscription / thin provisioning / deduplication for data only NSD’s, we do not recommend them for metadata.</div><div><br></div><div>In your scenario is user B planning on making changes to the data which is why you need a copy? </div><div><br></div><div>I know of customers that do this regularly with block storage such as the IBM Flashsystem product family In conjunction with IBM Spectrum Copy Data Management.  But I don’t believe CDM supports file based storage.<br><br><div dir="ltr">Regards, </div><div dir="ltr"><br></div><div dir="ltr">Andrew Beattie</div><div dir="ltr">Technical Sales Specialist</div><div dir="ltr">Storage for Data and AI</div><div dir="ltr">IBM Australia and New Zealand</div><div dir="ltr">P. +61 421 337 927</div><div dir="ltr">E. Abeattie@au1.ibm.com</div><div dir="ltr"><br><blockquote type="cite">On 20 May 2021, at 22:58, Dave Bond <davebond7787@gmail.com> wrote:<br><br></blockquote></div><blockquote type="cite"><div dir="ltr">





<div dir="auto"><div class="gmail_quote" dir="auto"><div dir="ltr" class="gmail_attr"><br></div><br><div dir="auto">Hello<div dir="auto"><br></div><div dir="auto">As part of a project I am doing I am looking if there are any de duplication options for GPFS?  I see there is no native de dupe for the filesystem. The scenario would be user A creates a file or folder and user B takes a copy within the same filesystem, though separate independent filesets.  The intention would be to store 1 copy.    So I was wondering ....</div><div dir="auto"><br></div><div dir="auto">1) Is this is planned to be implemented into GPFS in the future?</div><div dir="auto">2) Is anyone is using any other solutions that have good GPFS integration?</div><div dir="auto"><br></div><div dir="auto">Dave</div></div></div></div>
</div></blockquote></div><BR>
</body></html>