<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:Verdana;
        panose-1:2 11 6 4 3 5 4 4 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal">If my memory serves… any move of files between filesets requires data to be moved, regardless of pool allocation for the files that need to be moved, and regardless if they are dependent filesets are both in the same independent fileset.<o:p></o:p></p>
<p class="MsoNormal">-Bryan<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b>From:</b> gpfsug-discuss-bounces@spectrumscale.org <gpfsug-discuss-bounces@spectrumscale.org>
<b>On Behalf Of </b>J. Eric Wonderley<br>
<b>Sent:</b> Thursday, April 16, 2020 12:37 PM<br>
<b>To:</b> gpfsug main discussion list <gpfsug-discuss@spectrumscale.org><br>
<b>Subject:</b> Re: [gpfsug-discuss] gpfs filesets question<o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">[EXTERNAL EMAIL]<o:p></o:p></p>
</div>
<div>
<div>
<p class="MsoNormal">Hi Fred: <o:p></o:p></p>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">I do.  I have 3 pools.  system, ssd data pool(fc_ssd400G) and a spinning disk pool(fc_8T).<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">I want to think the ssd_data_pool is empty at the moment and the system pool is ssd and only contains metadata.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal">[root@cl005 ~]# mmdf home -P fc_ssd400G<br>
disk                disk size  failure holds    holds              free KB             free KB<br>
name                    in KB    group metadata data        in full blocks        in fragments<br>
--------------- ------------- -------- -------- ----- -------------------- -------------------<br>
Disks in storage pool: fc_ssd400G (Maximum disk size allowed is 97 TB)<br>
r10f1e8            1924720640     1001 No       Yes      1924644864 (100%)          9728 ( 0%)
<br>
r10f1e7            1924720640     1001 No       Yes      1924636672 (100%)         17408 ( 0%)
<br>
r10f1e6            1924720640     1001 No       Yes      1924636672 (100%)         17664 ( 0%)
<br>
r10f1e5            1924720640     1001 No       Yes      1924644864 (100%)          9728 ( 0%)
<br>
r10f6e8            1924720640     1001 No       Yes      1924644864 (100%)          9728 ( 0%)
<br>
r10f1e9            1924720640     1001 No       Yes      1924644864 (100%)          9728 ( 0%)
<br>
r10f6e9            1924720640     1001 No       Yes      1924644864 (100%)          9728 ( 0%)
<br>
                -------------                         -------------------- -------------------<br>
(pool total)      13473044480                           13472497664 (100%)         83712 ( 0%)<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">More or less empty.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">Interesting...<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div>
<p class="MsoNormal">On Thu, Apr 16, 2020 at 1:11 PM Frederick Stock <<a href="mailto:stockf@us.ibm.com" target="_blank">stockf@us.ibm.com</a>> wrote:<o:p></o:p></p>
</div>
<blockquote style="border:none;border-left:solid #CCCCCC 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;font-family:"Arial",sans-serif">Do you have more than one GPFS storage pool in the system?  If you do and they align with the filesets then that might explain why moving data from one fileset to another is
 causing increased IO operations.<o:p></o:p></span></p>
</div>
<div>
<div>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:"Arial",sans-serif"><br>
</span><span style="font-size:11.5pt;font-family:"Verdana",sans-serif">Fred<br>
__________________________________________________<br>
Fred Stock | IBM Pittsburgh Lab | 720-430-8821<br>
</span><a href="mailto:stockf@us.ibm.com" target="_blank"><span style="font-size:11.5pt;font-family:"Verdana",sans-serif">stockf@us.ibm.com</span></a><span style="font-size:10.5pt;font-family:"Arial",sans-serif"><o:p></o:p></span></p>
</div>
</div>
</div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;font-family:"Arial",sans-serif"> <o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;font-family:"Arial",sans-serif"> <o:p></o:p></span></p>
</div>
<blockquote style="border:none;border-left:solid #AAAAAA 1.5pt;padding:0in 0in 0in 4.0pt;margin-left:3.75pt;margin-top:5.0pt;margin-right:0in;margin-bottom:5.0pt">
<p class="MsoNormal"><span style="font-size:12.0pt;font-family:"Arial",sans-serif">----- Original message -----<br>
From: "J. Eric Wonderley" <</span><a href="mailto:eric.wonderley@vt.edu" target="_blank"><span style="font-size:12.0pt;font-family:"Arial",sans-serif">eric.wonderley@vt.edu</span></a><span style="font-size:12.0pt;font-family:"Arial",sans-serif">><br>
Sent by: </span><a href="mailto:gpfsug-discuss-bounces@spectrumscale.org" target="_blank"><span style="font-size:12.0pt;font-family:"Arial",sans-serif">gpfsug-discuss-bounces@spectrumscale.org</span></a><span style="font-size:12.0pt;font-family:"Arial",sans-serif"><br>
To: gpfsug main discussion list <</span><a href="mailto:gpfsug-discuss@spectrumscale.org" target="_blank"><span style="font-size:12.0pt;font-family:"Arial",sans-serif">gpfsug-discuss@spectrumscale.org</span></a><span style="font-size:12.0pt;font-family:"Arial",sans-serif">><br>
Cc:<br>
Subject: [EXTERNAL] [gpfsug-discuss] gpfs filesets question<br>
Date: Thu, Apr 16, 2020 12:32 PM<br>
  <o:p></o:p></span></p>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;font-family:"Arial",sans-serif">I have filesets setup in a filesystem...looks like:
<o:p></o:p></span></p>
<div>
<div>
<div>
<div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;font-family:"Arial",sans-serif">[root@cl005 ~]# mmlsfileset home -L<br>
Filesets in file system 'home':<br>
Name                            Id      RootInode  ParentId Created                      InodeSpace      MaxInodes    AllocInodes Comment<br>
root                             0              3        -- Tue Jun 30 07:54:09 2015        0            402653184      320946176 root fileset<br>
hess                             1      543733376         0 Tue Jun 13 14:56:13 2017        0                    0              0<br>
predictHPC                       2        1171116         0 Thu Jan  5 15:16:56 2017        0                    0              0<br>
HYCCSIM                          3      544258049         0 Wed Jun 14 10:00:41 2017        0                    0              0<br>
socialdet                        4      544258050         0 Wed Jun 14 10:01:02 2017        0                    0              0<br>
arc                              5        1171073         0 Thu Jan  5 15:07:09 2017        0                    0              0<br>
arcadm                           6        1171074         0 Thu Jan  5 15:07:10 2017        0                    0              0 <o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;font-family:"Arial",sans-serif"> <o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;font-family:"Arial",sans-serif">I beleive these are dependent filesets.  Dependent on the root fileset.   Anyhow a user wants to move a large amount of data from one fileset to another.   Would this be a metadata
 only operation?  He has attempted to small amount of data and has noticed some thrasing.<o:p></o:p></span></p>
</div>
</div>
</div>
</div>
</div>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Courier New"">_______________________________________________<br>
gpfsug-discuss mailing list<br>
gpfsug-discuss at </span><a href="https://urldefense.com/v3/__http:/spectrumscale.org__;!!GSt_xZU7050wKg!8yGf1dxUAB2Ox_fjIFpf1ZF_LOCtXQcvfsUsRqJexbuGRRHRVJzRmJXcnxRktrnYm9y6$" target="_blank"><span style="font-size:10.0pt;font-family:"Courier New"">spectrumscale.org</span></a><span style="font-size:10.0pt;font-family:"Courier New""><br>
</span><a href="https://urldefense.com/v3/__http:/gpfsug.org/mailman/listinfo/gpfsug-discuss__;!!GSt_xZU7050wKg!8yGf1dxUAB2Ox_fjIFpf1ZF_LOCtXQcvfsUsRqJexbuGRRHRVJzRmJXcnxRktuPvPpMs$" target="_blank"><span style="font-size:10.0pt;font-family:"Courier New"">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</span></a><span style="font-size:10.0pt;font-family:"Courier New""> </span><span style="font-size:12.0pt;font-family:"Arial",sans-serif"><o:p></o:p></span></p>
</div>
</blockquote>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;font-family:"Arial",sans-serif"> <o:p></o:p></span></p>
</div>
</div>
<p class="MsoNormal"><br>
_______________________________________________<br>
gpfsug-discuss mailing list<br>
gpfsug-discuss at <a href="https://urldefense.com/v3/__http:/spectrumscale.org__;!!GSt_xZU7050wKg!8yGf1dxUAB2Ox_fjIFpf1ZF_LOCtXQcvfsUsRqJexbuGRRHRVJzRmJXcnxRktrnYm9y6$" target="_blank">
spectrumscale.org</a><br>
<a href="https://urldefense.com/v3/__http:/gpfsug.org/mailman/listinfo/gpfsug-discuss__;!!GSt_xZU7050wKg!8yGf1dxUAB2Ox_fjIFpf1ZF_LOCtXQcvfsUsRqJexbuGRRHRVJzRmJXcnxRktuPvPpMs$" target="_blank">http://gpfsug.org/mailman/listinfo/gpfsug-discuss</a><o:p></o:p></p>
</blockquote>
</div>
</div>
</div>
</body>
</html>