
<html><head></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; "><div>Hi,</div><div><br></div><div>we have set up a&nbsp;replicated gluster volume on 3 glusterservers, 2 of them act as well as gluster clients using NFS-Mode.</div><div><br></div><div>It seems we have a performance problem especially in read access, compared by Iozone-Test for GlusterFS and local filesystem (testfiles attached)</div><div><br></div><div>Does anyone no what&nbsp;FINODELK in the profiling status means?</div><div><br><b>gluster&gt; volume info var_customers<br></b><br>Volume Name: var_customers<br>Type: Replicate<br>Status: Started<br>Number of Bricks: 3<br>Transport-type: tcp<br>Bricks:<br>Brick1: www1.example.com:/export/var_customers<br>Brick2: www2.example.com:/export/var_customers<br>Brick3: db1.example.com:/export/var_customers<br>Options Reconfigured:<br>diagnostics.count-fop-hits: on<br>diagnostics.latency-measurement: on<br>nfs.addr-namelookup: off<br>performance.cache-size: 1GB<br>performance.cache-refresh-timeout: 10<br>nfs.disable: off</div><div><br></div><div><b>gluster&gt; volume profile var_customers info</b></div><div><br></div>Brick: www1.example.com:/export/var_customers<br>Cumulative Stats:<br>&nbsp; &nbsp;Block Size: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;1b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 2b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 4b+&nbsp;<br>&nbsp;No. of Reads: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;1 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 470 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;51&nbsp;<br>No. of Writes: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;3 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;2096 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;70&nbsp;<br><br>&nbsp; &nbsp;Block Size: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;8b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;16b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;32b+&nbsp;<br>&nbsp;No. of Reads: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;257 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 328 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;1909&nbsp;<br>No. of Writes: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;56539 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 29510 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 21106&nbsp;<br><br>&nbsp; &nbsp;Block Size: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 64b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 128b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 256b+&nbsp;<br>&nbsp;No. of Reads: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 4392 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;3989 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 53665&nbsp;<br>No. of Writes: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 7799 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 3798244 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 68347&nbsp;<br><br>&nbsp; &nbsp;Block Size: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;512b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;1024b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;2048b+&nbsp;<br>&nbsp;No. of Reads: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;48922 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 30482 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 57730&nbsp;<br>No. of Writes: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 101337 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 77721 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;146879&nbsp;<br><br>&nbsp; &nbsp;Block Size: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 4096b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;8192b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 16384b+&nbsp;<br>&nbsp;No. of Reads: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 125754 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 85601 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 85585&nbsp;<br>No. of Writes: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;83477 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 57299 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;100724&nbsp;<br><br>&nbsp; &nbsp;Block Size: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;32768b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 65536b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;131072b+&nbsp;<br>&nbsp;No. of Reads: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 215287 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;402116 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 16703&nbsp;<br>No. of Writes: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 128264 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;651165 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;13&nbsp;<br><br>&nbsp;%-latency &nbsp; Avg-latency &nbsp; Min-Latency &nbsp; Max-Latency &nbsp; No. of calls &nbsp; &nbsp; &nbsp; &nbsp; Fop<br>&nbsp;--------- &nbsp; ----------- &nbsp; ----------- &nbsp; ----------- &nbsp; ------------ &nbsp; &nbsp; &nbsp; &nbsp;----<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; &nbsp; 808254 &nbsp; &nbsp; &nbsp;FORGET<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; &nbsp;4232835 &nbsp; &nbsp; RELEASE<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; 43827826 &nbsp;RELEASEDIR<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp;30.00 us &nbsp; &nbsp; &nbsp;30.00 us &nbsp; &nbsp; &nbsp;30.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;1 &nbsp; FTRUNCATE<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 101.00 us &nbsp; &nbsp; 101.00 us &nbsp; &nbsp; 101.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;1 &nbsp; &nbsp; &nbsp; MKNOD<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp;27.80 us &nbsp; &nbsp; &nbsp;19.00 us &nbsp; &nbsp; &nbsp;51.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;5 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;LK<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp;64.33 us &nbsp; &nbsp; &nbsp;24.00 us &nbsp; &nbsp; 132.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;3 &nbsp; &nbsp;SETXATTR<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 129.00 us &nbsp; &nbsp; 122.00 us &nbsp; &nbsp; 136.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;2 &nbsp; &nbsp;GETXATTR<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp;32.66 us &nbsp; &nbsp; &nbsp;21.00 us &nbsp; &nbsp; &nbsp;72.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;232 &nbsp; &nbsp;READLINK<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 365.62 us &nbsp; &nbsp; &nbsp;78.00 us &nbsp; 12105.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 50 &nbsp; &nbsp; SYMLINK<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 101.06 us &nbsp; &nbsp; &nbsp;26.00 us &nbsp; 16858.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;55237 &nbsp; &nbsp; &nbsp; RMDIR<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp; 4.76 us &nbsp; &nbsp; &nbsp; 1.00 us &nbsp;127434.00 us &nbsp; &nbsp; &nbsp; &nbsp;1201187 &nbsp; &nbsp; INODELK<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp; 4.88 us &nbsp; &nbsp; &nbsp; 1.00 us &nbsp;323110.00 us &nbsp; &nbsp; &nbsp; &nbsp;1197308 &nbsp; &nbsp; ENTRYLK<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 126.49 us &nbsp; &nbsp; &nbsp;33.00 us &nbsp; 94811.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;57339 &nbsp; &nbsp;TRUNCATE<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 173.33 us &nbsp; &nbsp; &nbsp;22.00 us 1838409.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;75148 &nbsp; &nbsp; &nbsp;UNLINK<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 119.27 us &nbsp; &nbsp; &nbsp;32.00 us &nbsp; 13839.00 us &nbsp; &nbsp; &nbsp; &nbsp; 115214 &nbsp; &nbsp; XATTROP<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 166.44 us &nbsp; &nbsp; &nbsp;10.00 us &nbsp;650082.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;90531 &nbsp; &nbsp; &nbsp;RENAME<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 304.93 us &nbsp; &nbsp; 121.00 us &nbsp; &nbsp;1688.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;60335 &nbsp; &nbsp; &nbsp;STATFS<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp;17.13 us &nbsp; &nbsp; &nbsp; 2.00 us &nbsp; 17742.00 us &nbsp; &nbsp; &nbsp; &nbsp;1184450 &nbsp; &nbsp; &nbsp; FLUSH<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 195.37 us &nbsp; &nbsp; &nbsp; 7.00 us &nbsp;537283.00 us &nbsp; &nbsp; &nbsp; &nbsp; 126802 &nbsp; &nbsp; &nbsp; MKDIR<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 200.94 us &nbsp; &nbsp; &nbsp; 9.00 us 1301745.00 us &nbsp; &nbsp; &nbsp; &nbsp; 160031 &nbsp; &nbsp; &nbsp;CREATE<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp;23.13 us &nbsp; &nbsp; &nbsp; 4.00 us &nbsp;256994.00 us &nbsp; &nbsp; &nbsp; &nbsp;2181212 &nbsp; &nbsp; &nbsp; FSTAT<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 128.58 us &nbsp; &nbsp; &nbsp;16.00 us &nbsp;111526.00 us &nbsp; &nbsp; &nbsp; &nbsp; 497584 &nbsp; &nbsp; SETATTR<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp;45.61 us &nbsp; &nbsp; &nbsp;12.00 us &nbsp;284287.00 us &nbsp; &nbsp; &nbsp; &nbsp;1577385 &nbsp; &nbsp; &nbsp; &nbsp;OPEN<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp;88.07 us &nbsp; &nbsp; &nbsp;13.00 us &nbsp;237483.00 us &nbsp; &nbsp; &nbsp; &nbsp; 885547 &nbsp; &nbsp; &nbsp; WRITE<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 338.71 us &nbsp; &nbsp; &nbsp; 5.00 us 2026980.00 us &nbsp; &nbsp; &nbsp; &nbsp; 492461 &nbsp; &nbsp; READDIR<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 139.54 us &nbsp; &nbsp; &nbsp;17.00 us 1063367.00 us &nbsp; &nbsp; &nbsp; &nbsp;1686287 &nbsp; &nbsp;FXATTROP<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp;43.84 us &nbsp; &nbsp; &nbsp; 6.00 us &nbsp;775509.00 us &nbsp; &nbsp; &nbsp; 11817763 &nbsp; &nbsp; OPENDIR<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp;2492.07 us &nbsp; &nbsp; &nbsp; 6.00 us 2104998.00 us &nbsp; &nbsp; &nbsp; &nbsp; 228619 &nbsp; &nbsp; &nbsp; &nbsp;READ<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp;1051.69 us &nbsp; &nbsp; &nbsp;39.00 us 1728976.00 us &nbsp; &nbsp; &nbsp; &nbsp; 702295 &nbsp; &nbsp; &nbsp; FSYNC<br>&nbsp; &nbsp; &nbsp; 0.01 &nbsp; &nbsp; &nbsp;34.73 us &nbsp; &nbsp; &nbsp; 5.00 us 1927494.00 us &nbsp; &nbsp; &nbsp; 60153264 &nbsp; &nbsp; &nbsp; &nbsp;STAT<br>&nbsp; &nbsp; &nbsp; 0.01 &nbsp; &nbsp; &nbsp;31.48 us &nbsp; &nbsp; &nbsp; 2.00 us 1906788.00 us &nbsp; &nbsp; &nbsp; 96888660 &nbsp; &nbsp; &nbsp;ACCESS<br>&nbsp; &nbsp; &nbsp; 0.01 &nbsp; &nbsp; 783.05 us &nbsp; &nbsp; &nbsp; 4.00 us 31758218.00 us &nbsp; &nbsp; &nbsp; &nbsp;4095330 &nbsp; &nbsp;READDIRP<br>&nbsp; &nbsp; &nbsp; 0.20 &nbsp; &nbsp; &nbsp;79.04 us &nbsp; &nbsp; &nbsp;10.00 us 2517754.00 us &nbsp; &nbsp; &nbsp;601250517 &nbsp; &nbsp; &nbsp;LOOKUP<br>&nbsp; &nbsp; &nbsp;99.76 4941107.88 us &nbsp; &nbsp; &nbsp; 1.00 us 308307554.00 us &nbsp; &nbsp; &nbsp; &nbsp;4853874 &nbsp; &nbsp;FINODELK<br><br>&nbsp; &nbsp; Duration : 5434814 seconds<br>&nbsp; &nbsp;Data Read : 42004988515 bytes<br>Data Written : 53775093991 bytes<br><br>Brick: www1.example.com:/export/var_customers<br>Interval 63 Stats:<br>&nbsp; &nbsp;Block Size: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;2b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 4b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 8b+&nbsp;<br>&nbsp;No. of Reads: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;1 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 2 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 3&nbsp;<br>No. of Writes: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;0 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 0 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 0&nbsp;<br><br>&nbsp; &nbsp;Block Size: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 16b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;32b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;64b+&nbsp;<br>&nbsp;No. of Reads: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 10 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;41 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 125&nbsp;<br>No. of Writes: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;309 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 173 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;34&nbsp;<br><br>&nbsp; &nbsp;Block Size: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;128b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 256b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 512b+&nbsp;<br>&nbsp;No. of Reads: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;122 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 949 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;2738&nbsp;<br>No. of Writes: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 2109 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;2585 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;4951&nbsp;<br><br>&nbsp; &nbsp;Block Size: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 1024b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;2048b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;4096b+&nbsp;<br>&nbsp;No. of Reads: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 2047 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;3770 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;6424&nbsp;<br>No. of Writes: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 1459 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 673 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 661&nbsp;<br><br>&nbsp; &nbsp;Block Size: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 8192b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 16384b+ &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 32768b+&nbsp;<br>&nbsp;No. of Reads: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 6744 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;6530 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;8956&nbsp;<br>No. of Writes: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;200 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 168 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 217&nbsp;<br><br>&nbsp; &nbsp;Block Size: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;65536b+&nbsp;<br>&nbsp;No. of Reads: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;28825&nbsp;<br>No. of Writes: &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;45193&nbsp;<br>&nbsp;%-latency &nbsp; Avg-latency &nbsp; Min-Latency &nbsp; Max-Latency &nbsp; No. of calls &nbsp; &nbsp; &nbsp; &nbsp; Fop<br>&nbsp;--------- &nbsp; ----------- &nbsp; ----------- &nbsp; ----------- &nbsp; ------------ &nbsp; &nbsp; &nbsp; &nbsp;----<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 6136 &nbsp; &nbsp; &nbsp;FORGET<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; &nbsp; 104031 &nbsp; &nbsp; RELEASE<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; 0.00 us &nbsp; &nbsp; &nbsp; &nbsp; 914132 &nbsp;RELEASEDIR<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp; 5.27 us &nbsp; &nbsp; &nbsp; 2.00 us &nbsp; &nbsp; &nbsp; 9.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 22 &nbsp; &nbsp; ENTRYLK<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 157.00 us &nbsp; &nbsp; 157.00 us &nbsp; &nbsp; 157.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;1 &nbsp; &nbsp; &nbsp;UNLINK<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp;38.04 us &nbsp; &nbsp; &nbsp; 8.00 us &nbsp; &nbsp; 547.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 26 &nbsp; &nbsp; &nbsp; FSTAT<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp; 5.23 us &nbsp; &nbsp; &nbsp; 1.00 us &nbsp; &nbsp; &nbsp;44.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;252 &nbsp; &nbsp; INODELK<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; 169.50 us &nbsp; &nbsp; 124.00 us &nbsp; &nbsp; 234.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 10 &nbsp; &nbsp; &nbsp;CREATE<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp;70.59 us &nbsp; &nbsp; &nbsp;30.00 us &nbsp; &nbsp; 156.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 69 &nbsp; &nbsp; SETATTR<br>&nbsp; &nbsp; &nbsp; 0.00 &nbsp; &nbsp; &nbsp;15.14 us &nbsp; &nbsp; &nbsp; 4.00 us &nbsp; &nbsp; &nbsp;73.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;348 &nbsp; &nbsp; &nbsp; FLUSH<br>&nbsp; &nbsp; &nbsp; 0.01 &nbsp; &nbsp; &nbsp;76.03 us &nbsp; &nbsp; &nbsp;29.00 us &nbsp; &nbsp; 155.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 89 &nbsp; &nbsp; &nbsp; WRITE<br>&nbsp; &nbsp; &nbsp; 0.01 &nbsp; &nbsp; 145.22 us &nbsp; &nbsp; &nbsp;77.00 us &nbsp; &nbsp; 627.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 76 &nbsp; &nbsp; XATTROP<br>&nbsp; &nbsp; &nbsp; 0.02 &nbsp; &nbsp; 138.39 us &nbsp; &nbsp; &nbsp; 2.00 us &nbsp; 11687.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;190 &nbsp; &nbsp;FINODELK<br>&nbsp; &nbsp; &nbsp; 0.02 &nbsp; &nbsp; 161.03 us &nbsp; &nbsp; &nbsp;44.00 us &nbsp; &nbsp;9066.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;178 &nbsp; &nbsp;FXATTROP<br>&nbsp; &nbsp; &nbsp; 0.03 &nbsp; &nbsp; &nbsp;64.33 us &nbsp; &nbsp; &nbsp;23.00 us &nbsp; &nbsp; 167.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;546 &nbsp; &nbsp; &nbsp; &nbsp;OPEN<br>&nbsp; &nbsp; &nbsp; 0.06 &nbsp; &nbsp;2113.37 us &nbsp; &nbsp; &nbsp;58.00 us &nbsp; 18096.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 38 &nbsp; &nbsp;TRUNCATE<br>&nbsp; &nbsp; &nbsp; 0.07 &nbsp; &nbsp;1020.89 us &nbsp; &nbsp; 513.00 us &nbsp; &nbsp;6723.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 89 &nbsp; &nbsp; &nbsp; FSYNC<br>&nbsp; &nbsp; &nbsp; 0.10 &nbsp; &nbsp; &nbsp;45.80 us &nbsp; &nbsp; &nbsp;11.00 us &nbsp; &nbsp; 262.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 2940 &nbsp; &nbsp; OPENDIR<br>&nbsp; &nbsp; &nbsp; 0.30 &nbsp; &nbsp;1744.12 us &nbsp; &nbsp; &nbsp;11.00 us &nbsp; 23006.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;219 &nbsp; &nbsp; &nbsp; &nbsp;READ<br>&nbsp; &nbsp; &nbsp; 0.42 &nbsp; &nbsp; &nbsp;40.12 us &nbsp; &nbsp; &nbsp; 7.00 us &nbsp; &nbsp;2013.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;13427 &nbsp; &nbsp; &nbsp; &nbsp;STAT<br>&nbsp; &nbsp; &nbsp; 0.69 &nbsp; &nbsp;1309.23 us &nbsp; &nbsp; &nbsp; 8.00 us &nbsp; 54238.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;675 &nbsp; &nbsp; READDIR<br>&nbsp; &nbsp; &nbsp; 3.33 &nbsp; &nbsp; &nbsp;22.93 us &nbsp; &nbsp; &nbsp; 3.00 us &nbsp; 11924.00 us &nbsp; &nbsp; &nbsp; &nbsp; 186953 &nbsp; &nbsp; &nbsp;ACCESS<br>&nbsp; &nbsp; &nbsp;10.34 &nbsp; &nbsp;2915.11 us &nbsp; &nbsp; &nbsp; 8.00 us &nbsp; 27456.00 us &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; 4566 &nbsp; &nbsp;READDIRP<br>&nbsp; &nbsp; &nbsp;84.59 &nbsp; &nbsp; 103.58 us &nbsp; &nbsp; &nbsp;14.00 us &nbsp; 51079.00 us &nbsp; &nbsp; &nbsp; &nbsp;1050757 &nbsp; &nbsp; &nbsp;LOOKUP<br><br>&nbsp; &nbsp; Duration : 78200 seconds<br>&nbsp; &nbsp;Data Read : 2517835518 bytes<br>Data Written : 2991808746 bytes<div><br></div><div><b>Iozone-Test</b></div><div><br></div><div>iozone-localfile.txt<span class="Apple-tab-span" style="white-space:pre">        </span>- Iozone Test on local filesystem</div><div>iozone-glusterfile.txt<span class="Apple-tab-span" style="white-space:pre">        </span>- Iozone GlusterFS</div><div><br></div><div></div></body></html>