<html dir="ltr"><head>

<meta http-equiv="Content-Type" content="text/html; charset=koi8-r">

<style title="owaParaStyle">P {

        MARGIN-TOP: 0px; MARGIN-BOTTOM: 0px

}

</style>

</head>

<body ocsi="x">

<div dir="ltr"><font color="#000000" size="2" face="Tahoma">I test GlusterFS on this equipment:<br>

&nbsp;<br>

Backend LSI 7000, 80Tb, 24LUN's<br>

4 OSS, Intel based&nbsp; server, connect to LSI via&nbsp; 8Gb FiberChanel, 12Gb RAM<br>

1 Intel based main server, connect to OSS via QDR InfiniBand, 12Gb RAM<br>

and 16 Load Generators with 2 Xeon X5670, on board, 12Gb RAM.&nbsp; QDR InfiniBand<br>

<div dir="ltr"><font size="2" face="tahoma">I use IOR for test , and get next results:</font></div>

<div dir="ltr"><font size="2" face="tahoma"></font>&nbsp;</div>

<div dir="ltr">&nbsp;/install/mpi/bin/mpirun --hostfile /gluster/C/nodes_1p -np 16 /gluster/C/IOR -F -k -b10G -t1m<br>

IOR-2.10.3: MPI Coordinated Test of Parallel I/O</div>

<div dir="ltr">Run began: Tue Oct 19 09:27:03 2010<br>

Command line used: /gluster/C/IOR -F -k -b10G -t1m<br>

Machine: Linux node1</div>

<div dir="ltr">Summary:<br>

&nbsp;api&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; = POSIX<br>

&nbsp;test filename&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; = testFile<br>

&nbsp;access&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; = file-per-process<br>

&nbsp;ordering in a file = sequential offsets<br>

&nbsp;ordering inter file= no tasks offsets<br>

&nbsp;clients&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; = 16 (1 per node)<br>

&nbsp;repetitions&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; = 1<br>

&nbsp;xfersize&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; = 1 MiB<br>

&nbsp;blocksize&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; = 10 GiB<br>

&nbsp;aggregate filesize = 160 GiB</div>

<div dir="ltr">Operation&nbsp; Max (MiB)&nbsp; Min (MiB)&nbsp; Mean (MiB)&nbsp;&nbsp; Std Dev&nbsp; Max (OPs)&nbsp; Min (OPs)&nbsp; Mean (OPs)&nbsp;&nbsp; Std Dev&nbsp; Mean (s)&nbsp;

<br>

---------&nbsp; ---------&nbsp; ---------&nbsp; ----------&nbsp;&nbsp; -------&nbsp; ---------&nbsp; ---------&nbsp; ----------&nbsp;&nbsp; -------&nbsp; --------<br>

write&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; <strong>1720.80</strong>&nbsp;&nbsp;&nbsp; 1720.80&nbsp;&nbsp;&nbsp;&nbsp; 1720.80&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp; 1720.80&nbsp;&nbsp;&nbsp; 1720.80&nbsp;&nbsp;&nbsp;&nbsp; 1720.80&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp; 95.21174&nbsp;&nbsp; EXCEL<br>

read&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; <strong>1415.64</strong>&nbsp;&nbsp;&nbsp; 1415.64&nbsp;&nbsp;&nbsp;&nbsp; 1415.64&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp; 1415.64&nbsp;&nbsp;&nbsp; 1415.64&nbsp;&nbsp;&nbsp;&nbsp; 1415.64&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00 115.73604&nbsp;&nbsp; EXCEL</div>

<div dir="ltr">Max Write: 1720.80 MiB/sec (1804.39 MB/sec)<br>

Max Read:&nbsp; 1415.64 MiB/sec (1484.40 MB/sec)</div>

<div dir="ltr">Run finished: Tue Oct 19 09:30:34 2010<br>

</div>

<div dir="ltr"><font size="2" face="tahoma"></font>&nbsp;</div>

<div dir="ltr"><font size="2" face="tahoma">Why <strong>read </strong>&lt; <strong>write</strong> ? It's normal for GlusterFS ?

</font></div>

<div dir="ltr"><font size="2" face="tahoma"></font>&nbsp;</div>

<div dir="ltr"><font size="2" face="tahoma">best regards</font></div>

<div dir="ltr"><font size="2" face="tahoma">Aleksandr</font></div>

<div dir="ltr">&nbsp;</div>

</font></div>

<div><font size="2" face="Tahoma">С уважением,<br>

&nbsp; Алексанян Александр<br>

&nbsp; ОАО &quot;Т-Платформы&quot;<br>

&nbsp; Тел: &#43;7(495)744-0980 (1434)</font></div>

</body>

</html>