<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:st1="urn:schemas-microsoft-com:office:smarttags" xmlns="http://www.w3.org/TR/REC-html40">

<head>
<META HTTP-EQUIV="Content-Type" CONTENT="text/html; charset=us-ascii">
<meta name=Generator content="Microsoft Word 11 (filtered medium)">
<!--[if !mso]>
<style>
v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style>
<![endif]--><o:SmartTagType
 namespaceuri="urn:schemas-microsoft-com:office:smarttags" name="PersonName"/>
<!--[if !mso]>
<style>
st1\:*{behavior:url(#default#ieooui) }
</style>
<![endif]-->
<style>
<!--
 /* Font Definitions */
 @font-face
        {font-family:Tahoma;
        panose-1:2 11 6 4 3 5 4 4 2 4;}
 /* Style Definitions */
 p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman";}
a:link, span.MsoHyperlink
        {color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {color:blue;
        text-decoration:underline;}
p
        {mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:12.0pt;
        font-family:"Times New Roman";}
span.EmailStyle18
        {mso-style-type:personal-reply;
        font-family:Arial;
        color:navy;}
@page Section1
        {size:8.5in 11.0in;
        margin:1.0in 1.25in 1.0in 1.25in;}
div.Section1
        {page:Section1;}
-->
</style>

</head>

<body lang=EN-US link=blue vlink=blue>

<div class=Section1>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>Well, I ended up finding that I had to
mount with &#8216;glusterfs&#8217; rather than using a mount command to get
this to work properly. Perhaps it was an error on my part there, but I got it
working in general.<o:p></o:p></span></font></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'><o:p>&nbsp;</o:p></span></font></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>The issue now is that when disabling
direct-io it brings gluster from at-disk speeds to a crawling 18-24M/s. This
means when I want to export through NFS it further slows things down, somewhere
in the range of 4-7M/s. Given that this is over gigabit Ethernet I should
expect ~100M/s in good conditions and when simply reading/writing plain files
over NFS this is the case. I did try unfs3 and turned back on direct-io and
there are speed increases, but even when using plain filesystem, unfs seems to
only be able to run about 24M/s tops. I&#8217;m not sure if this is an issue
with the fuse lib/module, but certainly if I want to do any real work over NFS
this isn&#8217;t going to be a workable solution (either way, unfs or plain nfs
with disable-direct-io).<o:p></o:p></span></font></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'><o:p>&nbsp;</o:p></span></font></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>Any further suggestions to get this
working (different fuse library, etc.) or at this point is this just how things
will be with gluster+nfs?<o:p></o:p></span></font></p>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'><o:p>&nbsp;</o:p></span></font></p>

<div>

<p class=MsoNormal><font size=2 color=navy face=Arial><span style='font-size:
10.0pt;font-family:Arial;color:navy'>Justice London<br>
E-mail:&nbsp; <a href="mailto:jlondon@lawinfo.com">jlondon@lawinfo.com</a><br>
<br>
</span></font><o:p></o:p></p>

</div>

<div>

<div class=MsoNormal align=center style='text-align:center'><font size=3
face="Times New Roman"><span style='font-size:12.0pt'>

<hr size=2 width="100%" align=center tabindex=-1>

</span></font></div>

<p class=MsoNormal><b><font size=2 face=Tahoma><span style='font-size:10.0pt;
font-family:Tahoma;font-weight:bold'>From:</span></font></b><font size=2
face=Tahoma><span style='font-size:10.0pt;font-family:Tahoma'> Raghavendra G
[mailto:raghavendra.hg@gmail.com] <br>
<b><span style='font-weight:bold'>Sent:</span></b> Tuesday, April 14, 2009 6:15
AM<br>
<b><span style='font-weight:bold'>To:</span></b> Justice London<br>
<b><span style='font-weight:bold'>Cc:</span></b> <st1:PersonName w:st="on">gluster-users@gluster.org</st1:PersonName><br>
<b><span style='font-weight:bold'>Subject:</span></b> Re: [Gluster-users] NFS
export under Centos 5.3</span></font><o:p></o:p></p>

</div>

<p class=MsoNormal><font size=3 face="Times New Roman"><span style='font-size:
12.0pt'><o:p>&nbsp;</o:p></span></font></p>

<p class=MsoNormal style='margin-bottom:12.0pt'><font size=3
face="Times New Roman"><span style='font-size:12.0pt'>Hi,<br>
<br>
glusterfs has to be mounted with direct-io disabled for NFS re-export to work
properly. You can disable direct-io using --disable-direct-io option to
glusterfs.<br>
<br>
regards,<o:p></o:p></span></font></p>

<div>

<p class=MsoNormal><font size=3 face="Times New Roman"><span style='font-size:
12.0pt'>On Mon, Apr 13, 2009 at 11:06 PM, Justice London &lt;<a
href="mailto:jlondon@lawinfo.com">jlondon@lawinfo.com</a>&gt; wrote:<o:p></o:p></span></font></p>

<div link=blue vlink=purple>

<div>

<p><font size=2 face=Arial><span style='font-size:10.0pt;font-family:Arial'>Has
anyone successfully gotten NFS exports of a gluster filesystem to work
properly? When the export is mounted, file-names and folders can be properly
created, but actually writing data to any of these files or folders results in
a permissions/write error. I can send out further details on configs, etc. but
perhaps someone has simply encountered this before and worked around it.</span></font><o:p></o:p></p>

<p><font size=2 face=Arial><span style='font-size:10.0pt;font-family:Arial'>&nbsp;</span></font><o:p></o:p></p>

<p style='margin-bottom:12.0pt'><font size=2 face=Arial><span style='font-size:
10.0pt;font-family:Arial'>Justice London<br>
E-mail:&nbsp; <a href="mailto:jlondon@lawinfo.com" target="_blank">jlondon@lawinfo.com</a></span></font><o:p></o:p></p>

<p><font size=3 face="Times New Roman"><span style='font-size:12.0pt'>&nbsp;<o:p></o:p></span></font></p>

</div>

</div>

<p class=MsoNormal style='margin-bottom:12.0pt'><font size=3
face="Times New Roman"><span style='font-size:12.0pt'><br>
_______________________________________________<br>
Gluster-users mailing list<br>
<a href="mailto:Gluster-users@gluster.org">Gluster-users@gluster.org</a><br>
<a href="http://zresearch.com/cgi-bin/mailman/listinfo/gluster-users"
target="_blank">http://zresearch.com/cgi-bin/mailman/listinfo/gluster-users</a><o:p></o:p></span></font></p>

</div>

<p class=MsoNormal style='margin-bottom:12.0pt'><font size=3
face="Times New Roman"><span style='font-size:12.0pt'><br>
<br clear=all>
<br>
-- <br>
Raghavendra G<o:p></o:p></span></font></p>

<p><font size=2 face=Arial><span style='font-size:10.0pt;font-family:Arial'>No
virus found in this incoming message.<br>
Checked by AVG - www.avg.com<br>
Version: 8.5.287 / Virus Database: 270.11.54/2056 - Release Date: 04/13/09
05:51:00</span></font><o:p></o:p></p>

</div>

</body>

</html>