<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"><head><meta http-equiv=Content-Type content="text/html; charset=us-ascii"><meta name=Generator content="Microsoft Word 14 (filtered medium)"><style><!--
/* Font Definitions */
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:Tahoma;
        panose-1:2 11 6 4 3 5 4 4 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman","serif";}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal-reply;
        font-family:"Arial","sans-serif";
        color:windowtext;
        font-weight:normal;
        font-style:normal;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-family:"Calibri","sans-serif";}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body lang=EN-US link=blue vlink=purple><div class=WordSection1><p class=MsoNormal><span style='font-size:10.0pt;font-family:"Arial","sans-serif"'>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; Do I need to blow up and rebuild the brick to make that happen or can this be set on the fly? Possibly relevant fact: I do not have my IB fabric in place yet but I&#8217;m happy to use IPoIB for this deployment when I do. I included it as a placeholder. <o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.0pt;font-family:"Arial","sans-serif"'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span style='font-size:10.0pt;font-family:"Arial","sans-serif"'>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; Related: any official word on full RDMA support in Gluster 3.x? <o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.0pt;font-family:"Arial","sans-serif"'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span style='font-size:10.0pt;font-family:"Arial","sans-serif"'>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; Thanks,<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.0pt;font-family:"Arial","sans-serif"'>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; ~Mike C. <o:p></o:p></span></p><p class=MsoNormal><a name="_MailEndCompose"><span style='font-size:10.0pt;font-family:"Arial","sans-serif"'><o:p>&nbsp;</o:p></span></a></p><p class=MsoNormal><b><span style='font-size:10.0pt;font-family:"Tahoma","sans-serif"'>From:</span></b><span style='font-size:10.0pt;font-family:"Tahoma","sans-serif"'> gluster-users-bounces@gluster.org [mailto:gluster-users-bounces@gluster.org] <b>On Behalf Of </b>Bryan Whitehead<br><b>Sent:</b> Thursday, January 31, 2013 3:52 PM<br><b>To:</b> Michael Colonno<br><b>Cc:</b> gluster-users<br><b>Subject:</b> Re: [Gluster-users] hanging of mounted filesystem (3.3.1)<o:p></o:p></span></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><div><div><p class=MsoNormal>remove the transport rdma and try again. When using RDMA I've also had extremely bad CPU eating issues.<o:p></o:p></p></div><div><p class=MsoNormal><o:p>&nbsp;</o:p></p></div><div><p class=MsoNormal>I currently run gluster with IPoIB to get the speed of infiniband and the non-crazy cpu usage of rdma gluster.<o:p></o:p></p></div><div><p class=MsoNormal style='margin-bottom:12.0pt'><o:p>&nbsp;</o:p></p><div><p class=MsoNormal>On Thu, Jan 31, 2013 at 9:20 AM, Michael Colonno &lt;<a href="mailto:mike@hpccloudsolutions.com" target="_blank">mike@hpccloudsolutions.com</a>&gt; wrote:<o:p></o:p></p><p class=MsoNormal>&nbsp; &nbsp; &nbsp; &nbsp; Hi All ~<br><br>&nbsp; &nbsp; &nbsp; &nbsp; I created an eight-brick gluster 3.3.1 volume (2x replication) on<br>eight CentOS 6.3 x64 systems. I was able to form and start the volume<br>without issue. I was also able to mount it through /etc/fstab as a native<br>glusterfs mount. I have a couple questions issues at this point:<br><br>&nbsp; &nbsp; &nbsp; &nbsp; - On a client machine, &quot;glusterfs&quot; is not recognized as a valid type<br>unless gluster-server is installed. This seems to contradict the<br>documentation - wanted to make sure I'm not doing something wrong. More a<br>clarification than issue here.<br><br>&nbsp; &nbsp; &nbsp; &nbsp; - The glusterfs process is taking between 50% and 80% CPU on both<br>the brick and client systems (these are fairly powerful, brand new servers).<br><br><br>&nbsp; &nbsp; &nbsp; &nbsp; - No doubt linked to the above, the mounted filesystem hangs<br>indefinitely when accessed. I tried an &quot;ls -a&quot; on the mounted filesystem,<br>for example, which hangs forever. I tested this by mounting a brick system<br>to itself and to a client which is not a brick and the same behavior was<br>observed. Both were glusterfs mounts.<br><br>&nbsp; &nbsp; &nbsp; &nbsp; There is nothing special about my deployment except for the use of<br>transport = tcp,rdma. I am running on Ethernet now but will be migrating to<br>Infiniband after this is debugged.<br><br>&nbsp; &nbsp; &nbsp; &nbsp; Thanks for any advice,<br>&nbsp; &nbsp; &nbsp; &nbsp; ~Mike C.<br><br><br><br><br>_______________________________________________<br>Gluster-users mailing list<br><a href="mailto:Gluster-users@gluster.org">Gluster-users@gluster.org</a><br><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users" target="_blank">http://supercolony.gluster.org/mailman/listinfo/gluster-users</a><o:p></o:p></p></div><p class=MsoNormal><o:p>&nbsp;</o:p></p></div></div></div></body></html>