Hi there<br><br>The only time i setup a gluster &quot;distributed scratch&quot; like Michael is doing, <br>( 3.0.5 Debian packages ) i too choose IPoIB simply because i could not get rdma working at all. <br>Time was short and IPoIB &quot;Just worked&quot; well enough for our demand at the time, so i didn&#39;t looked into this issue. Plus, pinging and ssh&#39;ing into a node through the IB interface comes handy when diagnosing and fixing networking issues.<br>
<br>Em quarta-feira, 11 de abril de 2012, Sabuj Pattanayek&lt;<a href="mailto:sabujp@gmail.com">sabujp@gmail.com</a>&gt; escreveu:<br>&gt; I wonder if it&#39;s possible to have both rdma and ipoib served by a<br>&gt; single glusterfsd so I can test this? I guess so, since it&#39;s just a<br>
&gt; tcp mount?<br>&gt;<br>&gt; On Wed, Apr 11, 2012 at 1:43 PM, Harry Mangalam &lt;<a href="mailto:harry.mangalam@uci.edu">harry.mangalam@uci.edu</a>&gt; wrote:<br>&gt;&gt; On Tuesday 10 April 2012 15:47:08 Bryan Whitehead wrote:<br>
&gt;&gt;<br>&gt;&gt;&gt; with my infiniband setup I found my performance was much better by<br>&gt;&gt;<br>&gt;&gt;&gt; setting up a TCP network over infiniband and then using pure tcp as<br>&gt;&gt;<br>&gt;&gt;&gt; the transport with my gluster volume. For the life of me I couldn&#39;t<br>
&gt;&gt;<br>&gt;&gt;&gt; get rdma to beat tcp.<br>&gt;&gt;<br>&gt;&gt; Thanks for that data point, Brian.<br>&gt;&gt;<br>&gt;&gt; Very interesting. Is this a common experience? The RDMA experience has not<br>&gt;&gt; been a very smooth one for me and doing everything with IPoIB would save a<br>
&gt;&gt; lot of headaches, especially if it&#39;s also higher performance.<br>&gt;&gt;<br>&gt;&gt; hjm<br>&gt;&gt;<br>&gt;&gt; --<br>&gt;&gt;<br>&gt;&gt; Harry Mangalam - Research Computing, OIT, Rm 225 MSTB, UC Irvine<br>
&gt;&gt;<br>&gt;&gt; [ZOT 2225] / 92697 Google Voice Multiplexer: (949) 478-4487<br>&gt;&gt;<br>&gt;&gt; 415 South Circle View Dr, Irvine, CA, 92697 [shipping]<br>&gt;&gt;<br>&gt;&gt; MSTB Lat/Long: (33.642025,-117.844414) (paste into Google Maps)<br>
&gt;&gt;<br>&gt;&gt; --<br>&gt;&gt;<br>&gt;&gt;<br>&gt;&gt; _______________________________________________<br>&gt;&gt; Gluster-users mailing list<br>&gt;&gt; <a href="mailto:Gluster-users@gluster.org">Gluster-users@gluster.org</a><br>
&gt;&gt; <a href="http://gluster.org/cgi-bin/mailman/listinfo/gluster-users">http://gluster.org/cgi-bin/mailman/listinfo/gluster-users</a><br>&gt;&gt;<br>&gt; _______________________________________________<br>&gt; Gluster-users mailing list<br>
&gt; <a href="mailto:Gluster-users@gluster.org">Gluster-users@gluster.org</a><br>&gt; <a href="http://gluster.org/cgi-bin/mailman/listinfo/gluster-users">http://gluster.org/cgi-bin/mailman/listinfo/gluster-users</a><br>&gt;