<div dir="ltr"><div style><font face="courier new, monospace">Hello, we&#39;re seeing lots of errors like this in the nfs.log file.   We have a 4-brick distributed replicated volume.</font></div><div style><font face="courier new, monospace">I have noticed in discussion that there is an issue with the setting of the rdma.listen-port, but I don&#39;t know where to change</font></div>
<div style><font face="courier new, monospace">that or if that&#39;s really the issue.   Beyond the discussion, I&#39;d really love to see an example by <b>someone who has actually fixed</b></font></div><div style><font face="courier new, monospace">the problem, because I so often feel like I&#39;m living in the strangely split-brained Gluster world, where setup is very simple,</font></div>
<div style><font face="courier new, monospace">elegant, and clean, but when problems /do/ appear, it&#39;s difficult to know what to do.   I saw a posting about how to</font></div><div style><font face="courier new, monospace">change the transport type by deleting and recreating the volume, but I&#39;d really more like to know what these log errors are telling me and why the clients are refusing the connection.  Anyone have an answer?</font></div>
<div style><span style="font-family:&#39;courier new&#39;,monospace"><br></span></div><div style><span style="font-family:&#39;courier new&#39;,monospace">Matt Temple </span></div><div><font face="courier new, monospace"><br>
</font></div><div><font face="courier new, monospace"><br></font></div><div><font face="courier new, monospace">[2013-01-30 10:17:40.605867] W [rdma.c:4521:gf_rdma_handshake_pollerr] (--&gt;/usr/sbin/glusterfs(main+0x58a) [0x40741a] (--&gt;/usr/lib64/libglusterfs.so.0() [0x3333c3ed14] (--&gt;/usr/lib64/glusterfs/3.3.1/rpc-transport/rdma.so(+0x80f8) [0x7fa4dd3160f8]))) 0-rpc-transport/rdma: gf2-client-1: peer () disconnected, cleaning up</font></div>
<div><font face="courier new, monospace">[2013-01-30 10:17:40.608512] E [rdma.c:4604:tcp_connect_finish] 0-gf2-client-2: tcp connect to  failed (Connection refused)</font></div><div><font face="courier new, monospace">[2013-01-30 10:17:40.608624] W [rdma.c:4187:gf_rdma_disconnect] (--&gt;/usr/sbin/glusterfs(main+0x58a) [0x40741a] (--&gt;/usr/lib64/libglusterfs.so.0() [0x3333c3ed14] (--&gt;/usr/lib64/glusterfs/3.3.1/rpc-transport/rdma.so(+0x8210) [0x7fa4dd316210]))) 0-gf2-client-2: disconnect called (peer:)</font></div>
<div><font face="courier new, monospace">[2013-01-30 10:17:40.608695] W [rdma.c:4521:gf_rdma_handshake_pollerr] (--&gt;/usr/sbin/glusterfs(main+0x58a) [0x40741a] (--&gt;/usr/lib64/libglusterfs.so.0() [0x3333c3ed14] (--&gt;/usr/lib64/glusterfs/3.3.1/rpc-transport/rdma.so(+0x80f8) [0x7fa4dd3160f8]))) 0-rpc-transport/rdma: gf2-client-2: peer () disconnected, cleaning up</font></div>
<div><font face="courier new, monospace">[2013-01-30 10:17:40.611499] E [rdma.c:4604:tcp_connect_finish] 0-gf2-client-3: tcp connect to  failed (Connection refused)</font></div><div><font face="courier new, monospace">[2013-01-30 10:17:40.611612] W [rdma.c:4187:gf_rdma_disconnect] (--&gt;/usr/sbin/glusterfs(main+0x58a) [0x40741a] (--&gt;/usr/lib64/libglusterfs.so.0() [0x3333c3ed14] (--&gt;/usr/lib64/glusterfs/3.3.1/rpc-transport/rdma.so(+0x8210) [0x7fa4dd316210]))) 0-gf2-client-3: disconnect called (peer:)</font></div>
<div><font face="courier new, monospace">[2013-01-30 10:17:40.611682] W [rdma.c:4521:gf_rdma_handshake_pollerr] (--&gt;/usr/sbin/glusterfs(main+0x58a) [0x40741a] (--&gt;/usr/lib64/libglusterfs.so.0() [0x3333c3ed14] (--&gt;/usr/lib64/glusterfs/3.3.1/rpc-transport/rdma.so(+0x80f8) [0x7fa4dd3160f8]))) 0-rpc-transport/rdma: gf2-client-3: peer () disconnected, cleaning up</font></div>
<div><br></div><div>------<br>Matt Temple<br>Director, Research Computing<br>Dana-Farber Cancer Institute.<br></div>
</div>