<html><head><meta http-equiv="Content-Type" content="text/html charset=us-ascii"></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; ">I was wondering if anyone on this list has run into this problem. When creating/mounting RDMA volumes of ~half dozen or less nodes - I am able to successfully create, start, and mount these RDMA only volumes.&nbsp;<div><br></div><div>However if I try to scale this to 20, 50, or even 100 nodes RDMA only volumes completely fall over on themselves. Some of the basic symptoms I'm seeing are:</div><div><br></div><div>* Volume create always completes successfully, however when you go to start the node it will report failure - only to have the volume info command for that volume state that they are started</div><div>* Attempting to mount this "started" volume results in a failure to mount/hanging at the mount process</div><div>* Attempting to stop this "started" volume results in a failure, with no error/success reported (the command simply times out and gives an empty status result)</div><div>* Attempting to delete this "started" volume also results in failure - without any status of error/success reported</div><div><br></div><div>In order to clear the state, I have to stop/killall gluster processes, then respawn them. After this is completed the volume info command still shows the volume as started, however I can now successfully stop/delete the volume with a status of success:</div><div><br></div><div>root@cs1-p:~# gluster volume stop perftest</div><div>Stopping volume will make its data inaccessible. Do you want to continue? (y/n) y</div><div>volume stop: perftest: success</div><div><br></div><div><div>Volume Name: perftest</div><div>Type: Distributed-Replicate</div><div>Volume ID: ef206a76-7b26-4c12-9ccf-b3d250f36403</div><div>Status: Stopped</div><div>Number of Bricks: 50 x 2 = 100</div><div>Transport-type: rdma</div></div><div><br></div><div>root@cs1-p:~# gluster volume delete perftest</div><div>Deleting volume will erase all information about the volume. Do you want to continue? (y/n) y</div><div>volume delete: perftest: success</div><div><br></div><div>If there is a known workaround to this - please let me know - until then:&nbsp;<a href="https://bugzilla.redhat.com/show_bug.cgi?id=985424">https://bugzilla.redhat.com/show_bug.cgi?id=985424</a></div><div><br></div><div><br></div><div>&nbsp;</div></body></html>