<META HTTP-EQUIV="Content-Type" CONTENT="text/html; charset=gb2312">
<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"><head><meta name=Generator content="Microsoft Word 15 (filtered medium)"><style><!--
/* Font Definitions */
@font-face
{font-family:Calibri;
panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
{margin:0cm;
margin-bottom:.0001pt;
font-size:11.0pt;
font-family:"Calibri",sans-serif;
mso-fareast-language:EN-US;}
a:link, span.MsoHyperlink
{mso-style-priority:99;
color:#0563C1;
text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
{mso-style-priority:99;
color:#954F72;
text-decoration:underline;}
pre
{mso-style-priority:99;
mso-style-link:"HTML Vorformatiert Zchn";
margin:0cm;
margin-bottom:.0001pt;
font-size:10.0pt;
font-family:"Courier New";}
span.E-MailFormatvorlage17
{mso-style-type:personal-compose;
font-family:"Calibri",sans-serif;
color:windowtext;}
span.HTMLVorformatiertZchn
{mso-style-name:"HTML Vorformatiert Zchn";
mso-style-priority:99;
mso-style-link:"HTML Vorformatiert";
font-family:"Courier New";
mso-fareast-language:DE;}
.MsoChpDefault
{mso-style-type:export-only;
font-family:"Calibri",sans-serif;
mso-fareast-language:EN-US;}
@page WordSection1
{size:612.0pt 792.0pt;
margin:70.85pt 70.85pt 2.0cm 70.85pt;}
div.WordSection1
{page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body lang=DE link="#0563C1" vlink="#954F72"><div class=WordSection1><p class=MsoNormal><span lang=EN-US>Hi everyone, <o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US><o:p> </o:p></span></p><p class=MsoNormal><span lang=EN-US>I¡¯m facing the exact same issue on my installation. Nfs.log entries indicate that something is blocking the gluster nfs from registering with rpcbind. <o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US><o:p> </o:p></span></p><p class=MsoNormal><span lang=EN-US> [root@ovirt-one ~]# rpcinfo -p<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> program vers proto port service<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100000 4 tcp 111 portmapper<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100000 3 tcp 111 portmapper<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100000 2 tcp 111 portmapper<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100000 4 udp 111 portmapper<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100000 3 udp 111 portmapper<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100000 2 udp 111 portmapper<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100005 3 tcp 38465 mountd<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100005 1 tcp 38466 mountd<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100003 3 tcp 2049 nfs<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100227 3 tcp 2049 nfs_acl<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100021 3 udp 34343 nlockmgr<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100021 4 udp 34343 nlockmgr<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100021 3 tcp 54017 nlockmgr<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100021 4 tcp 54017 nlockmgr<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100024 1 udp 39097 status<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100024 1 tcp 53471 status<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US> 100021 1 udp 715 nlockmgr<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US><o:p> </o:p></span></p><p class=MsoNormal><span lang=EN-US>I¡¯m sure that I¡¯m not using the system NFS Server and I didn¡¯t mount any nfs share.<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US><o:p> </o:p></span></p><p class=MsoNormal><span lang=EN-US>@Tibor: Did you solve that issue somehow ? <o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US><o:p> </o:p></span></p><p class=MsoNormal><span lang=EN-US>Best, <o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US><o:p> </o:p></span></p><p class=MsoNormal><span lang=EN-US>Sven <o:p></o:p></span></p><div style='mso-element:para-border-div;border:none;border-bottom:solid windowtext 1.0pt;padding:0cm 0cm 1.0pt 0cm'><p class=MsoNormal style='border:none;padding:0cm'><span lang=EN-US><o:p> </o:p></span></p></div><p class=MsoNormal><span lang=EN-US><o:p> </o:p></span></p><pre><span lang=EN-US>Hi,<o:p></o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US>Thank you for you reply.<o:p></o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US>I did your recommendations, but there are no changes.<o:p></o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US>In the nfs.log there are no new things.<o:p></o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US>[</span><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a><span lang=EN-US> glusterfs]# reboot<o:p></o:p></span></pre><pre><span lang=EN-US>Connection to 172.16.0.10 closed by remote host.<o:p></o:p></span></pre><pre><span lang=EN-US>Connection to 172.16.0.10 closed.<o:p></o:p></span></pre><pre><span lang=EN-US>[</span><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>tdemeter at sirius-31</span></a><span lang=EN-US> ~]$ ssh </span><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at 172.16.0.10</span></a><span lang=EN-US><o:p></o:p></span></pre><pre><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at 172.16.0.10</span></a><span lang=EN-US>'s password: <o:p></o:p></span></pre><pre><span lang=EN-US>Last login: Mon Oct 20 11:02:13 2014 from 192.168.133.106<o:p></o:p></span></pre><pre><span lang=EN-US>[</span><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a><span lang=EN-US> ~]# systemctl status nfs.target <o:p></o:p></span></pre><pre><span lang=EN-US>nfs.target - Network File System Server<o:p></o:p></span></pre><pre><span lang=EN-US> Loaded: loaded (/usr/lib/systemd/system/nfs.target; disabled)<o:p></o:p></span></pre><pre><span lang=EN-US> Active: inactive (dead)<o:p></o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US>[</span><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a><span lang=EN-US> ~]# gluster volume status engine<o:p></o:p></span></pre><pre><span lang=EN-US>Status of volume: engine<o:p></o:p></span></pre><pre><span lang=EN-US>Gluster process Port Online Pid<o:p></o:p></span></pre><pre><span lang=EN-US>------------------------------------------------------------------------------<o:p></o:p></span></pre><pre><span lang=EN-US>Brick gs00.itsmart.cloud:/gluster/engine0 50160 Y 3271<o:p></o:p></span></pre><pre><span lang=EN-US>Brick gs01.itsmart.cloud:/gluster/engine1 50160 Y 595<o:p></o:p></span></pre><pre><span lang=EN-US>NFS Server on localhost N/A N N/A<o:p></o:p></span></pre><pre><span lang=EN-US>Self-heal Daemon on localhost N/A Y 3286<o:p></o:p></span></pre><pre><span lang=EN-US>NFS Server on gs01.itsmart.cloud 2049 Y 6951<o:p></o:p></span></pre><pre><span lang=EN-US>Self-heal Daemon on gs01.itsmart.cloud N/A Y 6958<o:p></o:p></span></pre><pre><span lang=EN-US> <o:p></o:p></span></pre><pre><span lang=EN-US>Task Status of Volume engine<o:p></o:p></span></pre><pre><span lang=EN-US>------------------------------------------------------------------------------<o:p></o:p></span></pre><pre><span lang=EN-US>There are no active volume tasks<o:p></o:p></span></pre><pre><span lang=EN-US> <o:p></o:p></span></pre><pre><span lang=EN-US>[</span><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a><span lang=EN-US> ~]# systemctl status <o:p></o:p></span></pre><pre><span lang=EN-US>Display all 262 possibilities? (y or n)<o:p></o:p></span></pre><pre><span lang=EN-US>[</span><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a><span lang=EN-US> ~]# systemctl status nfs-lock<o:p></o:p></span></pre><pre><span lang=EN-US>nfs-lock.service - NFS file locking service.<o:p></o:p></span></pre><pre><span lang=EN-US> Loaded: loaded (/usr/lib/systemd/system/nfs-lock.service; enabled)<o:p></o:p></span></pre><pre><span lang=EN-US> Active: inactive (dead)<o:p></o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US>[</span><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a><span lang=EN-US> ~]# systemctl stop nfs-lock<o:p></o:p></span></pre><pre><span lang=EN-US>[</span><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a><span lang=EN-US> ~]# systemctl restart gluster<o:p></o:p></span></pre><pre><span lang=EN-US>glusterd.service glusterfsd.service gluster.mount <o:p></o:p></span></pre><pre><span lang=EN-US>[</span><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a><span lang=EN-US> ~]# systemctl restart gluster<o:p></o:p></span></pre><pre><span lang=EN-US>glusterd.service glusterfsd.service gluster.mount <o:p></o:p></span></pre><pre><span lang=EN-US>[</span><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a><span lang=EN-US> ~]# systemctl restart glusterfsd.service <o:p></o:p></span></pre><pre><span lang=EN-US>[</span><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a><span lang=EN-US> ~]# systemctl restart glusterd.service <o:p></o:p></span></pre><pre><span lang=EN-US>[</span><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a><span lang=EN-US> ~]# gluster volume status engine<o:p></o:p></span></pre><pre><span lang=EN-US>Status of volume: engine<o:p></o:p></span></pre><pre><span lang=EN-US>Gluster process Port Online Pid<o:p></o:p></span></pre><pre><span lang=EN-US>------------------------------------------------------------------------------<o:p></o:p></span></pre><pre><span lang=EN-US>Brick gs00.itsmart.cloud:/gluster/engine0 50160 Y 5140<o:p></o:p></span></pre><pre><span lang=EN-US>Brick gs01.itsmart.cloud:/gluster/engine1 50160 Y 2037<o:p></o:p></span></pre><pre><span lang=EN-US>NFS Server on localhost N/A N N/A<o:p></o:p></span></pre><pre><span lang=EN-US>Self-heal Daemon on localhost N/A N N/A<o:p></o:p></span></pre><pre><span lang=EN-US>NFS Server on gs01.itsmart.cloud 2049 Y 6951<o:p></o:p></span></pre><pre><span lang=EN-US>Self-heal Daemon on gs01.itsmart.cloud N/A Y 6958<o:p></o:p></span></pre><pre><span lang=EN-US> <o:p></o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US>Any other idea?<o:p></o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US>Tibor<o:p></o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US><o:p> </o:p></span></pre><pre><span lang=EN-US>----- Eredeti üzenet -----<o:p></o:p></span></pre><pre><span lang=EN-US>><i> On Mon, Oct 20, 2014 at 09:04:2.8AM +0200, Demeter Tibor wrote:<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > Hi,<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > This is the full nfs.log after delete & reboot.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > It is refers to portmap registering problem.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [</i></span><i><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a></i><i><span lang=EN-US> glusterfs]# cat nfs.log<o:p></o:p></span></i></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.221136] I [glusterfsd.c:1959:main]<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > 0-/usr/sbin/glusterfs: Started running /usr/sbin/glusterfs version 3.5.2<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > (/usr/sbin/glusterfs -s localhost --volfile-id gluster/nfs -p<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > /var/lib/glusterd/nfs/run/nfs.pid -l /var/log/glusterfs/nfs.log -S<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > /var/run/567e0bba7ad7102eae3049e2ad6c3ed7.socket)<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.224444] I [socket.c:3561:socket_init]<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > 0-socket.glusterfsd: SSL support is NOT enabled<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.224475] I [socket.c:3576:socket_init]<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > 0-socket.glusterfsd: using system polling thread<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.224654] I [socket.c:3561:socket_init] 0-glusterfs: SSL<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > support is NOT enabled<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.224667] I [socket.c:3576:socket_init] 0-glusterfs:<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > using system polling thread<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.235876] I<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [rpcsvc.c:2127:rpcsvc_set_outstanding_rpc_limit] 0-rpc-service: Configured<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > rpc.outstanding-rpc-limit with value 16<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.254087] I [socket.c:3561:socket_init]<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > 0-socket.nfs-server: SSL support is NOT enabled<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.254116] I [socket.c:3576:socket_init]<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > 0-socket.nfs-server: using system polling thread<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.255241] I [socket.c:3561:socket_init]<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > 0-socket.nfs-server: SSL support is NOT enabled<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.255264] I [socket.c:3576:socket_init]<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > 0-socket.nfs-server: using system polling thread<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.257279] I [socket.c:3561:socket_init]<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > 0-socket.nfs-server: SSL support is NOT enabled<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.257315] I [socket.c:3576:socket_init]<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > 0-socket.nfs-server: using system polling thread<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.258135] I [socket.c:3561:socket_init] 0-socket.NLM:<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > SSL support is NOT enabled<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.258157] I [socket.c:3576:socket_init] 0-socket.NLM:<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > using system polling thread<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.293724] E<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [rpcsvc.c:1314:rpcsvc_program_register_portmap] 0-rpc-service: Could not<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > register with portmap<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.293760] E [nfs.c:332:nfs_init_versions] 0-nfs: Program<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > NLM4 registration failed<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> The above line suggests that there already is a service registered at<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> portmapper for the NLM4 program/service. This happens when the kernel<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> module 'lockd' is loaded. The kernel NFS-client and NFS-server depend on<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> this, but unfortunately it conflicts with the Gluster/nfs server.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> Could you verify that the module is loaded?<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> - use 'lsmod | grep lockd' to check the modules<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> - use 'rpcinfo | grep nlockmgr' to check the rpcbind registrations<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> Make sure that you do not mount any NFS exports on the Gluster server.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> Unmount all NFS mounts.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> You mentioned you are running CentOS-7, which is systemd based. You<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> should be able to stop any conflicting NFS services like this:<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> # systemctl stop nfs-lock.service<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> # systemctl stop nfs.target<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> # systemctl disable nfs.target<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> If all these services cleanup themselves, you should be able to start<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> the Gluster/nfs service:<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> # systemctl restart glusterd.service<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> In case some bits are still lingering around, it might be easier to<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> reboot after disabling the 'nfs.target'.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.293771] E [nfs.c:1312:init] 0-nfs: Failed to<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > initialize protocols<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.293777] E [xlator.c:403:xlator_init] 0-nfs-server:<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > Initialization of volume 'nfs-server' failed, review your volfile again<o:p></o:p></i></span></pre><pre>><i> > [2014-10-20 06:48:43.293783] E [graph.c:307:glusterfs_graph_init]<o:p></o:p></i></pre><pre><span lang=EN-US>><i> > 0-nfs-server: initializing translator failed<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [2014-10-20 06:48:43.293789] E [graph.c:502:glusterfs_graph_activate]<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > 0-graph: init failed<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > pending frames:<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > frame : type(0) op(0)<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > patchset: </i></span><i><a href="git://git.gluster.com/glusterfs.git"><span lang=EN-US>git://git.gluster.com/glusterfs.git</span></a></i><i><span lang=EN-US><o:p></o:p></span></i></pre><pre><span lang=EN-US>><i> > signal received: 11<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > time of crash: 2014-10-20 06:48:43configuration details:<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > argp 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > backtrace 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > dlfcn 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > fdatasync 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > libpthread 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > llistxattr 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > setfsid 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > spinlock 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > epoll.h 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > xattr.h 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > st_atim.tv_nsec 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > package-string: glusterfs 3.5.2<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [</i></span><i><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a></i><i><span lang=EN-US> glusterfs]# systemctl status portma<o:p></o:p></span></i></pre><pre><span lang=EN-US>><i> > portma.service<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > Loaded: not-found (Reason: No such file or directory)<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > Active: inactive (dead)<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > Also I have checked the rpcbind service.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [</i></span><i><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a></i><i><span lang=EN-US> glusterfs]# systemctl status rpcbind.service<o:p></o:p></span></i></pre><pre><span lang=EN-US>><i> > rpcbind.service - RPC bind service<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > Loaded: loaded (/usr/lib/systemd/system/rpcbind.service; enabled)<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > Active: active (running) since h 2014-10-20 08:48:39 CEST; 2min 52s ago<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > Process: 1940 ExecStart=/sbin/rpcbind -w ${RPCBIND_ARGS} (code=exited,<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > status=0/SUCCESS)<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > Main PID: 1946 (rpcbind)<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > CGroup: /system.slice/rpcbind.service<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > ©¸©¤1946 /sbin/rpcbind -w<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > okt 20 08:48:39 node0.itsmart.cloud systemd[1]: Starting RPC bind<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > service...<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > okt 20 08:48:39 node0.itsmart.cloud systemd[1]: Started RPC bind service.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > The restart does not solve this problem.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > I think this is the problem. Why are "exited" the portmap status?<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> The 'portmap' service has been replaced with 'rpcbind' since RHEL-6.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> They have the same functionality, 'rpcbind' just happens to be the newer<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> version.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> Did you file a bug for this already? As Vijay mentions, this crash seems<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> to happen because the Gluster/nfs service fails to initialize correctly<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> and then fails to cleanup correctly. The cleanup should get fixed, and<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> we should also give an easier to understand error message.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> Thanks,<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> Niels<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > On node1 is ok:<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > [</i></span><i><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node1</span></a></i><i><span lang=EN-US> ~]# systemctl status rpcbind.service<o:p></o:p></span></i></pre><pre><span lang=EN-US>><i> > rpcbind.service - RPC bind service<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > Loaded: loaded (/usr/lib/systemd/system/rpcbind.service; enabled)<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > Active: active (running) since p 2014-10-17 19:15:21 CEST; 2 days ago<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > Main PID: 1963 (rpcbind)<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > CGroup: /system.slice/rpcbind.service<o:p></o:p></i></span></pre><pre>><i> > ©¸©¤1963 /sbin/rpcbind -w<o:p></o:p></i></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > okt 17 19:15:21 node1.itsmart.cloud systemd[1]: Starting RPC bind<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > service...<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > okt 17 19:15:21 node1.itsmart.cloud systemd[1]: Started RPC bind service.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > Thanks in advance<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > Tibor<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > ----- Eredeti üzenet -----<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > On 10/19/2014 06:56 PM, Niels de Vos wrote:<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > > On Sat, Oct 18, 2014 at 01:24:12PM +0200, Demeter Tibor wrote:<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> Hi,<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >><o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> [</i></span><i><a href="http://supercolony.gluster.org/mailman/listinfo/gluster-users"><span lang=EN-US>root at node0</span></a></i><i><span lang=EN-US> ~]# tail -n 20 /var/log/glusterfs/nfs.log<o:p></o:p></span></i></pre><pre>><i> > > >> [2014-10-18 07:41:06.136035] E [graph.c:307:glusterfs_graph_init]<o:p></o:p></i></pre><pre><span lang=EN-US>><i> > > >> 0-nfs-server: initializing translator failed<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> [2014-10-18 07:41:06.136040] E [graph.c:502:glusterfs_graph_activate]<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> 0-graph: init failed<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> pending frames:<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> frame : type(0) op(0)<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >><o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> patchset: </i></span><i><a href="git://git.gluster.com/glusterfs.git"><span lang=EN-US>git://git.gluster.com/glusterfs.git</span></a></i><i><span lang=EN-US><o:p></o:p></span></i></pre><pre><span lang=EN-US>><i> > > >> signal received: 11<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> time of crash: 2014-10-18 07:41:06configuration details:<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> argp 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> backtrace 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> dlfcn 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> fdatasync 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> libpthread 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> llistxattr 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> setfsid 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> spinlock 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> epoll.h 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> xattr.h 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> st_atim.tv_nsec 1<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > >> package-string: glusterfs 3.5.2<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > ><o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > > This definitely is a gluster/nfs issue. For whatever reasone, the<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > > gluster/nfs server crashes :-/ The log does not show enough details,<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > > some more lines before this are needed.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > ><o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > I wonder if the crash is due to a cleanup after the translator<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > initialization failure. The complete logs might help in understanding<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > why the initialization failed.<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > <o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > -Vijay<o:p></o:p></i></span></pre><pre><span lang=EN-US>><i> > > <o:p></o:p></i></span></pre><pre>><i> > > <o:p></o:p></i></pre><pre>><o:p> </o:p></pre><p class=MsoNormal><span lang=EN-US style='font-size:10.0pt;font-family:"Courier New";mso-fareast-language:DE'><o:p> </o:p></span></p></div></body></html>