<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.0 TRANSITIONAL//EN">
<HTML>
<HEAD>
  <META HTTP-EQUIV="Content-Type" CONTENT="text/html; CHARSET=UTF-8">
  <META NAME="GENERATOR" CONTENT="GtkHTML/3.28.3">
</HEAD>
<BODY>
Hi,<BR>
<BR>
        <BR>
        We got a huge problem on our sun grid engine cluster with glusterfs 3.3.0. Could somebody help me?<BR>
<BR>
<BR>
        Based on my understanding, if a folder is removed and recreated on other client node, a program that tries to create a new file under the folder fails very often.<BR>
<BR>
<BR>
        We partially fixed this problem by &quot;ls&quot; the folder before doing anything in our command, however, Sun Grid Engine tries to create a new log file&nbsp; before executing our script. We often get the error message &quot;no such file or directory&quot; in SGE log and cannot do anything about it.<BR>
<BR>
<BR>
        flush-behind is already turned off. What's the next thing we should try? <BR>
<BR>
<BR>
Error log on client is <BR>
<BR>
[2012-09-10 11:18:48.129102] W [client3_1-fops.c:2630:client3_1_lookup_cbk] 0-home-client-0: remote operation failed: Stale NFS file handle. Path: XXXXXXXXXXXXXX (488a7270-1039-473b-9122-ae07b9e2c617)<BR>
[2012-09-10 11:18:48.129162] W [client3_1-fops.c:2630:client3_1_lookup_cbk] 0-home-client-1: remote operation failed: Stale NFS file handle. Path: XXXXXXXXXXXXXX (488a7270-1039-473b-9122-ae07b9e2c617)<BR>
<BR>
<BR>
Error log on two brick severs are<BR>
<BR>
<BR>
[2012-09-10 11:18:48.046828] I [server3_1-fops.c:1707:server_stat_cbk] 0-home-server: 3531033: STAT (null) (--) ==&gt; -1 (No such file or directory)<BR>
[2012-09-10 11:18:48.047176] I [server3_1-fops.c:1707:server_stat_cbk] 0-home-server: 3531035: STAT (null) (--) ==&gt; -1 (No such file or directory)<BR>
<BR>
<BR>
[2012-09-10 11:18:48.054315] I [server3_1-fops.c:1707:server_stat_cbk] 0-home-server: 5347741: STAT (null) (--) ==&gt; -1 (No such file or directory)<BR>
[2012-09-10 11:18:48.054544] I [server3_1-fops.c:1707:server_stat_cbk] 0-home-server: 5347742: STAT (null) (--) ==&gt; -1 (No such file or directory)<BR>
[2012-09-10 11:18:48.056036] I [server3_1-fops.c:1707:server_stat_cbk] 0-home-server: 5347746: STAT (null) (--) ==&gt; -1 (No such file or directory)<BR>
<BR>
<BR>
<BR>
Best,<BR>
Manhong
</BODY>
</HTML>