Can you post the client log files?<div><br></div><div>Avati<br><br><div class="gmail_quote">On Tue, Jun 28, 2011 at 7:42 PM, Pat Haley <span dir="ltr">&lt;<a href="mailto:phaley@mit.edu">phaley@mit.edu</a>&gt;</span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex;">Hi Anand Babu Periasamy,<br>
<br>
Yes, I can read<div class="im"><br>
<br>
/gdata/projects/philex/OAG/<u></u>2011/May16/mdor3km07/<a href="http://coast_den2.in" target="_blank">coast_<u></u>den2.in</a><br>
<br></div>
directly from the backend  disk (specifically: logged onto<br>
machine containing the disk and did a more).<br>
<br>
Furthermore I can read (i.e. &quot;more&quot;) that file other nodes<br>
in our cluster going through gluster.<br>
<br>
Following up on another lead from this list, the TSM software<br>
is not using direct i/o (O_DIRECT).<br>
<br>
<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div class="im">
On Mon, Jun 27, 2011 at 12:08 PM, Pat Haley &lt;<a href="mailto:phaley@mit.edu" target="_blank">phaley@mit.edu</a> &lt;mailto:<a href="mailto:phaley@mit.edu" target="_blank">phaley@mit.edu</a>&gt;&gt; wrote:<br>
<br>
<br>
    Hi<br>
<br>
    We have been trying back-up a glusterfs (v3.1.4) area using<br>
    the Tivoli TSM software to an off-site area.  The back-up<br>
    keeps failing with the following typical error messages<br>
<br>
    06/14/2011 22:22:58 ANS1587W  I/O error reading file attributes for:<br>
    /gdata/projects/philex/OAG/__<u></u>2011/May16/mdor3km10/<a href="http://coast___den2.in" target="_blank">coast___<u></u>den2.in</a><br></div>
    &lt;<a href="http://coast_den2.in" target="_blank">http://coast_den2.in</a>&gt;. errno = 22, Invalid argument<div class="im"><br>
<br>
    06/14/2011 22:22:59 ANS4007E Error processing<br>
    &#39;/gdata/projects/philex/OAG/__<u></u>2011/May16/mdor3km07/<a href="http://coast___den2.in" target="_blank">coast___<u></u>den2.in</a><br></div>
    &lt;<a href="http://coast_den2.in" target="_blank">http://coast_den2.in</a>&gt;&#39;: access to the object is denied<div class="im"><br>
<br>
    We originally thought the problem was bad meta-pointer files,<br>
    but we still experience the failures after deleting all meta-pointer<br>
    files.<br>
<br>
    Has anyone else experienced/solved this problem?<br>
<br>
    -=-=-=-=-=-=-=-=-=-=-=-=-=-=-=<u></u>__-=-=-=-=-=-=-=-=-=-=-=-=-=-=<u></u>-=__-=-=-<br>
    Pat Haley                          Email:  <a href="mailto:phaley@mit.edu" target="_blank">phaley@mit.edu</a><br></div>
    &lt;mailto:<a href="mailto:phaley@mit.edu" target="_blank">phaley@mit.edu</a>&gt;<div class="im"><br>
    Center for Ocean Engineering       Phone:  (617) 253-6824<br></div>
    &lt;tel:%28617%29%20253-6824&gt;<div class="im"><br>
    Dept. of Mechanical Engineering    Fax:    (617) 253-8125<br></div>
    &lt;tel:%28617%29%20253-8125&gt;<div class="im"><br>
    MIT, Room 5-222B                   <a href="http://web.mit.edu/phaley/www/" target="_blank">http://web.mit.edu/phaley/www/</a><br>
    77 Massachusetts Avenue<br>
    Cambridge, MA  02139-4301<br>
    ______________________________<u></u>___________________<br>
    Gluster-users mailing list<br></div>
    <a href="mailto:Gluster-users@gluster.org" target="_blank">Gluster-users@gluster.org</a> &lt;mailto:<a href="mailto:Gluster-users@gluster.org" target="_blank">Gluster-users@gluster.<u></u>org</a>&gt;<div class="im"><br>

    <a href="http://gluster.org/cgi-bin/__mailman/listinfo/gluster-users" target="_blank">http://gluster.org/cgi-bin/__<u></u>mailman/listinfo/gluster-users</a><br>
    &lt;<a href="http://gluster.org/cgi-bin/mailman/listinfo/gluster-users" target="_blank">http://gluster.org/cgi-bin/<u></u>mailman/listinfo/gluster-users</a><u></u>&gt;<br>
<br>
<br>
<br>
Hi Pat, Let me get some one from the engineering team to coordinate with you. For now, you can check this:<br>
<br></div>
&#39;/gdata/projects/philex/OAG/__<u></u>2011/May16/mdor3km07/<a href="http://coast___den2.in" target="_blank">coast___<u></u>den2.in</a> &lt;<a href="http://coast_den2.in/" target="_blank">http://coast_den2.in/</a>&gt;<div class="im">
<br>
This file must exist on one of the backend disks. See if you can directly read from the backend disks. If it is not a bad backend disk, then it is a GlusterFS issue.<br>
<br>
If you provide us remote access via reverse-ssh / screen or webex, we can quickly narrow down. We don&#39;t have a TSM environment in our labs. You can help us validate compatibility. <br>
Also I am not sure if TSM allows scripting. If we can make TSM tools use GlusterFS 3.2 marker APIs, then you can achieve continuous backup functionality (backup data as and when it changes, without crawling the name space). It will significantly improve your backup performance (no more backup windows). Marker APIs can even be invoked via shell scripting using attr tools.<br>

<br>
-- <br>
Anand Babu Periasamy<br></div>
Blog [<a href="http://www.unlocksmith.org" target="_blank">http://www.unlocksmith.org</a> &lt;<a href="http://www.unlocksmith.org/" target="_blank">http://www.unlocksmith.org/</a>&gt;]<div class="im"><br>
<br>
Imagination is more important than knowledge --Albert Einstein<br>
</div></blockquote>
<br>
<br>
-- <br><div><div></div><div class="h5">
<br>
-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=<u></u>-=-=-=-=-=-=-=-=-=-=-=-=-=-=-=<u></u>-=-=-<br>
Pat Haley                          Email:  <a href="mailto:phaley@mit.edu" target="_blank">phaley@mit.edu</a><br>
Center for Ocean Engineering       Phone:  (617) 253-6824<br>
Dept. of Mechanical Engineering    Fax:    (617) 253-8125<br>
MIT, Room 5-222B                   <a href="http://web.mit.edu/phaley/www/" target="_blank">http://web.mit.edu/phaley/www/</a><br>
77 Massachusetts Avenue<br>
Cambridge, MA  02139-4301<br>
______________________________<u></u>_________________<br>
Gluster-users mailing list<br>
<a href="mailto:Gluster-users@gluster.org" target="_blank">Gluster-users@gluster.org</a><br>
<a href="http://gluster.org/cgi-bin/mailman/listinfo/gluster-users" target="_blank">http://gluster.org/cgi-bin/<u></u>mailman/listinfo/gluster-users</a><br>
</div></div></blockquote></div><br></div>