<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"><head><meta http-equiv=Content-Type content="text/html; charset=us-ascii"><meta name=Generator content="Microsoft Word 12 (filtered medium)"><style><!--
/* Font Definitions */
@font-face
{font-family:"Cambria Math";
panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
{font-family:Calibri;
panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
{font-family:Tahoma;
panose-1:2 11 6 4 3 5 4 4 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
{margin:0cm;
margin-bottom:.0001pt;
font-size:11.0pt;
font-family:"Calibri","sans-serif";}
a:link, span.MsoHyperlink
{mso-style-priority:99;
color:blue;
text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
{mso-style-priority:99;
color:purple;
text-decoration:underline;}
p.MsoAcetate, li.MsoAcetate, div.MsoAcetate
{mso-style-priority:99;
mso-style-link:"Balloon Text Char";
margin:0cm;
margin-bottom:.0001pt;
font-size:8.0pt;
font-family:"Tahoma","sans-serif";}
span.EmailStyle17
{mso-style-type:personal-compose;
font-family:"Calibri","sans-serif";
color:windowtext;}
span.BalloonTextChar
{mso-style-name:"Balloon Text Char";
mso-style-priority:99;
mso-style-link:"Balloon Text";
font-family:"Tahoma","sans-serif";}
.MsoChpDefault
{mso-style-type:export-only;}
@page WordSection1
{size:612.0pt 792.0pt;
margin:72.0pt 72.0pt 72.0pt 72.0pt;}
div.WordSection1
{page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body lang=EN-GB link=blue vlink=purple><div class=WordSection1><p class=MsoNormal>Good morning,<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> I am trying out glusterfs to have a file system mirrored across two nodes on Vmware guests. After installing the latest glusterfs version 3.4.2-1 on both servers and client I am experiencing a strange issue. When extracting the Linux kernel source, the symbolic links are being replaced by empty files. With the read-hash-mode option set to 1, the number of symlinks replaced decreased from 3 to 2, but apparently the issue is not solved. A further observation is that if I shut down one node, everything works fine. <o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> Any pointers on how to solve this issue? <o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal>Server config:<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-posix<o:p></o:p></p><p class=MsoNormal> type storage/posix<o:p></o:p></p><p class=MsoNormal> option volume-id 3404b7dd-c4b3-47cc-8e7e-126e5ea5d867<o:p></o:p></p><p class=MsoNormal> option directory /data/csto1<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-access-control<o:p></o:p></p><p class=MsoNormal> type features/access-control<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-posix<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-locks<o:p></o:p></p><p class=MsoNormal> type features/locks<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-access-control<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-io-threads<o:p></o:p></p><p class=MsoNormal> type performance/io-threads<o:p></o:p></p><p class=MsoNormal> option thread-count 20<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-locks<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-index<o:p></o:p></p><p class=MsoNormal> type features/index<o:p></o:p></p><p class=MsoNormal> option index-base /data/csto1 /.glusterfs/indices<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-io-threads<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-marker<o:p></o:p></p><p class=MsoNormal> type features/marker<o:p></o:p></p><p class=MsoNormal> option quota off<o:p></o:p></p><p class=MsoNormal> option xtime off<o:p></o:p></p><p class=MsoNormal> option timestamp-file /var/lib/glusterd/vols/datavol/marker.tstamp<o:p></o:p></p><p class=MsoNormal> option volume-uuid 3404b7dd-c4b3-47cc-8e7e-126e5ea5d867<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-index<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume /data/csto1<o:p></o:p></p><p class=MsoNormal> type debug/io-stats<o:p></o:p></p><p class=MsoNormal> option count-fop-hits off<o:p></o:p></p><p class=MsoNormal> option latency-measurement off<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-marker<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-server<o:p></o:p></p><p class=MsoNormal> type protocol/server<o:p></o:p></p><p class=MsoNormal> option auth.addr./data/csto1.allow *<o:p></o:p></p><p class=MsoNormal> option auth.login.b5d3cd7f-9b9b-437c-a1ec-b2a773c25354.password 004c5514-7ae1-4b80-acf5-a024d57facb3<o:p></o:p></p><p class=MsoNormal> option auth.login./data/csto1.allow b5d3cd7f-9b9b-437c-a1ec-b2a773c25354<o:p></o:p></p><p class=MsoNormal> option transport-type tcp<o:p></o:p></p><p class=MsoNormal> subvolumes /data/csto1<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal>Client config:<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-client-0<o:p></o:p></p><p class=MsoNormal> type protocol/client<o:p></o:p></p><p class=MsoNormal> option transport-type tcp<o:p></o:p></p><p class=MsoNormal> option remote-subvolume /data/csto1<o:p></o:p></p><p class=MsoNormal> option remote-host csto1<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-client-1<o:p></o:p></p><p class=MsoNormal> type protocol/client<o:p></o:p></p><p class=MsoNormal> option transport-type tcp<o:p></o:p></p><p class=MsoNormal> option remote-subvolume /data/csto2<o:p></o:p></p><p class=MsoNormal> option remote-host csto2<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-replicate-0<o:p></o:p></p><p class=MsoNormal> type cluster/replicate<o:p></o:p></p><p class=MsoNormal> option read-hash-mode 1<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-client-0 datavol-client-1<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-dht<o:p></o:p></p><p class=MsoNormal> type cluster/distribute<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-replicate-0<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-write-behind<o:p></o:p></p><p class=MsoNormal> type performance/write-behind<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-dht<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-read-ahead<o:p></o:p></p><p class=MsoNormal> type performance/read-ahead<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-write-behind<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-io-cache<o:p></o:p></p><p class=MsoNormal> type performance/io-cache<o:p></o:p></p><p class=MsoNormal> option cache-size 67108864<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-read-ahead<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-quick-read<o:p></o:p></p><p class=MsoNormal> type performance/quick-read<o:p></o:p></p><p class=MsoNormal> option cache-size 67108864<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-io-cache<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-open-behind<o:p></o:p></p><p class=MsoNormal> type performance/open-behind<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-quick-read<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol-md-cache<o:p></o:p></p><p class=MsoNormal> type performance/md-cache<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-open-behind<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal> volume datavol<o:p></o:p></p><p class=MsoNormal> type debug/io-stats<o:p></o:p></p><p class=MsoNormal> option count-fop-hits off<o:p></o:p></p><p class=MsoNormal> option latency-measurement off<o:p></o:p></p><p class=MsoNormal> subvolumes datavol-md-cache<o:p></o:p></p><p class=MsoNormal> end-volume<o:p></o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal><o:p> </o:p></p><p class=MsoNormal>Regards<o:p></o:p></p><p class=MsoNormal>Kenneth<o:p></o:p></p></div></body></html>