<META HTTP-EQUIV="Content-Type" CONTENT="text/html; charset=koi8-r">
<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"><head><meta name=Generator content="Microsoft Word 14 (filtered medium)"><style><!--
/* Font Definitions */
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal-compose;
        font-family:"Calibri","sans-serif";
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-family:"Calibri","sans-serif";}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body lang=EN-US link=blue vlink=purple><div class=WordSection1><p class=MsoNormal>Here is a quick rundown of the system, and the problem.<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>All hosts on centOS 7 fully up to date<o:p></o:p></p><p class=MsoNormal>GlusterFS is running on 6 servers, 3x2 distribute/replicate. <o:p></o:p></p><p class=MsoNormal>CTDB is running on all hosts<o:p></o:p></p><p class=MsoNormal>I am unable to mount via nfs the exported volume on any of the gluster server members.<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>I am able to mount, read, write, umount from any server that is not a gluster member. <o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>Topology &#8211; all are hostnames that are resolvable <o:p></o:p></p><p class=MsoNormal>Gluster Members<o:p></o:p></p><p class=MsoNormal>Node1<o:p></o:p></p><p class=MsoNormal>Node2<o:p></o:p></p><p class=MsoNormal>Node3<o:p></o:p></p><p class=MsoNormal>Node4<o:p></o:p></p><p class=MsoNormal>Node5<o:p></o:p></p><p class=MsoNormal>Node6<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>CTDB Virtual IP/Hostname<o:p></o:p></p><p class=MsoNormal>SharedNFS<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>Test Machine<o:p></o:p></p><p class=MsoNormal>Test1<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>Gluster Volumes<o:p></o:p></p><p class=MsoNormal>Engine<o:p></o:p></p><p class=MsoNormal>Data<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>I am trying to bring up hosted-engine using nfs using the gluster members<o:p></o:p></p><p class=MsoNormal>I run hosted-engine &#8211;deploy<o:p></o:p></p><p class=MsoNormal>Nfsv3<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>Host:/path sharednfs:/engine<o:p></o:p></p><p class=MsoNormal>Error while mounting specified storage path: mount.nfs: an incorrect mount option was specified<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>Ok well lets try that without using the hosted-engine script<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>Mount &#8211;v &#8211;t nfs &#8211;o vers=3 sharednfs:/engine /tmp<o:p></o:p></p><p class=MsoNormal>mount.nfs: timeout set for Mon Jan 12 22:00:08 2015<o:p></o:p></p><p class=MsoNormal>mount.nfs: trying text-based options 'vers=3,lock=Flase,addr=192.168.0.240<o:p></o:p></p><p class=MsoNormal>mount.nfs: prog 100003, trying vers=3, prot=6<o:p></o:p></p><p class=MsoNormal>mount.nfs: trying 192.168.0.240 prog 100003 vers 3 prot TCP port 2049<o:p></o:p></p><p class=MsoNormal>mount.nfs: prog 100005, trying vers=3, prot=17<o:p></o:p></p><p class=MsoNormal>mount.nfs: portmap query retrying: RPC: Program not registered<o:p></o:p></p><p class=MsoNormal>mount.nfs: prog 100005, trying vers=3, prot=6<o:p></o:p></p><p class=MsoNormal>mount.nfs: trying 192.168.0.240 prog 100005 vers 3 prot TCP port 38465<o:p></o:p></p><p class=MsoNormal>mount.nfs: mount(2): Invalid argument<o:p></o:p></p><p class=MsoNormal>mount.nfs: an incorrect mount option was specified<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>[root@node4 ~]# systemctl status rpcbind<o:p></o:p></p><p class=MsoNormal>rpcbind.service - RPC bind service<o:p></o:p></p><p class=MsoNormal>šš Loaded: loaded (/usr/lib/systemd/system/rpcbind.service; enabled)<o:p></o:p></p><p class=MsoNormal>šš Active: active (running) since Mon 2015-01-12 20:01:13 EST; 1h 57min ago<o:p></o:p></p><p class=MsoNormal>š Process: 1349 ExecStart=/sbin/rpcbind -w ${RPCBIND_ARGS} (code=exited, status=0/SUCCESS)<o:p></o:p></p><p class=MsoNormal> Main PID: 1353 (rpcbind)<o:p></o:p></p><p class=MsoNormal>šš CGroup: /system.slice/rpcbind.service<o:p></o:p></p><p class=MsoNormal>šššššššššš &#9492;&#9472;1353 /sbin/rpcbind -w<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>Jan 12 20:01:13 node4 systemd[1]: Starting RPC bind service...<o:p></o:p></p><p class=MsoNormal>Jan 12 20:01:13 node4 systemd[1]: Started RPC bind service.<o:p></o:p></p><p class=MsoNormal>Jan 12 21:19:22 node4 systemd[1]: Started RPC bind service.<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>Ummm&#8230; this makes no sense&#8230;. <o:p></o:p></p><p class=MsoNormal>[root@test1 ~]# mount -v -o vers=3 -t nfs 192.168.0.240:/engine /tmp<o:p></o:p></p><p class=MsoNormal>mount.nfs: timeout set for Mon Jan 12 20:02:58 2015<o:p></o:p></p><p class=MsoNormal>mount.nfs: trying text-based options 'vers=3,addr=192.168.0.240<o:p></o:p></p><p class=MsoNormal>mount.nfs: prog 100003, trying vers=3, prot=6<o:p></o:p></p><p class=MsoNormal>mount.nfs: trying 192.168.0.240 prog 100003 vers 3 prot TCP port 2049<o:p></o:p></p><p class=MsoNormal>mount.nfs: prog 100005, trying vers=3, prot=17<o:p></o:p></p><p class=MsoNormal>mount.nfs: portmap query retrying: RPC: Program not registered<o:p></o:p></p><p class=MsoNormal>mount.nfs: prog 100005, trying vers=3, prot=6<o:p></o:p></p><p class=MsoNormal>mount.nfs: trying 192.168.0.240 prog 100005 vers 3 prot TCP port 38465<o:p></o:p></p><p class=MsoNormal>192.168.0.240:/engine on /tmp type nfs (rw,vers=3)<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>On the test machine mounts the nfs share with no problems. I have confirmed this does not work on a single machine that is part of the gluster. šAnd any other machine is able to mount the exact same share, with the exact same parameters&#8230; on the exact same OS&#8230;.<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>I am at a loss<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal>Donny D<o:p></o:p></p><p class=MsoNormal><o:p>&nbsp;</o:p></p></div></body></html>