<html xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Title" content="">
<meta name="Keywords" content="">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:"MS 明朝";}
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:Calibri;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:#0563C1;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:#954F72;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal;
        font-family:Calibri;
        color:windowtext;}
span.EmailStyle18
        {mso-style-type:personal-reply;
        font-family:Calibri;
        color:windowtext;}
span.msoIns
        {mso-style-type:export-only;
        mso-style-name:"";
        text-decoration:underline;
        color:teal;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style>
</head>
<body bgcolor="white" lang="EN-US" link="#0563C1" vlink="#954F72">
<div class="WordSection1">
<p class="MsoNormal">Did you install the drbd-pacemaker package? That’s the package that contains the resource agent.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<p class="MsoNormal"><span style="color:#1F4E79">--</span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="color:#1F4E79"> </span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><b><span style="font-size:14.0pt;color:#27628C">[ jR ]</span></b><span style="font-size:14.0pt;color:#27628C"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="color:#1F4E79"> </span><span style="color:black"><o:p></o:p></span></p>
</div>
<p class="MsoNormal"><span style="font-size:12.0pt;color:#1F4E79">  </span><i><span style="font-size:9.0pt;color:#1F4E79">there is no path to greatness; greatness is the path</span></i><o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="color:black">From: </span></b><span style="color:black">Jasim Alam <eshmam2@gmail.com><br>
<b>Reply-To: </b>Cluster Labs - All topics related to open-source clustering welcomed <Users@clusterlabs.org><br>
<b>Date: </b>Sunday, November 20, 2016 at 2:58 PM<br>
<b>To: </b>"Users@clusterlabs.org" <Users@clusterlabs.org><br>
<b>Subject: </b>[ClusterLabs] DRBD Insufficient Privileges Error</span><span style="font-size:12.0pt;color:black"><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-family:"Times New Roman""><o:p> </o:p></span></p>
</div>
<p class="MsoNormal">Hi,<o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal">I am trying to setup  two node H/A cluster with DRBD. Following is my configuration<o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal"><i>[root@node-1 ~]# pcs config</i><o:p></o:p></p>
<p class="MsoNormal"><i>Cluster Name: Cluster-1</i><o:p></o:p></p>
<p class="MsoNormal"><i>Corosync Nodes:</i><o:p></o:p></p>
<p class="MsoNormal"><i>node-1 node-2 </i><o:p></o:p></p>
<p class="MsoNormal"><i>Pacemaker Nodes:</i><o:p></o:p></p>
<p class="MsoNormal"><i>node-1 node-2 </i><o:p></o:p></p>
<p class="MsoNormal"><i> </i><o:p></o:p></p>
<p class="MsoNormal"><i>Resources: </i><o:p></o:p></p>
<p class="MsoNormal"><i> Resource: vip (class=ocf provider=heartbeat type=IPaddr2)</i><o:p></o:p></p>
<p class="MsoNormal"><i>  Attributes: ip=103.9.185.211 cidr_netmask=32 </i><o:p></o:p></p>
<p class="MsoNormal"><i>  Operations: start interval=0s timeout=20s (vip-start-interval-0s)</i><o:p></o:p></p>
<p class="MsoNormal"><i>              stop interval=0s timeout=20s (vip-stop-interval-0s)</i><o:p></o:p></p>
<p class="MsoNormal"><i>              monitor interval=30s (vip-monitor-interval-30s)</i><o:p></o:p></p>
<p class="MsoNormal"><i>Resource: apache (class=ocf provider=heartbeat type=apache)</i><o:p></o:p></p>
<p class="MsoNormal"><i>  Attributes: configfile=/etc/httpd/conf/httpd.conf statusurl=http://localhost/server-status
</i><o:p></o:p></p>
<p class="MsoNormal"><i>  Operations: start interval=0s timeout=40s (apache-start-interval-0s)</i><o:p></o:p></p>
<p class="MsoNormal"><i>              stop interval=0s timeout=60s (apache-stop-interval-0s)</i><o:p></o:p></p>
<p class="MsoNormal"><i>              monitor interval=1min (apache-monitor-interval-1min)</i><o:p></o:p></p>
<p class="MsoNormal"><i>Master: StorageClone</i><o:p></o:p></p>
<p class="MsoNormal"><i>  Meta Attrs: master-max=1 master-node-max=1 clone-max=2 clone-node-max=1 notify=true
</i><o:p></o:p></p>
<p class="MsoNormal"><i>  Resource: storage (class=ocf provider=linbit type=drbd)</i><o:p></o:p></p>
<p class="MsoNormal"><i>   Attributes: drbd_resource=drbd0 </i><o:p></o:p></p>
<p class="MsoNormal"><i>   Operations: start interval=0s timeout=240 (storage-start-interval-0s)</i><o:p></o:p></p>
<p class="MsoNormal"><i>               promote interval=0s timeout=90 (storage-promote-interval-0s)</i><o:p></o:p></p>
<p class="MsoNormal"><i>               demote interval=0s timeout=90 (storage-demote-interval-0s)</i><o:p></o:p></p>
<p class="MsoNormal"><i>               stop interval=0s timeout=100 (storage-stop-interval-0s)</i><o:p></o:p></p>
<p class="MsoNormal"><i>               monitor interval=60s (storage-monitor-interval-60s)</i><o:p></o:p></p>
<p class="MsoNormal"><i> </i><o:p></o:p></p>
<p class="MsoNormal"><i>Stonith Devices: </i><o:p></o:p></p>
<p class="MsoNormal"><i>Fencing Levels: </i><o:p></o:p></p>
<p class="MsoNormal"><i> </i><o:p></o:p></p>
<p class="MsoNormal"><i>Location Constraints:</i><o:p></o:p></p>
<p class="MsoNormal"><i>  Resource: apache</i><o:p></o:p></p>
<p class="MsoNormal"><i>    Enabled on: node-1 (score:50) (id:location-apache-node-1-50)</i><o:p></o:p></p>
<p class="MsoNormal"><i>Ordering Constraints:</i><o:p></o:p></p>
<p class="MsoNormal"><i>  start vip then start apache (kind:Mandatory) (id:order-vip-apache-mandatory)</i><o:p></o:p></p>
<p class="MsoNormal"><i>Colocation Constraints:</i><o:p></o:p></p>
<p class="MsoNormal"><i>  vip with apache (score:INFINITY) (id:colocation-vip-apache-INFINITY)</i><o:p></o:p></p>
<p class="MsoNormal"><i> </i><o:p></o:p></p>
<p class="MsoNormal"><i>Resources Defaults:</i><o:p></o:p></p>
<p class="MsoNormal"><i>No defaults set</i><o:p></o:p></p>
<p class="MsoNormal"><i>Operations Defaults:</i><o:p></o:p></p>
<p class="MsoNormal"><i>No defaults set</i><o:p></o:p></p>
<p class="MsoNormal"><i> </i><o:p></o:p></p>
<p class="MsoNormal"><i>Cluster Properties:</i><o:p></o:p></p>
<p class="MsoNormal"><i>cluster-infrastructure: corosync</i><o:p></o:p></p>
<p class="MsoNormal"><i>cluster-name: Cluster-1</i><o:p></o:p></p>
<p class="MsoNormal"><i>dc-version: 1.1.13-10.el7_2.4-44eb2dd</i><o:p></o:p></p>
<p class="MsoNormal"><i>have-watchdog: false</i><o:p></o:p></p>
<p class="MsoNormal"><i>no-quorum-policy: ignore</i><o:p></o:p></p>
<p class="MsoNormal"><i>stonith-enabled: false</i><o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal">The problem is I am getting insufficient privilege error on second node
<o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal"><i>[root@node-1 ~]# pcs status</i><o:p></o:p></p>
<p class="MsoNormal"><i>Cluster name: PSD-1</i><o:p></o:p></p>
<p class="MsoNormal"><i>Last updated: Mon Nov 21 01:44:52 2016          Last change: Mon Nov 21 01:19:17 2016 by root via cibadmin on node-1</i><o:p></o:p></p>
<p class="MsoNormal"><i>Stack: corosync</i><o:p></o:p></p>
<p class="MsoNormal"><i>Current DC: node-1 (version 1.1.13-10.el7_2.4-44eb2dd) - partition with quorum</i><o:p></o:p></p>
<p class="MsoNormal"><i>2 nodes and 4 resources configured</i><o:p></o:p></p>
<p class="MsoNormal"><i> </i><o:p></o:p></p>
<p class="MsoNormal"><i>Online: [ node-1 node-2 ]</i><o:p></o:p></p>
<p class="MsoNormal"><i> </i><o:p></o:p></p>
<p class="MsoNormal"><i>Full list of resources:</i><o:p></o:p></p>
<p class="MsoNormal"><i> </i><o:p></o:p></p>
<p class="MsoNormal"><i>vip    (ocf::heartbeat:IPaddr2):       Started node-1</i><o:p></o:p></p>
<p class="MsoNormal"><i>apache (ocf::heartbeat:apache):        Started node-1</i><o:p></o:p></p>
<p class="MsoNormal"><i>Master/Slave Set: StorageClone [storage]</i><o:p></o:p></p>
<p class="MsoNormal"><i>     storage    (ocf::linbit:drbd):     FAILED node-2 (unmanaged)</i><o:p></o:p></p>
<p class="MsoNormal"><i>     Masters: [ node-1 ]</i><o:p></o:p></p>
<p class="MsoNormal"><i> </i><o:p></o:p></p>
<p class="MsoNormal"><i>Failed Actions:</i><o:p></o:p></p>
<p class="MsoNormal"><i>* storage_stop_0 on node-2 'insufficient privileges' (4): call=16, status=complete, exitreason='none',</i><o:p></o:p></p>
<p class="MsoNormal"><i>    last-rc-change='Mon Nov 21 01:19:17 2016', queued=0ms, exec=2ms</i><o:p></o:p></p>
<p class="MsoNormal"><i> </i><o:p></o:p></p>
<p class="MsoNormal"><i> </i><o:p></o:p></p>
<p class="MsoNormal"><i>PCSD Status:</i><o:p></o:p></p>
<p class="MsoNormal"><i>  node-1: Online</i><o:p></o:p></p>
<p class="MsoNormal"><i>  node-2: Online</i><o:p></o:p></p>
<p class="MsoNormal"><i> </i><o:p></o:p></p>
<p class="MsoNormal"><i>Daemon Status:</i><o:p></o:p></p>
<p class="MsoNormal"><i>  corosync: active/disabled</i><o:p></o:p></p>
<p class="MsoNormal"><i>  pacemaker: active/disabled</i><o:p></o:p></p>
<p class="MsoNormal"><i>  pcsd: active/enabled</i><o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal">but DRBD seems okay for both nodes<o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal"><i>  [root@node-1 ~]# drbd-overview </i><o:p></o:p></p>
<p class="MsoNormal"><i> 0:drbd0/0  Connected Primary/Secondary UpToDate/UpToDate</i><o:p></o:p></p>
<p class="MsoNormal"><i> [root@node-2 ~]# drbd-overview </i><o:p></o:p></p>
<p class="MsoNormal"><i> 0:drbd0/0  Connected Secondary/Primary UpToDate/UpToDate</i><o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal">Log of node2 <o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal"><i>[root@node-2 ~]# tail -n 10 /var/log/messages</i><o:p></o:p></p>
<p class="MsoNormal"><i>Nov 21 01:19:17 node-2 crmd[4060]:  notice: State transition S_NOT_DC -> S_PENDING [ input=I_PENDING cause=C_FSA_INTERNAL origin=do_election_count_vote ]</i><o:p></o:p></p>
<p class="MsoNormal"><i>Nov 21 01:19:17 node-2 crmd[4060]:  notice: State transition S_PENDING -> S_NOT_DC [ input=I_NOT_DC cause=C_HA_MESSAGE origin=do_cl_join_finalize_respond ]</i><o:p></o:p></p>
<p class="MsoNormal"><i>Nov 21 01:19:17 node-2 crmd[4060]:   error: Failed to retrieve meta-data for ocf:linbit:drbd</i><o:p></o:p></p>
<p class="MsoNormal"><i>Nov 21 01:19:17 node-2 crmd[4060]: warning: No metadata found for drbd::ocf:linbit: Input/output error (-5)</i><o:p></o:p></p>
<p class="MsoNormal"><i>Nov 21 01:19:17 node-2 crmd[4060]:   error: No metadata for linbit::ocf:drbd</i><o:p></o:p></p>
<p class="MsoNormal"><i>Nov 21 01:19:17 node-2 crmd[4060]:  notice: Operation storage_monitor_0: insufficient privileges (node=node-2, call=14, rc=4, cib-update=17, confirmed=true)</i><o:p></o:p></p>
<p class="MsoNormal"><i>Nov 21 01:19:17 node-2 crmd[4060]:  notice: Operation storage_notify_0: ok (node=node-2, call=15, rc=0, cib-update=0, confirmed=true)</i><o:p></o:p></p>
<p class="MsoNormal"><i>Nov 21 01:19:17 node-2 crmd[4060]:  notice: Operation storage_stop_0: insufficient privileges (node=node-2, call=16, rc=4, cib-update=18, confirmed=true)</i><o:p></o:p></p>
<p class="MsoNormal"><i>Nov 21 01:20:31 node-2 systemd-logind: Removed session 3.</i><o:p></o:p></p>
<p class="MsoNormal"><i>Nov 21 01:22:58 node-2 systemd-logind: Removed session 2.</i><o:p></o:p></p>
<p class="MsoNormal"><i> </i><o:p></o:p></p>
<p class="MsoNormal">Would appreciate any way out of this.<o:p></o:p></p>
<p class="MsoNormal"> <o:p></o:p></p>
<p class="MsoNormal">Thanks,<o:p></o:p></p>
<p class="MsoNormal">Jasim <o:p></o:p></p>
</div>
</body>
</html>