<div dir="ltr"><div>Hi, Steffen. Those attachments don't contain the CIB. They contain the `pcs config` output. You can get the cib with `pcs cluster cib > $(hostname).cib.xml`.</div><div><br></div><div>Granted, it's possible that this fence action information wouldn't be in the CIB at all. It might be stored in fencer memory.<br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Thu, Jan 7, 2021 at 12:26 AM <<a href="mailto:renayama19661014@ybb.ne.jp">renayama19661014@ybb.ne.jp</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">Hi Steffen,<br>
<br>
> Here CIB settings attached (pcs config show) for all 3 of my nodes<br>
> (all 3 seems 100% identical), node03 is the DC.<br>
<br>
<br>
Thank you for the attachment.<br>
<br>
What is the scenario when this situation occurs?<br>
In what steps did the problem appear when fencing was performed (or failed)?<br>
<br>
<br>
Best Regards,<br>
Hideo Yamauchi.<br>
<br>
<br>
----- Original Message -----<br>
> From: Steffen Vinther Sørensen <<a href="mailto:svinther@gmail.com" target="_blank">svinther@gmail.com</a>><br>
> To: <a href="mailto:renayama19661014@ybb.ne.jp" target="_blank">renayama19661014@ybb.ne.jp</a>; Cluster Labs - All topics related to open-source clustering welcomed <<a href="mailto:users@clusterlabs.org" target="_blank">users@clusterlabs.org</a>><br>
> Cc: <br>
> Date: 2021/1/7, Thu 17:05<br>
> Subject: Re: [ClusterLabs] Pending Fencing Actions shown in pcs status<br>
> <br>
> Hi Hideo,<br>
> <br>
> Here CIB settings attached (pcs config show) for all 3 of my nodes<br>
> (all 3 seems 100% identical), node03 is the DC.<br>
> <br>
> Regards<br>
> Steffen<br>
> <br>
> On Thu, Jan 7, 2021 at 8:06 AM <<a href="mailto:renayama19661014@ybb.ne.jp" target="_blank">renayama19661014@ybb.ne.jp</a>> wrote:<br>
>> <br>
>>  Hi Steffen,<br>
>>  Hi Reid,<br>
>> <br>
>>  I also checked the Centos source rpm and it seems to include a fix for the <br>
> problem.<br>
>> <br>
>>  As Steffen suggested, if you share your CIB settings, I might know <br>
> something.<br>
>> <br>
>>  If this issue is the same as the fix, the display will only be displayed on <br>
> the DC node and will not affect the operation.<br>
>>  The pending actions shown will remain for a long time, but will not have a <br>
> negative impact on the cluster.<br>
>> <br>
>>  Best Regards,<br>
>>  Hideo Yamauchi.<br>
>> <br>
>> <br>
>>  ----- Original Message -----<br>
>>  > From: Reid Wahl <<a href="mailto:nwahl@redhat.com" target="_blank">nwahl@redhat.com</a>><br>
>>  > To: Cluster Labs - All topics related to open-source clustering <br>
> welcomed <<a href="mailto:users@clusterlabs.org" target="_blank">users@clusterlabs.org</a>><br>
>>  > Cc:<br>
>>  > Date: 2021/1/7, Thu 15:58<br>
>>  > Subject: Re: [ClusterLabs] Pending Fencing Actions shown in pcs status<br>
>>  ><br>
>>  > It's supposedly fixed in that version.<br>
>>  >   - <a href="https://bugzilla.redhat.com/show_bug.cgi?id=1787749" rel="noreferrer" target="_blank">https://bugzilla.redhat.com/show_bug.cgi?id=1787749</a> <br>
>>  >   - <a href="https://access.redhat.com/solutions/4713471" rel="noreferrer" target="_blank">https://access.redhat.com/solutions/4713471</a> <br>
>>  ><br>
>>  > So you may be hitting a different issue (unless there's a bug in <br>
> the<br>
>>  > pcmk 1.1 backport of the fix).<br>
>>  ><br>
>>  > I may be a little bit out of my area of knowledge here, but can you<br>
>>  > share the CIBs from nodes 1 and 3? Maybe Hideo, Klaus, or Ken has some<br>
>>  > insight.<br>
>>  ><br>
>>  > On Wed, Jan 6, 2021 at 10:53 PM Steffen Vinther Sørensen<br>
>>  > <<a href="mailto:svinther@gmail.com" target="_blank">svinther@gmail.com</a>> wrote:<br>
>>  >><br>
>>  >>  Hi Hideo,<br>
>>  >><br>
>>  >>  If the fix is not going to make it into the CentOS7 pacemaker <br>
> version,<br>
>>  >>  I guess the stable approach to take advantage of it is to build <br>
> the<br>
>>  >>  cluster on another OS than CentOS7 ? A little late for that in <br>
> this<br>
>>  >>  case though :)<br>
>>  >><br>
>>  >>  Regards<br>
>>  >>  Steffen<br>
>>  >><br>
>>  >><br>
>>  >><br>
>>  >><br>
>>  >>  On Thu, Jan 7, 2021 at 7:27 AM <<a href="mailto:renayama19661014@ybb.ne.jp" target="_blank">renayama19661014@ybb.ne.jp</a>> <br>
> wrote:<br>
>>  >>  ><br>
>>  >>  > Hi Steffen,<br>
>>  >>  ><br>
>>  >>  > The fix pointed out by Reid is affecting it.<br>
>>  >>  ><br>
>>  >>  > Since the fencing action requested by the DC node exists <br>
> only in the<br>
>>  > DC node, such an event occurs.<br>
>>  >>  > You will need to take advantage of the modified pacemaker to <br>
> resolve<br>
>>  > the issue.<br>
>>  >>  ><br>
>>  >>  > Best Regards,<br>
>>  >>  > Hideo Yamauchi.<br>
>>  >>  ><br>
>>  >>  ><br>
>>  >>  ><br>
>>  >>  > ----- Original Message -----<br>
>>  >>  > > From: Reid Wahl <<a href="mailto:nwahl@redhat.com" target="_blank">nwahl@redhat.com</a>><br>
>>  >>  > > To: Cluster Labs - All topics related to open-source <br>
> clustering<br>
>>  > welcomed <<a href="mailto:users@clusterlabs.org" target="_blank">users@clusterlabs.org</a>><br>
>>  >>  > > Cc:<br>
>>  >>  > > Date: 2021/1/7, Thu 15:07<br>
>>  >>  > > Subject: Re: [ClusterLabs] Pending Fencing Actions <br>
> shown in pcs<br>
>>  > status<br>
>>  >>  > ><br>
>>  >>  > > Hi, Steffen. Are your cluster nodes all running the <br>
> same<br>
>>  > Pacemaker<br>
>>  >>  > > versions? This looks like Bug 5401[1], which is fixed <br>
> by upstream<br>
>>  >>  > > commit df71a07[2]. I'm a little bit confused about <br>
> why it<br>
>>  > only shows<br>
>>  >>  > > up on one out of three nodes though.<br>
>>  >>  > ><br>
>>  >>  > > [1] <a href="https://bugs.clusterlabs.org/show_bug.cgi?id=5401" rel="noreferrer" target="_blank">https://bugs.clusterlabs.org/show_bug.cgi?id=5401</a> <br>
>>  >>  > > [2] <br>
> <a href="https://github.com/ClusterLabs/pacemaker/commit/df71a07" rel="noreferrer" target="_blank">https://github.com/ClusterLabs/pacemaker/commit/df71a07</a> <br>
>>  >>  > ><br>
>>  >>  > > On Tue, Jan 5, 2021 at 8:31 AM Steffen Vinther Sørensen<br>
>>  >>  > > <<a href="mailto:svinther@gmail.com" target="_blank">svinther@gmail.com</a>> wrote:<br>
>>  >>  > >><br>
>>  >>  > >>  Hello<br>
>>  >>  > >><br>
>>  >>  > >>  node 1 is showing this in 'pcs status'<br>
>>  >>  > >><br>
>>  >>  > >>  Pending Fencing Actions:<br>
>>  >>  > >>  * reboot of <a href="http://kvm03-node02.avigol-gcs.dk" rel="noreferrer" target="_blank">kvm03-node02.avigol-gcs.dk</a> pending:<br>
>>  > client=crmd.37819,<br>
>>  >>  > >>  origin=<a href="http://kvm03-node03.avigol-gcs.dk" rel="noreferrer" target="_blank">kvm03-node03.avigol-gcs.dk</a><br>
>>  >>  > >><br>
>>  >>  > >>  node 2 and node 3 outputs no such thing (node 3 is <br>
> DC)<br>
>>  >>  > >><br>
>>  >>  > >>  Google is not much help, how to investigate this <br>
> further and<br>
>>  > get rid<br>
>>  >>  > >>  of such terrifying status message ?<br>
>>  >>  > >><br>
>>  >>  > >>  Regards<br>
>>  >>  > >>  Steffen<br>
>>  >>  > >>  _______________________________________________<br>
>>  >>  > >>  Manage your subscription:<br>
>>  >>  > >>  <br>
> <a href="https://lists.clusterlabs.org/mailman/listinfo/users" rel="noreferrer" target="_blank">https://lists.clusterlabs.org/mailman/listinfo/users</a> <br>
>>  >>  > >><br>
>>  >>  > >>  ClusterLabs home: <a href="https://www.clusterlabs.org/" rel="noreferrer" target="_blank">https://www.clusterlabs.org/</a> <br>
>>  >>  > >><br>
>>  >>  > ><br>
>>  >>  > ><br>
>>  >>  > > --<br>
>>  >>  > > Regards,<br>
>>  >>  > ><br>
>>  >>  > > Reid Wahl, RHCA<br>
>>  >>  > > Senior Software Maintenance Engineer, Red Hat<br>
>>  >>  > > CEE - Platform Support Delivery - ClusterHA<br>
>>  >>  > ><br>
>>  >>  > > _______________________________________________<br>
>>  >>  > > Manage your subscription:<br>
>>  >>  > > <a href="https://lists.clusterlabs.org/mailman/listinfo/users" rel="noreferrer" target="_blank">https://lists.clusterlabs.org/mailman/listinfo/users</a> <br>
>>  >>  > ><br>
>>  >>  > > ClusterLabs home: <a href="https://www.clusterlabs.org/" rel="noreferrer" target="_blank">https://www.clusterlabs.org/</a> <br>
>>  >>  > ><br>
>>  >>  ><br>
>>  >>  > _______________________________________________<br>
>>  >>  > Manage your subscription:<br>
>>  >>  > <a href="https://lists.clusterlabs.org/mailman/listinfo/users" rel="noreferrer" target="_blank">https://lists.clusterlabs.org/mailman/listinfo/users</a> <br>
>>  >>  ><br>
>>  >>  > ClusterLabs home: <a href="https://www.clusterlabs.org/" rel="noreferrer" target="_blank">https://www.clusterlabs.org/</a> <br>
>>  >>  _______________________________________________<br>
>>  >>  Manage your subscription:<br>
>>  >>  <a href="https://lists.clusterlabs.org/mailman/listinfo/users" rel="noreferrer" target="_blank">https://lists.clusterlabs.org/mailman/listinfo/users</a> <br>
>>  >><br>
>>  >>  ClusterLabs home: <a href="https://www.clusterlabs.org/" rel="noreferrer" target="_blank">https://www.clusterlabs.org/</a> <br>
>>  ><br>
>>  ><br>
>>  ><br>
>>  > --<br>
>>  > Regards,<br>
>>  ><br>
>>  > Reid Wahl, RHCA<br>
>>  > Senior Software Maintenance Engineer, Red Hat<br>
>>  > CEE - Platform Support Delivery - ClusterHA<br>
>>  ><br>
>>  > _______________________________________________<br>
>>  > Manage your subscription:<br>
>>  > <a href="https://lists.clusterlabs.org/mailman/listinfo/users" rel="noreferrer" target="_blank">https://lists.clusterlabs.org/mailman/listinfo/users</a> <br>
>>  ><br>
>>  > ClusterLabs home: <a href="https://www.clusterlabs.org/" rel="noreferrer" target="_blank">https://www.clusterlabs.org/</a> <br>
>>  ><br>
>> <br>
>>  _______________________________________________<br>
>>  Manage your subscription:<br>
>>  <a href="https://lists.clusterlabs.org/mailman/listinfo/users" rel="noreferrer" target="_blank">https://lists.clusterlabs.org/mailman/listinfo/users</a> <br>
>> <br>
>>  ClusterLabs home: <a href="https://www.clusterlabs.org/" rel="noreferrer" target="_blank">https://www.clusterlabs.org/</a> <br>
> <br>
<br>
_______________________________________________<br>
Manage your subscription:<br>
<a href="https://lists.clusterlabs.org/mailman/listinfo/users" rel="noreferrer" target="_blank">https://lists.clusterlabs.org/mailman/listinfo/users</a><br>
<br>
ClusterLabs home: <a href="https://www.clusterlabs.org/" rel="noreferrer" target="_blank">https://www.clusterlabs.org/</a><br>
</blockquote></div><br clear="all"><br>-- <br><div dir="ltr" class="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div>Regards,<br><br></div>Reid Wahl, RHCA<br></div><div>Senior Software Maintenance Engineer, Red Hat<br></div>CEE - Platform Support Delivery - ClusterHA</div></div></div></div></div></div></div></div></div></div></div></div></div></div>