<html xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Aptos;
        panose-1:2 11 0 4 2 2 2 2 2 4;}
@font-face
        {font-family:Menlo;
        panose-1:2 11 6 9 3 8 4 2 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        font-size:12.0pt;
        font-family:"Aptos",sans-serif;
        mso-ligatures:standardcontextual;}
span.EmailStyle17
        {mso-style-type:personal-compose;
        font-family:"Aptos",sans-serif;
        color:windowtext;}
p.p1, li.p1, div.p1
        {mso-style-name:p1;
        margin:0in;
        font-size:8.5pt;
        font-family:Menlo;
        color:black;}
span.s1
        {mso-style-name:s1;
        color:#F62218;}
span.s2
        {mso-style-name:s2;}
span.apple-converted-space
        {mso-style-name:apple-converted-space;}
.MsoChpDefault
        {mso-style-type:export-only;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style>
</head>
<body lang="EN-US" link="#467886" vlink="#96607D" style="word-wrap:break-word">
<div class="WordSection1">
<p class="MsoNormal">Hi,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">I’m starting to use stonith levels.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">My existing (1-level stonith config) looks like this:<o:p></o:p></p>
<p class="p1"><span class="s1">#</span><span class="s2"> pcs stonith config</span><o:p></o:p></p>
<p class="p1"><span class="s2">Resource: fence_pm (class=stonith type=fence_powerman)</span><o:p></o:p></p>
<p class="p1"><span class="apple-converted-space">  </span><span class="s2">Attributes: fence_pm-instance_attributes</span><o:p></o:p></p>
<p class="p1"><span class="apple-converted-space">    </span><span class="s2">ipaddr=localhost</span><o:p></o:p></p>
<p class="p1"><span class="apple-converted-space">    </span><span class="s2">ipport=10101</span><o:p></o:p></p>
<p class="p1"><span class="apple-converted-space">    </span><span class="s2">pcmk_delay_base=60s</span><o:p></o:p></p>
<p class="p1"><span class="apple-converted-space">    </span><span class="s2">pcmk_delay_max=90s</span><o:p></o:p></p>
<p class="p1"><span class="apple-converted-space">    </span><span class="s2">pcmk_host_check=static-list</span><o:p></o:p></p>
<p class="p1"><span class="apple-converted-space">    </span><span class="s2">pcmk_host_list=gopher1,gopher2,gopher3,gopher4,gopher5,gopher6,gopher7,gopher8,gopher9,gopher10</span><o:p></o:p></p>
<p class="p1"><span class="apple-converted-space">  </span><span class="s2">Operations:</span><o:p></o:p></p>
<p class="p1"><span class="apple-converted-space">    </span><span class="s2">monitor: fence_pm-monitor-interval-60s</span><o:p></o:p></p>
<p class="p1"><span class="apple-converted-space">      </span><span class="s2">interval=60s</span><o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">And I want to switch to a 2-level stonith config.  I’d expected these commands to work:<o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:8.5pt;font-family:Menlo;color:#2EAEBB;mso-ligatures:none">lustre_servers</span>=<span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none">gopher1,gopher2,gopher3,gopher4,gopher5,gopher6,gopher7,gopher8,gopher9,gopher10</span><span style="font-size:8.5pt;font-family:Menlo;color:#C814C9;mso-ligatures:none"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.5pt;font-family:Menlo;color:#400BD9;mso-ligatures:none"># set up new fence agent<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none">pcs stonith create fence_kdump fence_kdump
</span><span style="font-size:8.5pt;font-family:Menlo;color:#2EAEBB;mso-ligatures:none">pcmk_host_check</span><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none">=static-list
</span><span style="font-size:8.5pt;font-family:Menlo;color:#2EAEBB;mso-ligatures:none">pcmk_host_list</span><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none">=</span><span style="font-size:8.5pt;font-family:Menlo;color:#C814C9;mso-ligatures:none">${lustre_servers}</span><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.5pt;font-family:Menlo;color:#400BD9;mso-ligatures:none"># set levels (priority) so pacemaker knows which to use first<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none">pcs stonith level add
</span><span style="font-size:8.5pt;font-family:Menlo;color:#B42419;mso-ligatures:none">1</span><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none">
</span><span style="font-size:8.5pt;font-family:Menlo;color:#C814C9;mso-ligatures:none">${lustre_servers}</span><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none"> fence_kdump<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none">pcs stonith level add
</span><span style="font-size:8.5pt;font-family:Menlo;color:#B42419;mso-ligatures:none">2</span><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none">
</span><span style="font-size:8.5pt;font-family:Menlo;color:#C814C9;mso-ligatures:none">${lustre_servers}</span><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none"> fence_pm<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.5pt;font-family:Menlo;color:#400BD9;mso-ligatures:none"># verify config<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none">pcs  stonith level verify<o:p></o:p></span></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">The “pcs stonith create” succeeds, but the “pcs stonith level add” fails.  Looking at the man page, it looks like a comma-separated target list isn’t allowed for “pcs stonith level add”.  Is that correct?<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">In the man page, I see<o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none">        Target may be a node name <node_name> or %<node_name> or<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none">        node%<node_name>, a node name regular expression regexp%<node_pattern><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.5pt;font-family:Menlo;color:black;mso-ligatures:none">        or a node attribute value attrib%<name>=<value>.<o:p></o:p></span></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Is “%” literal, here?<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Do<o:p></o:p></p>
<p class="MsoNormal">“pcs stonith level add <level> node%<node_name> <stonith_id>” and<o:p></o:p></p>
<p class="MsoNormal">“pcs stonith level add <level> %<node_name> <stonith_id>” and<o:p></o:p></p>
<p class="MsoNormal">“pcs stonith level add <level> <node_name> <stonith_id>” mean something different?  They seem identical from brief experiments.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">How is “attrib%<name>=<value>” used?<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Thanks,<o:p></o:p></p>
<p class="MsoNormal">Olaf<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
</body>
</html>