<div dir="ltr">Thanks for your response Ken.  I&#39;m puzzled ... in my case node remain UNCLEAN (offline) until dc-deadtime expires, even when both nodes are up and corosync is quorate.<div><br></div><div>I see the following from crmd when I have dc-deadtime=2min</div><div><br></div><div><div>Dec 15 21:34:33 max04 crmd[13791]:   notice: Quorum acquired</div><div>Dec 15 21:34:33 max04 crmd[13791]:   notice: pcmk_quorum_notification: Node max04[2886730248] - state is now member (was (null))<br></div><div>Dec 15 21:34:33 max04 crmd[13791]:   notice: pcmk_quorum_notification: Node (null)[2886730249] - state is now member (was (null))<br></div><div>Dec 15 21:34:33 max04 crmd[13791]:   notice: Notifications disabled</div><div>Dec 15 21:34:33 max04 crmd[13791]:   notice: The local CRM is operational</div><div>Dec 15 21:34:33 max04 crmd[13791]:   notice: State transition S_STARTING -&gt; S_PENDING [ input=I_PENDING cause=C_FSA_INTERNAL origin=do_started ]</div><div>...</div><div>Dec 15 21:36:33 max05 crmd[10365]:  warning: FSA: Input I_DC_TIMEOUT from crm_timer_popped() received in state S_PENDING</div><div>Dec 15 21:36:33 max05 crmd[10365]:   notice: State transition S_ELECTION -&gt; S_INTEGRATION [ input=I_ELECTION_DC cause=C_TIMER_POPPED origin=election_timeout_popped ]</div><div>Dec 15 21:36:33 max05 crmd[10365]:  warning: FSA: Input I_ELECTION_DC from do_election_check() received in state S_INTEGRATION</div><div>Dec 15 21:36:33 max05 crmd[10365]:   notice: Notifications disabled</div><div>Dec 15 21:36:33 max04 crmd[13791]:   notice: State transition S_PENDING -&gt; S_NOT_DC [ input=I_NOT_DC cause=C_HA_MESSAGE origin=do_cl_join_finalize_respond ]</div></div><div><br></div><div>only after this do the nodes transition to Online.  This is using the vanilla RHEL7.2 cluster stack and the following options:</div><div><br></div><div><div>property cib-bootstrap-options: \</div><div>        no-quorum-policy=ignore \</div><div>        default-action-timeout=120s \</div><div>        pe-warn-series-max=1500 \</div><div>        pe-input-series-max=1500 \</div><div>        pe-error-series-max=1500 \</div><div>        stonith-action=poweroff \</div><div>        stonith-timeout=900 \</div><div>        dc-deadtime=2min \</div><div>        maintenance-mode=false \</div><div>        have-watchdog=false \</div><div>        dc-version=1.1.13-10.el7-44eb2dd \</div><div>        cluster-infrastructure=corosync</div><div><div class="gmail_extra"><br></div><div class="gmail_extra">Thanks again,</div><div class="gmail_extra">Chris</div><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Dec 15, 2016 at 3:26 PM, Ken Gaillot <span dir="ltr">&lt;<a href="mailto:kgaillot@redhat.com" target="_blank">kgaillot@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex"><span>On 12/15/2016 02:00 PM, Chris Walker wrote:<br>
&gt; Hello,<br>
&gt;<br>
&gt; I have a quick question about dc-deadtime.  I believe that Digimer and<br>
&gt; others on this list might have already addressed this, but I want to<br>
&gt; make sure I&#39;m not missing something.<br>
&gt;<br>
&gt; If my understanding is correct, dc-deadtime sets the amount of time that<br>
&gt; must elapse before a cluster is formed (DC is elected, etc), regardless<br>
&gt; of which nodes have joined the cluster.  In other words, even if all<br>
&gt; nodes that are explicitly enumerated in the nodelist section have<br>
&gt; started Pacemaker, they will still wait dc-deadtime before forming a<br>
&gt; cluster.<br>
&gt;<br>
&gt; In my case, I have a two-node cluster on which I&#39;d like to allow a<br>
&gt; pretty long time (~5 minutes) for both nodes to join before giving up on<br>
&gt; them.  However, if they both join quickly, I&#39;d like to proceed to form a<br>
&gt; cluster immediately; I don&#39;t want to wait for the full five minutes to<br>
&gt; elapse before forming a cluster.  Further, if a node doesn&#39;t respond<br>
&gt; within five minutes, I want to fence it and start resources on the node<br>
&gt; that is up.<br>
<br>
</span>Pacemaker+corosync behaves as you describe by default.<br>
<br>
dc-deadtime is how long to wait for an election to finish, but if the<br>
election finishes sooner than that (i.e. a DC is elected), it stops<br>
waiting. It doesn&#39;t even wait for all nodes, just a quorum.<br>
<br>
Also, with startup-fencing=true (the default), any unseen nodes will be<br>
fenced, and the remaining nodes will proceed to host resources. Of<br>
course, it needs quorum for this, too.<br>
<br>
With two nodes, quorum is handled specially, but that&#39;s a different topic.<br>
<span><br>
&gt; With Pacemaker/Heartbeat, the initdead parameter did exactly what I<br>
&gt; want, but I don&#39;t see any way to do this with Pacemaker/Corosync.  From<br>
&gt; reading other posts, it looks like people use an external agent to start<br>
&gt; HA daemons once nodes are up ... is this a correct understanding?<br>
&gt;<br>
&gt; Thanks very much,<br>
&gt; Chris<br>
<br>
</span>______________________________<wbr>_________________<br>
Users mailing list: <a href="mailto:Users@clusterlabs.org" target="_blank">Users@clusterlabs.org</a><br>
<a href="http://lists.clusterlabs.org/mailman/listinfo/users" rel="noreferrer" target="_blank">http://lists.clusterlabs.org/m<wbr>ailman/listinfo/users</a><br>
<br>
Project Home: <a href="http://www.clusterlabs.org" rel="noreferrer" target="_blank">http://www.clusterlabs.org</a><br>
Getting started: <a href="http://www.clusterlabs.org/doc/Cluster_from_Scratch.pdf" rel="noreferrer" target="_blank">http://www.clusterlabs.org/doc<wbr>/Cluster_from_Scratch.pdf</a><br>
Bugs: <a href="http://bugs.clusterlabs.org" rel="noreferrer" target="_blank">http://bugs.clusterlabs.org</a><br>
</blockquote></div><br></div></div></div></div>