<div dir="ltr">Hi,<div> I have two node cluster (vsanqa9, vsanqa10). I rebooted vsanqa9. vsanqa10 decides to promote multistae resources immediately (at 19:22:19), However, actual promote entrypoints are called at 19:25:25</div>
<div><br></div><div>Here are the logs</div><div><br></div><div><br></div><div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-48b22063-1336-44de-821c-ff596320bf15:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-2dc77182-f2c9-4893-9b58-6d55068f8951:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-b3318d7a-8a18-43fc-bf44-42d17e938807:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-98dd30d1-2b1a-40c5-aff8-8b99fd7b87c3:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-db06690f-8b48-4365-868d-6b369df5e046:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-709ec41e-dc1c-41c6-a775-d8ade8af6cff:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-5af9678a-11cb-40fd-aa6f-eff4af88a106:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-cd1f1473-3fd6-4f4d-8023-f03b219813fe:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-65a51ba5-da30-41e3-a7fd-05f2da59de2a:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-5c8e4337-62ea-4122-be57-dfa11466846f:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-73691140-bfce-442d-8258-ce20e0cbe591:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-7e5fbbc4-a447-4471-975e-f6a7f97584ed:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-d091df41-bd77-4532-9369-5a8221309535:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-d231e651-dcae-48f7-ab31-9c77720c3180:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-f3ad2677-e5c6-49af-b4cf-ca0fe8da98fc:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-0368f7b5-4937-4d4f-9a68-05bc0513163c:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-a67c7923-2b10-434c-a028-3904f68c8dcd:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-8340ff19-5ff9-42e4-b273-b3c68a2e95c7:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-5647d160-4966-4502-a748-ed86bb601fe7:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-1d24d325-5432-4e65-9144-e53e005e7752:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-7d4aad45-7aaa-4ac1-9ef6-ba2a64d8a2f9:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-9deb7157-9dd3-4791-be02-04d9a8bd4f5f:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-b7905e9b-4b67-4b8f-8c50-8eb6a19a808f:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-f0b63987-bed9-4a78-a81a-5e4b31923155:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-7299a383-0b9e-4d0b-ae24-a0486a83a7e8:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-1152c392-d168-4898-b4a5-9a327a52da8d:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-edbb0f0b-b444-40d2-a2da-451f24ac058f:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-17ca036e-f675-4055-bc0c-53bf597f6247:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-95b98121-9c98-4cc1-a6bf-6093d9182c18:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-245d2e3e-efd4-48bf-9691-f21e6538bd2a:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-ff47fa02-dd98-437b-8460-22f68b0e6d31:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-b9ed8916-3866-45d0-8cd1-46dae522432f:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:22:19 vsanqa10 pengine[31206]:   notice: process_pe_message: Calculated Transition 0: /var/lib/pacemaker/pengine/pe-input-3355.bz2</div>
<div>Mar 17 19:22:24 vsanqa10 lrmd[31204]:     crit: crm_ipcs_send: Event 152 failed, size=865, to=0x11b29f0[31207], queue=23, retries=20, rc=-11: &lt;lrmd_notify lrmd_origin=&quot;send_cmd_complete_notify&quot; lrmd_timeout=&quot;100000&quot; lrmd_rsc_interval=&quot;31000&quot; lrmd_rsc_start_delay</div>
<div>Mar 17 19:22:24 vsanqa10 lrmd[31204]:  warning: send_client_notify: Notification of client crmd/d677b9ec-2890-41b7-9b5a-eddedb249c9a failed</div><div>Mar 17 19:22:29 vsanqa10 lrmd[31204]:     crit: crm_ipcs_send: Event 153 failed, size=865, to=0x11b29f0[31207], queue=23, retries=20, rc=-11: &lt;lrmd_notify lrmd_origin=&quot;send_cmd_complete_notify&quot; lrmd_timeout=&quot;100000&quot; lrmd_rsc_interval=&quot;31000&quot; lrmd_rsc_start_delay</div>
<div>Mar 17 19:22:29 vsanqa10 lrmd[31204]:  warning: send_client_notify: Notification of client crmd/d677b9ec-2890-41b7-9b5a-eddedb249c9a failed</div><div>Mar 17 19:22:34 vsanqa10 lrmd[31204]:     crit: crm_ipcs_send: Event 154 failed, size=865, to=0x11b29f0[31207], queue=23, retries=20, rc=-11: &lt;lrmd_notify lrmd_origin=&quot;send_cmd_complete_notify&quot; lrmd_timeout=&quot;100000&quot; lrmd_rsc_interval=&quot;31000&quot; lrmd_rsc_start_delay</div>
<div>Mar 17 19:22:34 vsanqa10 lrmd[31204]:  warning: send_client_notify: Notification of client crmd/d677b9ec-2890-41b7-9b5a-eddedb249c9a failed</div><div>Mar 17 19:22:35 vsanqa10 OpenSM[3241]: Entering DISCOVERING state#012</div>
<div>Mar 17 19:22:35 vsanqa10 OpenSM[3241]: SM port is down#012</div><div>Mar 17 19:22:38 vsanqa10 lrmd[31204]:     crit: crm_ipcs_send: Event 155 failed, size=865, to=0x11b29f0[31207], queue=23, retries=20, rc=-11: &lt;lrmd_notify lrmd_origin=&quot;send_cmd_complete_notify&quot; lrmd_timeout=&quot;100000&quot; lrmd_rsc_interval=&quot;31000&quot; lrmd_rsc_start_delay</div>
<div>Mar 17 19:22:38 vsanqa10 lrmd[31204]:  warning: send_client_notify: Notification of client crmd/d677b9ec-2890-41b7-9b5a-eddedb249c9a failed</div><div>Mar 17 19:22:43 vsanqa10 lrmd[31204]:     crit: crm_ipcs_send: Event 156 failed, size=865, to=0x11b29f0[31207], queue=23, retries=20, rc=-11: &lt;lrmd_notify lrmd_origin=&quot;send_cmd_complete_notify&quot; lrmd_timeout=&quot;100000&quot; lrmd_rsc_interval=&quot;31000&quot; lrmd_rsc_start_delay</div>
<div>Mar 17 19:22:43 vsanqa10 lrmd[31204]:  warning: send_client_notify: Notification of client crmd/d677b9ec-2890-41b7-9b5a-eddedb249c9a failed</div><div>Mar 17 19:22:44 vsanqa10 crmd[31207]:  warning: crm_ipc_send: Request 581 to lrmd failed: Connection timed out (-110)</div>
<div>Mar 17 19:22:44 vsanqa10 crmd[31207]:    error: lrmd_send_command: Couldn&#39;t perform lrmd_rsc_info operation (timeout=0): -110: Connection timed out (110)</div><div>Mar 17 19:22:44 vsanqa10 crmd[31207]:  warning: crm_ipc_send: Sending to lrmd is disabled until pending reply is recieved</div>
<div>Mar 17 19:22:44 vsanqa10 crmd[31207]:    error: lrmd_send_command: Couldn&#39;t perform lrmd_rsc_info operation (timeout=0): -121: Connection timed out (110)</div><div>Mar 17 19:22:44 vsanqa10 crmd[31207]:  warning: crm_ipc_send: Sending to lrmd is disabled until pending reply is recieved</div>
<div>Mar 17 19:22:44 vsanqa10 crmd[31207]:    error: lrmd_send_command: Couldn&#39;t perform lrmd_rsc_register operation (timeout=0): -121: Connection timed out (110)</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:  warning: crm_ipc_send: Sending to lrmd is disabled until pending reply is recieved</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: lrmd_send_command: Couldn&#39;t perform lrmd_rsc_info operation (timeout=0): -121: Connection timed out (110)</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: get_lrm_resource: Could not add resource vha-b9ed8916-3866-45d0-8cd1-46dae522432f to LRM</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: do_lrm_invoke: Invalid resource definition</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:  warning: do_lrm_invoke: bad input &lt;create_request_adv origin=&quot;te_rsc_command&quot; t=&quot;crmd&quot; version=&quot;3.0.7&quot; subt=&quot;request&quot; reference=&quot;lrm_invoke-tengine-1395109358-73&quot; crm_task=&quot;lrm_invoke&quot; crm_sys_to=&quot;lrmd&quot; crm_sys_from=&quot;tengine&quot; crm_host_to=&quot;vsanqa10&quot; &gt;</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:  warning: do_lrm_invoke: bad input   &lt;crm_xml &gt;</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:  warning: do_lrm_invoke: bad input     &lt;rsc_op id=&quot;15&quot; operation=&quot;cancel&quot; operation_key=&quot;vha-b9ed8916-3866-45d0-8cd1-46dae522432f_cancel_31000&quot; internal_operation_key=&quot;vha-b9ed8916-3866-45d0-8cd1-46dae522432f:0_monitor_31000&quot; on_node=&quot;vsanqa10&quot; on_node_uuid=&quot;vsanqa10&quot; transition-key=&quot;15:0:0:fbd49530-ff5c-4fb0-a655-196c8e7d5510&quot; &gt;</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:  warning: do_lrm_invoke: bad input       &lt;primitive id=&quot;vha-b9ed8916-3866-45d0-8cd1-46dae522432f&quot; long-id=&quot;vha-b9ed8916-3866-45d0-8cd1-46dae522432f:0&quot; class=&quot;ocf&quot; provider=&quot;heartbeat&quot; type=&quot;vgc-cm-agent.ocf&quot; /&gt;</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:  warning: do_lrm_invoke: bad input       &lt;attributes CRM_meta_clone=&quot;0&quot; CRM_meta_clone_max=&quot;2&quot; CRM_meta_clone_node_max=&quot;1&quot; CRM_meta_globally_unique=&quot;false&quot; CRM_meta_interval=&quot;31000&quot; CRM_meta_master_max=&quot;1&quot; CRM_meta_master_node_max=&quot;1&quot; CRM_meta_name=&quot;monitor&quot; CRM_meta_notify=&quot;false&quot; CRM_meta_operation=&quot;monitor&quot; CRM_meta_role=&quot;Slave&quot; CRM_meta_timeout=&quot;100000&quot; cluster_uuid=&quot;b9ed8916-3866-45d0-8cd1-46dae522432f&quot; crm_feature_set=&quot;3.0.7&quot; /&gt;</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:  warning: do_lrm_invoke: bad input     &lt;/rsc_op&gt;</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:  warning: do_lrm_invoke: bad input   &lt;/crm_xml&gt;</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:  warning: do_lrm_invoke: bad input &lt;/create_request_adv&gt;</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:  warning: do_log: FSA: Input I_FAIL from get_lrm_resource() received in state S_TRANSITION_ENGINE</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:  warning: crm_ipc_send: Sending to lrmd is disabled until pending reply is recieved</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: lrmd_send_command: Couldn&#39;t perform lrmd_rsc_cancel operation (timeout=0): -121: Connection timed out (110)</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-2dc77182-f2c9-4893-9b58-6d55068f8951 was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-5af9678a-11cb-40fd-aa6f-eff4af88a106 was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-17ca036e-f675-4055-bc0c-53bf597f6247 was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-5647d160-4966-4502-a748-ed86bb601fe7 was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-98dd30d1-2b1a-40c5-aff8-8b99fd7b87c3 was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-7d4aad45-7aaa-4ac1-9ef6-ba2a64d8a2f9 was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-5c8e4337-62ea-4122-be57-dfa11466846f was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-48b22063-1336-44de-821c-ff596320bf15 was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-7e5fbbc4-a447-4471-975e-f6a7f97584ed was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-9deb7157-9dd3-4791-be02-04d9a8bd4f5f was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-0368f7b5-4937-4d4f-9a68-05bc0513163c was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-b7905e9b-4b67-4b8f-8c50-8eb6a19a808f was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-cd1f1473-3fd6-4f4d-8023-f03b219813fe was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-65a51ba5-da30-41e3-a7fd-05f2da59de2a was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-b9ed8916-3866-45d0-8cd1-46dae522432f was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:   notice: ghash_print_pending_for_rsc: Recurring action vha-b9ed8916-3866-45d0-8cd1-46dae522432f:371 (vha-b9ed8916-3866-45d0-8cd1-46dae522432f_monitor_31000) incomplete at shutdown</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-a67c7923-2b10-434c-a028-3904f68c8dcd was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-f3ad2677-e5c6-49af-b4cf-ca0fe8da98fc was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-ff47fa02-dd98-437b-8460-22f68b0e6d31 was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-b3318d7a-8a18-43fc-bf44-42d17e938807 was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-7299a383-0b9e-4d0b-ae24-a0486a83a7e8 was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-8340ff19-5ff9-42e4-b273-b3c68a2e95c7 was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-1d24d325-5432-4e65-9144-e53e005e7752 was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-1d24d325-5432-4e65-9144-e53e005e7752 was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-d091df41-bd77-4532-9369-5a8221309535 was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-edbb0f0b-b444-40d2-a2da-451f24ac058f was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-709ec41e-dc1c-41c6-a775-d8ade8af6cff was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-1152c392-d168-4898-b4a5-9a327a52da8d was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-73691140-bfce-442d-8258-ce20e0cbe591 was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-db06690f-8b48-4365-868d-6b369df5e046 was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-245d2e3e-efd4-48bf-9691-f21e6538bd2a was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-f0b63987-bed9-4a78-a81a-5e4b31923155 was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-95b98121-9c98-4cc1-a6bf-6093d9182c18 was active at shutdown.  You may ignore this error if it is unmanaged.</div><div>Mar 17 19:22:45 vsanqa10 crmd[31207]:    error: verify_stopped: Resource vha-d231e651-dcae-48f7-ab31-9c77720c3180 was active at shutdown.  You may ignore this error if it is unmanaged.</div>
<div>Mar 17 19:22:45 vsanqa10 lrmd[31204]:  warning: send_client_notify: Notification of client crmd/d677b9ec-2890-41b7-9b5a-eddedb249c9a failed</div><div>Mar 17 19:22:45 vsanqa10 lrmd[31204]:  warning: send_client_notify: Notification of client crmd/d677b9ec-2890-41b7-9b5a-eddedb249c9a failed</div>
<div>Mar 17 19:22:45 vsanqa10 lrmd[31204]:  warning: send_client_notify: Notification of client crmd/d677b9ec-2890-41b7-9b5a-eddedb249c9a failed</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action    8]: Completed rsc op vha-48b22063-1336-44de-821c-ff596320bf15_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action    1]: Completed rsc op vha-2dc77182-f2c9-4893-9b58-6d55068f8951_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   19]: Completed rsc op vha-b3318d7a-8a18-43fc-bf44-42d17e938807_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action    5]: Completed rsc op vha-98dd30d1-2b1a-40c5-aff8-8b99fd7b87c3_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   28]: Completed rsc op vha-db06690f-8b48-4365-868d-6b369df5e046_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   25]: Completed rsc op vha-709ec41e-dc1c-41c6-a775-d8ade8af6cff_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action    2]: Completed rsc op vha-5af9678a-11cb-40fd-aa6f-eff4af88a106_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   13]: Completed rsc op vha-cd1f1473-3fd6-4f4d-8023-f03b219813fe_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   14]: Completed rsc op vha-65a51ba5-da30-41e3-a7fd-05f2da59de2a_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action    7]: Completed rsc op vha-5c8e4337-62ea-4122-be57-dfa11466846f_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   27]: Completed rsc op vha-73691140-bfce-442d-8258-ce20e0cbe591_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action    9]: Completed rsc op vha-7e5fbbc4-a447-4471-975e-f6a7f97584ed_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   23]: Completed rsc op vha-d091df41-bd77-4532-9369-5a8221309535_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   32]: Completed rsc op vha-d231e651-dcae-48f7-ab31-9c77720c3180_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   17]: Completed rsc op vha-f3ad2677-e5c6-49af-b4cf-ca0fe8da98fc_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   11]: Completed rsc op vha-0368f7b5-4937-4d4f-9a68-05bc0513163c_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   16]: Completed rsc op vha-a67c7923-2b10-434c-a028-3904f68c8dcd_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   21]: Completed rsc op vha-8340ff19-5ff9-42e4-b273-b3c68a2e95c7_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action    4]: Completed rsc op vha-5647d160-4966-4502-a748-ed86bb601fe7_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   22]: Completed rsc op vha-1d24d325-5432-4e65-9144-e53e005e7752_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action    6]: Completed rsc op vha-7d4aad45-7aaa-4ac1-9ef6-ba2a64d8a2f9_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   10]: Completed rsc op vha-9deb7157-9dd3-4791-be02-04d9a8bd4f5f_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:24:59 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:24:59 vsanqa10 crmd[31207]:    error: print_synapse: [Action   12]: Completed rsc op vha-b7905e9b-4b67-4b8f-8c50-8eb6a19a808f_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:25:04 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:25:04 vsanqa10 crmd[31207]:    error: print_synapse: [Action   30]: Completed rsc op vha-f0b63987-bed9-4a78-a81a-5e4b31923155_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:25:09 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:25:09 vsanqa10 crmd[31207]:    error: print_synapse: [Action   20]: Completed rsc op vha-7299a383-0b9e-4d0b-ae24-a0486a83a7e8_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:25:14 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:25:14 vsanqa10 crmd[31207]:    error: print_synapse: [Action   26]: Completed rsc op vha-1152c392-d168-4898-b4a5-9a327a52da8d_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:25:14 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:25:14 vsanqa10 crmd[31207]:    error: print_synapse: [Action   24]: Completed rsc op vha-edbb0f0b-b444-40d2-a2da-451f24ac058f_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:25:14 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:25:14 vsanqa10 crmd[31207]:    error: print_synapse: [Action    3]: Completed rsc op vha-17ca036e-f675-4055-bc0c-53bf597f6247_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:25:14 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:25:14 vsanqa10 crmd[31207]:    error: print_synapse: [Action   31]: Completed rsc op vha-95b98121-9c98-4cc1-a6bf-6093d9182c18_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:25:14 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:25:14 vsanqa10 crmd[31207]:    error: print_synapse: [Action   29]: Completed rsc op vha-245d2e3e-efd4-48bf-9691-f21e6538bd2a_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:25:18 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:25:18 vsanqa10 crmd[31207]:    error: print_synapse: [Action   18]: Completed rsc op vha-ff47fa02-dd98-437b-8460-22f68b0e6d31_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: action_timer_callback: Timer popped (timeout=100000, abort_level=1000000, complete=false)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:    error: print_synapse: [Action   15]: In-flight rsc op vha-b9ed8916-3866-45d0-8cd1-46dae522432f_cancel_31000 on vsanqa10 (priority: 0, waiting: none)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:   notice: run_graph: Transition 0 (Complete=64, Pending=0, Fired=0, Skipped=64, Incomplete=32, Source=/var/lib/pacemaker/pengine/pe-input-3355.bz2): Stopped</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: unpack_config: On loss of CCM Quorum: Ignore</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-48b22063-1336-44de-821c-ff596320bf15:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-2dc77182-f2c9-4893-9b58-6d55068f8951:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-b3318d7a-8a18-43fc-bf44-42d17e938807:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-98dd30d1-2b1a-40c5-aff8-8b99fd7b87c3:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-db06690f-8b48-4365-868d-6b369df5e046:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-709ec41e-dc1c-41c6-a775-d8ade8af6cff:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-5af9678a-11cb-40fd-aa6f-eff4af88a106:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-cd1f1473-3fd6-4f4d-8023-f03b219813fe:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-65a51ba5-da30-41e3-a7fd-05f2da59de2a:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-5c8e4337-62ea-4122-be57-dfa11466846f:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-73691140-bfce-442d-8258-ce20e0cbe591:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-7e5fbbc4-a447-4471-975e-f6a7f97584ed:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-d091df41-bd77-4532-9369-5a8221309535:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-d231e651-dcae-48f7-ab31-9c77720c3180:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-f3ad2677-e5c6-49af-b4cf-ca0fe8da98fc:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-0368f7b5-4937-4d4f-9a68-05bc0513163c:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-a67c7923-2b10-434c-a028-3904f68c8dcd:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-8340ff19-5ff9-42e4-b273-b3c68a2e95c7:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-5647d160-4966-4502-a748-ed86bb601fe7:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-1d24d325-5432-4e65-9144-e53e005e7752:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-7d4aad45-7aaa-4ac1-9ef6-ba2a64d8a2f9:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-9deb7157-9dd3-4791-be02-04d9a8bd4f5f:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-b7905e9b-4b67-4b8f-8c50-8eb6a19a808f:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-f0b63987-bed9-4a78-a81a-5e4b31923155:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-7299a383-0b9e-4d0b-ae24-a0486a83a7e8:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-1152c392-d168-4898-b4a5-9a327a52da8d:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-edbb0f0b-b444-40d2-a2da-451f24ac058f:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-17ca036e-f675-4055-bc0c-53bf597f6247:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-95b98121-9c98-4cc1-a6bf-6093d9182c18:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-245d2e3e-efd4-48bf-9691-f21e6538bd2a:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-ff47fa02-dd98-437b-8460-22f68b0e6d31:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-b9ed8916-3866-45d0-8cd1-46dae522432f:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: process_pe_message: Calculated Transition 1: (null)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:   notice: run_graph: Transition 1 (Complete=64, Pending=0, Fired=0, Skipped=64, Incomplete=32, Source=unknown): Stopped</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: unpack_config: On loss of CCM Quorum: Ignore</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-48b22063-1336-44de-821c-ff596320bf15:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-2dc77182-f2c9-4893-9b58-6d55068f8951:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-b3318d7a-8a18-43fc-bf44-42d17e938807:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-98dd30d1-2b1a-40c5-aff8-8b99fd7b87c3:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-db06690f-8b48-4365-868d-6b369df5e046:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-709ec41e-dc1c-41c6-a775-d8ade8af6cff:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-5af9678a-11cb-40fd-aa6f-eff4af88a106:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-cd1f1473-3fd6-4f4d-8023-f03b219813fe:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-65a51ba5-da30-41e3-a7fd-05f2da59de2a:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-5c8e4337-62ea-4122-be57-dfa11466846f:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-73691140-bfce-442d-8258-ce20e0cbe591:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-7e5fbbc4-a447-4471-975e-f6a7f97584ed:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-d091df41-bd77-4532-9369-5a8221309535:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-d231e651-dcae-48f7-ab31-9c77720c3180:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-f3ad2677-e5c6-49af-b4cf-ca0fe8da98fc:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-0368f7b5-4937-4d4f-9a68-05bc0513163c:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-a67c7923-2b10-434c-a028-3904f68c8dcd:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-8340ff19-5ff9-42e4-b273-b3c68a2e95c7:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-5647d160-4966-4502-a748-ed86bb601fe7:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-1d24d325-5432-4e65-9144-e53e005e7752:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-7d4aad45-7aaa-4ac1-9ef6-ba2a64d8a2f9:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-9deb7157-9dd3-4791-be02-04d9a8bd4f5f:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-b7905e9b-4b67-4b8f-8c50-8eb6a19a808f:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-f0b63987-bed9-4a78-a81a-5e4b31923155:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-7299a383-0b9e-4d0b-ae24-a0486a83a7e8:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-1152c392-d168-4898-b4a5-9a327a52da8d:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-edbb0f0b-b444-40d2-a2da-451f24ac058f:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-17ca036e-f675-4055-bc0c-53bf597f6247:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-95b98121-9c98-4cc1-a6bf-6093d9182c18:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-245d2e3e-efd4-48bf-9691-f21e6538bd2a:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-ff47fa02-dd98-437b-8460-22f68b0e6d31:0#011(Slave -&gt; Master vsanqa10)</div><div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: LogActions: Promote vha-b9ed8916-3866-45d0-8cd1-46dae522432f:0#011(Slave -&gt; Master vsanqa10)</div>
<div>Mar 17 19:25:25 vsanqa10 pengine[31206]:   notice: process_pe_message: Calculated Transition 2: /var/lib/pacemaker/pengine/pe-input-3356.bz2</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 8 (src=166)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 1 (src=167)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 19 (src=168)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 5 (src=169)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 28 (src=170)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 25 (src=171)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 2 (src=172)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 13 (src=173)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 14 (src=174)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 7 (src=175)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 27 (src=176)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 9 (src=177)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 23 (src=178)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 32 (src=179)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 17 (src=180)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 11 (src=181)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 16 (src=182)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 21 (src=183)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 4 (src=184)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 22 (src=185)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 6 (src=186)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 10 (src=187)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 12 (src=188)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 30 (src=189)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 20 (src=190)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 26 (src=191)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 24 (src=192)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 3 (src=193)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 31 (src=194)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 29 (src=195)</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 18 (src=196)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:  warning: destroy_action: Cancelling timer for action 15 (src=197)</div><div>Mar 17 19:25:25 vsanqa10 attrd[31205]:   notice: attrd_trigger_update: Sending flush op to all hosts for: master-vha-edbb0f0b-b444-40d2-a2da-451f24ac058f (3)</div>
<div>Mar 17 19:25:25 vsanqa10 attrd[31205]:   notice: attrd_perform_update: Sent update 216: master-vha-edbb0f0b-b444-40d2-a2da-451f24ac058f=3</div><div>Mar 17 19:25:25 vsanqa10 attrd[31205]:   notice: attrd_trigger_update: Sending flush op to all hosts for: master-vha-a67c7923-2b10-434c-a028-3904f68c8dcd (3)</div>
<div>Mar 17 19:25:25 vsanqa10 crmd[31207]:   notice: process_lrm_event: LRM operation vha-edbb0f0b-b444-40d2-a2da-451f24ac058f_promote_0 (call=534, rc=0, cib-update=187, confirmed=true) ok</div><div>Mar 17 19:25:25 vsanqa10 crmd[31207]:   notice: process_lrm_event: LRM operation vha-a67c7923-2b10-434c-a028-3904f68c8dcd_promote_0 (call=514, rc=0, cib-update=188, confirmed=true) ok</div>
</div><div><br></div><div><br></div><div>regards,</div><div> Kiran</div></div>