<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 3.2//EN">
<HTML>
<HEAD>
<META HTTP-EQUIV="Content-Type" CONTENT="text/html; charset=iso-8859-1">
<META NAME="Generator" CONTENT="MS Exchange Server version 6.5.7652.24">
<TITLE>Problems with colocation/order with drbd tree-node-setup</TITLE>
</HEAD>
<BODY>
<!-- Converted from text/rtf format -->

<P><FONT SIZE=2 FACE="Arial">my first post on this list; will be quite a long one :)</FONT>
</P>

<P><FONT SIZE=2 FACE="Arial">environment:</FONT>

<BR><FONT SIZE=2 FACE="Arial">OS: RHEL 5.4 x86_64</FONT>
</P>

<P><FONT SIZE=2 FACE="Arial">drbd83.x86_64&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 8.3.2-6.el5_3</FONT>

<BR><FONT SIZE=2 FACE="Arial">kmod-drbd83.x86_64&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 8.3.2-6.el5_3</FONT>

<BR><FONT SIZE=2 FACE="Arial">openais.x86_64&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.80.6-8.el5_4.1</FONT>

<BR><FONT SIZE=2 FACE="Arial">heartbeat.x86_64&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 3.0.0-33.2</FONT>

<BR><FONT SIZE=2 FACE="Arial">resource-agents.x86_64&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 1.0-31.4</FONT>

<BR><FONT SIZE=2 FACE="Arial">pacemaker.x86_64&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 1.0.5-4.1</FONT>

<BR><FONT SIZE=2 FACE="Arial">pacemaker-libs.x86_64&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 1.0.5-4.1</FONT>
</P>
<BR>

<P><FONT SIZE=2 FACE="Arial">i would like to mention that i first successfully implemented a 2 node active-passive setup with pacemaker with help from the drbd-users-guide.</FONT></P>

<P><FONT SIZE=2 FACE="Arial">my next try was the three node setup (one backup-server outside of the HA cluster)</FONT>

<BR><FONT SIZE=2 FACE="Arial">it is up-and-running when i doing it 'by hand' !</FONT>
</P>

<P><FONT SIZE=2 FACE="Arial">my problems start with the configuration of pacemaker, here i' m lost.</FONT>
</P>

<P><FONT SIZE=2 FACE="Arial">i defined the primitive resources, master-slave (without complains of crm/configure/ptest)</FONT>
</P>

<P><FONT SIZE=2 FACE="Arial">after colocation + ordering, ptest complains:</FONT>

<BR><FONT SIZE=2 FACE="Arial">-------------------------------------------------------------------------------------------------------------------------</FONT></P>

<P><FONT SIZE=2 FACE="Arial">crm(live)configure# ptest</FONT>

<BR><FONT SIZE=2 FACE="Arial">ptest[15059]: 2009/10/16_11:27:17 WARN: native_color: Resource res.ip.mysql cannot run anywhere</FONT>

<BR><FONT SIZE=2 FACE="Arial">ptest[15059]: 2009/10/16_11:27:17 WARN: native_color: Resource res.drbd.mysqlstack:0 cannot run anywhere</FONT>

<BR><FONT SIZE=2 FACE="Arial">-------------------------------------------------------------------------------------------------------------------------</FONT></P>

<P><FONT SIZE=2 FACE="Arial">-------------------------------------------------------------------------------------------------------------------------</FONT></P>

<P><FONT SIZE=2 FACE="Arial">crm(live)configure# show</FONT>

<BR><FONT SIZE=2 FACE="Arial">node mysqlHA1.cologne.tecdoc.local</FONT>

<BR><FONT SIZE=2 FACE="Arial">node mysqlHA2.cologne.tecdoc.local</FONT>

<BR><FONT SIZE=2 FACE="Arial">primitive res.drbd.mysqldb ocf:linbit:drbd \</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; params drbd_resource=&quot;mysqldb&quot;</FONT>

<BR><FONT SIZE=2 FACE="Arial">primitive res.drbd.mysqlstack ocf:linbit:drbd \</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; params drbd_resource=&quot;mysqlstack&quot;</FONT>

<BR><FONT SIZE=2 FACE="Arial">primitive res.ip.mysql ocf:heartbeat:IPaddr2 \</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; params ip=&quot;172.30.2.10&quot; nic=&quot;eth0&quot; \</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; op monitor interval=&quot;2s&quot; timeout=&quot;0.5s&quot;</FONT>

<BR><FONT SIZE=2 FACE="Arial">ms ms.drbd.mysqldb res.drbd.mysqldb \</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; meta master-max=&quot;1&quot; master-node-max=&quot;1&quot; clone-max=&quot;2&quot; clone-node-max=&quot;1&quot; notify=&quot;true&quot; globally_unique=&quot;false&quot;</FONT>

<BR><FONT SIZE=2 FACE="Arial">ms ms.drbd.mysqlstack res.drbd.mysqlstack \</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; meta master-max=&quot;1&quot; master-node-max=&quot;1&quot; clone-max=&quot;1&quot; clone-node-max=&quot;1&quot; notify=&quot;true&quot; globally_unique=&quot;false&quot;</FONT>

<BR><FONT SIZE=2 FACE="Arial">colocation co.ms.drbd.mysqlstack_on_ms.drbd.mysqldb inf: ms.drbd.mysqlstack ms.drbd.mysqldb:Master</FONT>

<BR><FONT SIZE=2 FACE="Arial">colocation co.ms.drbd.mysqlstack_on_res.ip.mysql inf: ms.drbd.mysqlstack res.ip.mysql</FONT>

<BR><FONT SIZE=2 FACE="Arial">colocation co.res.ip.mysql_on_ms.drbd.mysqldb_master inf: res.ip.mysql ms.drbd.mysqldb:Master</FONT>

<BR><FONT SIZE=2 FACE="Arial">order o.ip.mysql_before_ms.drbd.mysqlstack inf: res.ip.mysql ms.drbd.mysqlstack:start</FONT>

<BR><FONT SIZE=2 FACE="Arial">order o.ms.drbd.mysqldb_before_ms.drbd.mysqlstack inf: ms.drbd.mysqldb:promote ms.drbd.mysqlstack:start</FONT>

<BR><FONT SIZE=2 FACE="Arial">property $id=&quot;cib-bootstrap-options&quot; \</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; stonith-enabled=&quot;false&quot;</FONT>

<BR><FONT SIZE=2 FACE="Arial">-------------------------------------------------------------------------------------------------------------------------</FONT></P>

<P><FONT SIZE=2 FACE="Arial">i have no idea why the cluster-ip cannot be run anywhere (and of course prevent res.drbd.mysqlstack from starting)</FONT>
</P>
<BR>

<P><FONT SIZE=2 FACE="Arial">if you're interested, my /etc/drbd.conf:</FONT>

<BR><FONT SIZE=2 FACE="Arial">-------------------------------------------------------------------------------------------------------------------------</FONT></P>

<P><FONT SIZE=2 FACE="Arial">global {</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; usage-count no;</FONT>

<BR><FONT SIZE=2 FACE="Arial">}</FONT>

<BR><FONT SIZE=2 FACE="Arial">common {</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; syncer {</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; rate 10M;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; verify-alg sha1;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; }</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; protocol C;</FONT>

<BR><FONT SIZE=2 FACE="Arial">}</FONT>

<BR><FONT SIZE=2 FACE="Arial">resource mysqldb {</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; handlers {</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; fence-peer &quot;/usr/lib/drbd/crm-fence-peer.sh&quot;;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; after-resync-target &quot;/usr/lib/drbd/crm-unfence-peer.sh&quot;;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; split-brain&nbsp;&nbsp; &quot;/usr/lib/drbd/notify-split-brain.sh root&quot;;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; }</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; startup {</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; degr-wfc-timeout 60;&nbsp;&nbsp;&nbsp; # 1 minute</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; outdated-wfc-timeout 2;&nbsp; # 2 seconds.</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; }</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; disk {</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; on-io-error&nbsp;&nbsp; detach;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; }</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; net {</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; cram-hmac-alg &quot;sha1&quot;;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; shared-secret &quot;secret&quot;;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; after-sb-0pri disconnect;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; after-sb-1pri disconnect;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; after-sb-2pri disconnect;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; rr-conflict disconnect;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; }</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; syncer {</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; rate 20M;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; al-extents 257;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; }</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; device&nbsp;&nbsp;&nbsp; /dev/drbd0;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; disk&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; /dev/sdb;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; meta-disk internal;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; on mysqlHA1.cologne.tecdoc.local {</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; address&nbsp;&nbsp;&nbsp; 10.6.0.127:7788;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; }</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; on mysqlHA2.cologne.tecdoc.local {</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp; address&nbsp;&nbsp; 10.6.0.128:7788;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp; }</FONT>

<BR><FONT SIZE=2 FACE="Arial">}</FONT>

<BR><FONT SIZE=2 FACE="Arial">resource mysqlstack {</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; protocol A;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; device&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; /dev/drbd10;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; stacked-on-top-of mysqldb {</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; address&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 172.30.2.10:7789;&nbsp; # Cluster IP</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; }</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; on mysqlHAoffsite.cologne.tecdoc.local {</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; disk&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; /dev/sdb;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; address&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 172.30.2.78:7789;&nbsp; # public IP of backup-node</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; meta-disk&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; internal;</FONT>

<BR><FONT SIZE=2 FACE="Arial">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; }</FONT>

<BR><FONT SIZE=2 FACE="Arial">}</FONT>

<BR><FONT SIZE=2 FACE="Arial">-------------------------------------------------------------------------------------------------------------------------</FONT></P>

<P><FONT COLOR="#000000" SIZE=2 FACE="Arial">Mit freundlichen Grüßen / with kind regards</FONT>

<BR><B><FONT COLOR="#000000" FACE="Arial">Torsten Schmidt</FONT></B>

<BR><FONT COLOR="#000000" SIZE=2 FACE="Arial">System Manager</FONT>
</P>
<BR>

</BODY>
</HTML>