<div dir="ltr">Hi,<div><br></div><div>We've noticed a failure in one of our test runs tonight which I can't explain. During a reboot test of the nodes in the cluster, one of the pgpool instances (the one with ip 172.29.30.2) starts returning the following error:</div><div>pid 194: ERROR:  unable to read message kind<br>pid 194: DETAIL:  kind does not match between main(0) slot[0] (52)<br></div><div><br></div><div>Any attempt to establish a connection to this node fails with the error above. The other 2 nodes in the cluster are fine. I've attached the log of the node and copied the status for the watchdog and backends below. What could be causing this error?</div><div><br></div><div>Best regards,</div><div>Emond</div><div><br></div><div>Watchdog Cluster Information <br>Total Nodes              : 3<br>Remote Nodes             : 2<br>Member Remote Nodes      : 2<br>Alive Remote Nodes       : 2<br>Nodes required for quorum: 2<br>Quorum state             : QUORUM EXIST<br>Local node escalation    : NO<br>Leader Node Name         : <a href="http://172.29.30.2:5432">172.29.30.2:5432</a> Linux 8dd701b3cff8<br>Leader Host Name         : 172.29.30.2<br><br>Watchdog Node Information <br>Node Name         : <a href="http://172.29.30.1:5432">172.29.30.1:5432</a> Linux bd65977729e4<br>Host Name         : 172.29.30.1<br>Delegate IP       : Not_Set<br>Pgpool port       : 5432<br>Watchdog port     : 9009<br>Node priority     : 1<br>Status            : 7<br>Status Name       : STANDBY<br>Membership Status : MEMBER<br><br>Node Name         : <a href="http://172.29.30.2:5432">172.29.30.2:5432</a> Linux 8dd701b3cff8<br>Host Name         : 172.29.30.2<br>Delegate IP       : Not_Set<br>Pgpool port       : 5432<br>Watchdog port     : 9009<br>Node priority     : 1<br>Status            : 4<br>Status Name       : LEADER<br>Membership Status : MEMBER<br><br>Node Name         : <a href="http://172.29.30.3:5432">172.29.30.3:5432</a> Linux 7d75ba5595ed<br>Host Name         : 172.29.30.3<br>Delegate IP       : Not_Set<br>Pgpool port       : 5432<br>Watchdog port     : 9009<br>Node priority     : 1<br>Status            : 7<br>Status Name       : STANDBY<br>Membership Status : MEMBER<br><br>Hostname               : 172.29.30.1<br>Port                   : 5432<br>Status                 : 2<br>Weight                 : 0.333333<br>Status Name            : up<br>Backend Status Name    : up<br>Role                   : standby<br>Backend Role           : standby<br>Replication Delay      : 0<br>Replication State      : streaming<br>Replication Sync State : async<br>Last Status Change     : 2024-04-29 04:29:48<br><br><br>Hostname               : 172.29.30.2<br>Port                   : 5432<br>Status                 : 2<br>Weight                 : 0.333333<br>Status Name            : up<br>Backend Status Name    : up<br>Role                   : primary<br>Backend Role           : primary<br>Replication Delay      : 0<br>Replication State      : none<br>Replication Sync State : none<br>Last Status Change     : 2024-04-29 04:29:48<br><br><br>Hostname               : 172.29.30.3<br>Port                   : 5432<br>Status                 : 2<br>Weight                 : 0.333333<br>Status Name            : up<br>Backend Status Name    : up<br>Role                   : standby<br>Backend Role           : standby<br>Replication Delay      : 0<br>Replication State      : streaming<br>Replication Sync State : async<br>Last Status Change     : 2024-04-29 04:29:48<br></div></div>