Thread Info
  • State Not Answered
  • Replies 10 replies
  • Subscribers 0 subscribers
  • Views 2483 views
  • Users 0 members are here
Options
Suggested

[7.911][BUG][DUPLICATE] Cluster not correctly processing traffic

darrenl
Hi,

I've noticed that when traffic is routed via the HTTP/S proxy, the multipath rules are being ignored and the wrong route out for HTTP traffic is being used.
When traffic is not routed via the HTTP/S proxy, multipath rules are correctly observed.

This has not been an issue until the latest upgrade.

Active/Active cluster.

Cheers,

Darren
Parents
  • 0
    Update:
    Upon further investigation this is *not* a multipath issue but an interface/ cluster config issue:
    Node 2 lost its config for Eth2 and placed the port into 'unassigned' so it no longer had the capability to route traffic over the 2nd WAN link (see attached pic). 

    When I restarted Node 2 after the previous tests according to the log file it went into a factory reset state (I had not told the cluster to do this!):

    2010:05:14-23:51:06 mercury-1 ha_daemon[4154]: id="38A0" severity="info" sys="System" sub="ha" name="Activating sync process for config on node 2"
    2010:05:14-23:51:07 mercury-1 ha_daemon[4154]: id="38A0" severity="info" sys="System" sub="ha" name="Activating sync process for config on node 2"
    2010:05:14-23:51:09 mercury-2 ha_daemon[4376]: id="38A0" severity="info" sys="System" sub="ha" name="Reading cluster configuration"
    2010:05:14-23:51:10 mercury-2 ha_factory_reset[5171]: id="38K0" severity="info" sys="System" sub="ha" name="HA factory reset runnnig on slave node! Aborting..."
    2010:05:14-23:51:11 mercury-1 ha_daemon[4154]: id="38A0" severity="info" sys="System" sub="ha" name="HA daemon of node 2 is restarting, waiting 60 seconds before declaring node as dead"
    2010:05:14-23:51:11 mercury-2 ha_daemon[4376]: id="38A0" severity="info" sys="System" sub="ha" name="--- Node is disabled ---"
    2010:05:14-23:51:11 mercury-2 ha_daemon[4376]: id="38A0" severity="info" sys="System" sub="ha" name="HA daemon shutting down"

    Following the second forced reboot by the cluster of node 2 I logged into webadmin on node 1 and saw that the cluster configuration was only showing the master node (1) and that the slave node (2) was no longer present.

    I connected a laptop to one of the network ports on node 2 and logged into webadmin, it still had its configuration data intact but was missing the cluster configuration and Eth2 was in unassigned state (see attached pic).
    I reallocated Eth2 to the correct port setting and then manually rejoined it to the cluster.  The cluster finished syncing and came online.

    All services are working but only Node 1 (master) is processing traffic - this is an issue previously seen and reported before.
Reply
  • 0
    Update:
    Upon further investigation this is *not* a multipath issue but an interface/ cluster config issue:
    Node 2 lost its config for Eth2 and placed the port into 'unassigned' so it no longer had the capability to route traffic over the 2nd WAN link (see attached pic). 

    When I restarted Node 2 after the previous tests according to the log file it went into a factory reset state (I had not told the cluster to do this!):

    2010:05:14-23:51:06 mercury-1 ha_daemon[4154]: id="38A0" severity="info" sys="System" sub="ha" name="Activating sync process for config on node 2"
    2010:05:14-23:51:07 mercury-1 ha_daemon[4154]: id="38A0" severity="info" sys="System" sub="ha" name="Activating sync process for config on node 2"
    2010:05:14-23:51:09 mercury-2 ha_daemon[4376]: id="38A0" severity="info" sys="System" sub="ha" name="Reading cluster configuration"
    2010:05:14-23:51:10 mercury-2 ha_factory_reset[5171]: id="38K0" severity="info" sys="System" sub="ha" name="HA factory reset runnnig on slave node! Aborting..."
    2010:05:14-23:51:11 mercury-1 ha_daemon[4154]: id="38A0" severity="info" sys="System" sub="ha" name="HA daemon of node 2 is restarting, waiting 60 seconds before declaring node as dead"
    2010:05:14-23:51:11 mercury-2 ha_daemon[4376]: id="38A0" severity="info" sys="System" sub="ha" name="--- Node is disabled ---"
    2010:05:14-23:51:11 mercury-2 ha_daemon[4376]: id="38A0" severity="info" sys="System" sub="ha" name="HA daemon shutting down"

    Following the second forced reboot by the cluster of node 2 I logged into webadmin on node 1 and saw that the cluster configuration was only showing the master node (1) and that the slave node (2) was no longer present.

    I connected a laptop to one of the network ports on node 2 and logged into webadmin, it still had its configuration data intact but was missing the cluster configuration and Eth2 was in unassigned state (see attached pic).
    I reallocated Eth2 to the correct port setting and then manually rejoined it to the cluster.  The cluster finished syncing and came online.

    All services are working but only Node 1 (master) is processing traffic - this is an issue previously seen and reported before.
Children
No Data