Onderwerp: Stabiliteit en performance VPS testen

Nee, helaas staat daar niets in de logs. Ook zijn de Nics goed ingesteld, zojuist nog even gecontroleerd. Als ik een ping naar buiten doe vanaf de server lijkt deze wel weer stabiel.

Zou het kunnen dat de bond op de storage server niet goed is ingesteld? De bonding mode staat op de storage server op "balance-tlb".


Ik kan nog kiezen uit:

balance-rr
Transmissions are received and sent out sequentially on each bonded slave interface. This mode provides fault tolerance and load balancing.

active-backup
Only one slave in the bond is active. Another bonded slave interface is only used if the active bonded slave interface fails. This mode provides fault tolerance.

balance-xor
Transmission is based on the following equation: [(the source MAC address XOR'd with the destination MAC address) modulo (slave count)]. This selects the same slave for each destination MAC address. This mode provides fault tolerance and load balancing.
broadcast
Transmits everything on all slave interfaces. This mode provides fault tolerance.

802.3ad
IEEE 802.3ad Dynamic link aggregation. Creates aggregation groups that share the same speed and duplex settings. Utilizes all slaves in the active aggregator according to the 802.3ad specification. Requires a switch that supports IEEE 802.3ad Dynamic link aggregation.

balance-tlb
Channel bonding that does not require any special switch support. The outgoing traffic is distributed according to the current load (computed relative to speed) on each slave. Incoming traffic is received by the current slave. If the receiving slave fails, another slave takes over the MAC address of the failed receiving slave. This mode provides fault tolerance and load balancing.

Oorspronkelijk geplaatst door CeeReM.com

Ik heb de R310 direct verbonden met de R510, daar zou het probleem dus niet mogen zitten.

Op de R510 gebruik ik de volgende settings (Open-e):
Bonding mode: balance-tlb
Address IP 10.0.5.10
Netmask 255.255.255.0
Broadcast 10.0.5.255
Gateway 10.0.5.1

Op de R310 gebruik ik de volgende settings (Centos 6.3):

ifcfg-bond0
DEVICE=bond0
ONBOOT=yes
IPADDR=10.0.5.11
NETMASK=255.255.255.0
NETWORK=10.0.5.0
USERCTL=no
BOOTPROTO=no
MTU=9216

ifcfg-p1p1
DEVICE="p1p1"
ONBOOT=yes
USERCTL=no
MASTER=bond0
SLAVE=yes
BOOTPROTO=no
MTU=9216

ifcfg-p1p2
DEVICE="p1p2"
ONBOOT=yes
USERCTL=no
MASTER=bond0
SLAVE=yes
BOOTPROTO=no
MTU=9216

Oorspronkelijk geplaatst door CeeReM.com

Zou het kunnen dat de bond op de storage server niet goed is ingesteld? De bonding mode staat op de storage server op "balance-tlb".

Wat staat er in je /etc/modprobe.d/bonding.conf van mode, misschien gebruik je inderdaad wel 2 verschillende modes. Hieronder een voorbeeld van hoe het er zou moeten uitzien, samen met de modes. Let er ook op dat mode 5 & 6 (balance-tlb / balance-alb) ethtool nodig hebben op je centos server.

/etc/modprobe.d/bonding.conf:

Code:

alias bond0 bonding
options bond0 mode=5 miimon=100

modes:

Code:

mode=0 (Balance-rr) – This mode provides load balancing and fault tolerance.
mode=1 (active-backup) – This mode provides fault tolerance.
mode=2 (balance-xor) – This mode provides load balancing and fault tolerance.
mode=3 (broadcast) – This mode provides fault tolerance.
mode=4 (802.3ad) – This mode provides load balancing and fault tolerance.
mode=5 (balance-tlb) – Prerequisite: Ethtool support in the base drivers for retrieving the speed of each slave.
mode=6 (balance-alb) – Prerequisite: Ethtool support in the base drivers for retrieving the speed of each slave.

Oorspronkelijk geplaatst door The-BosS

Wat staat er in je /etc/modprobe.d/bonding.conf van mode, misschien gebruik je inderdaad wel 2 verschillende modes. Hieronder een voorbeeld van hoe het er zou moeten uitzien, samen met de modes. Let er ook op dat mode 5 & 6 (balance-tlb / balance-alb) ethtool nodig hebben op je centos server.

/etc/modprobe.d/bonding.conf:

Code:

alias bond0 bonding
options bond0 mode=5 miimon=100

modes:

Code:

mode=0 (Balance-rr) – This mode provides load balancing and fault tolerance.
mode=1 (active-backup) – This mode provides fault tolerance.
mode=2 (balance-xor) – This mode provides load balancing and fault tolerance.
mode=3 (broadcast) – This mode provides fault tolerance.
mode=4 (802.3ad) – This mode provides load balancing and fault tolerance.
mode=5 (balance-tlb) – Prerequisite: Ethtool support in the base drivers for retrieving the speed of each slave.
mode=6 (balance-alb) – Prerequisite: Ethtool support in the base drivers for retrieving the speed of each slave.

# cat /etc/modprobe.d/bonding.conf
alias bond0 bonding
options bond0 mode=5 miimon=100

# whereis ethtool
ethtool: /sbin/ethtool /usr/sbin/ethtool /usr/share/man/man8/ethtool.8.gz

Oorspronkelijk geplaatst door CeeReM.com

# cat /etc/modprobe.d/bonding.conf
alias bond0 bonding
options bond0 mode=5 miimon=100

# whereis ethtool
ethtool: /sbin/ethtool /usr/sbin/ethtool /usr/share/man/man8/ethtool.8.gz

Dat lijkt dus in orde te zijn, heb je al getest met een andere mode om te zien of dat je probleem verhelpt en werkt alles goed als je geen bond gebruikt. Dus met andere woorden werkt het goed over enkel eth0 (p1p1) en enkel over eth1 (p1p2).

Probeer anders even in balance-rr ?

Ik heb nu de bonding op de storageserver verwijderd en nic 2 uitgeschakeld. De bonding configuratie op de host is dus ongemoeid.

Werkt vooralsnog perfect! Ik zie niets meer in de logs voorbijkomen. Ik kijk het even de dag aan, en ga dan eventueel vanavond of in het weekend experimenteren met bonding modes, als snap ik niet waarom dit fout zou kunnen gaan?

Hebben jullie enig idee? Ik zal voor de zekerheid ook eens proberen om alles over nic2 te laten gaan, wie weet is die gewoon kapot op de storage server...

Met balance-rr heb je het voordeel, indien de storage dit aankan, om bvb
vanuit twee VPSen aan ~100MB/s te lezen, dan trek je de twee Gigabits
gewoon vol.

Heb zelf ook voor balance-rr gekozen na performance tests binnen VPSen.