On a un cluster MySQL (appelé NDB cluster) qui nous permet d'avoir:
1/ De la redondance 2/ De la "haute disponibilité"
Un NDB cluster est consisté de *Data Nodes*, noeuds qui permettent de stocker les tables et databases MySQL. De même, les utilisateurs et privilèges sont partagés entre tous les noeuds.
L'idée serait d'en avoir un par noeud de prod' et de configurer le cluster pour qu'il y ait autant de copies de la BDD que de noeuds de prod. On aurait donc une sauvegarde de notre BDD sur chaque noeud.
Ça ne remplacera bien évidemment pas les backups réguliers mais ça permettera de ne pas perdre toute une journée d'écritures en cas de défaillance du disque d'un noeud de prod. (à l'époque où j'ai écrit l'article, les disques des noeuds de prod hébergeant la BDD n'était pas en RAID1…)
Le cluster a aussi des *SQL Nodes*. C'est en quelque sorte des “portes d'entrées” pour accéder à la base de donnée. Ils se comportent comme des serveurs MySQL qui vont aller interroger les *Data Nodes*.
Le SQL est critique à MiNET… sans lui pas de radius, donc pas de DHCP donc pas d'internet. On peut configurer un système d'IP flottante pour qu'on ait en permanance l'accès au serveur MySQL de disponible (même si 3/4 des noeuds sont shutdown.)
Il faut savoir que chaque noeud de NDB consomme à peu près autant de RAM que la taille de la BDD qu'il traîte (si on fait 1 réplication par noeud).
Je pense qu'il n'est donc pas jusdicieux de mettre toutes les tables qu'on a actuellement sur le SQL.
Genre ostickets, base de donnée qui fait 0.5GiB, redondé en HA, je suis pas sûr que ça soit judicieux. Pareil pour etherpad/piwik qui font ~100MiB (faut arrêter les pad kebab les gars).
Je propose donc de juste mettre la BDD adh5-prod qui fait ~200MiB sur tous les noeuds. En allouant 512MiB de mémoire pour chaque VM *Data Node* sur chaque noeud de prod' on est large.
Sachant qu'on a à peu près 150MiB de logs dedans qu'on pourrait élaguer un peu, je suis sûr qu'on peut stocker juste 100MiB d'ADH5 sur le cluster.
Le cluster est constitué de trois types de machines. Des noeuds de “data” (ndbdata1,2,3,4), des noeuds sql (ndbsql1,2), des noeuds de management (ndbmgmt1). Les noeuds SQL sont sur des VMs pour pouvoir un meilleur contrôle sur le réseau (notamment pouvoir faire des IP flottantes/load balancing potentiel)
Pour gérer le cluster on peut utiliser ndb_mgm qui fait partie du package mysql-cluster-community-client. (il est installé sur les noeuds de management)
root@ndbmgmt1:~# ndb_mgm -- NDB Cluster -- Management Client -- ndb_mgm> show Connected to Management Server at: localhost:1186 Cluster Configuration --------------------- [ndbd(NDB)] 4 node(s) id=1 @192.168.102.38 (mysql-5.7.18 ndb-7.6.2, Nodegroup: 0, *) id=2 @192.168.102.44 (mysql-5.7.18 ndb-7.6.2, Nodegroup: 0) [...]
Il ne faut pas oublier d'éditer /etc/my.cnf pour dire aux différents noeuds qui sont ceux de management.
Attention, le cluster n'a pas besoin des noeuds de management pour tourner. Ils permettent juste de gérer le split brain et de lancer des autres noeuds
Pour lancer après une modification du fichier config.init les processus de management il suffit de faire
ndb_mgmd --initial -f /usr/mysql-cluster/config.ini
Sinon dans la plupart des cas vous pouvez utiliser le service ndb_mgmd
Vous l'aurez compris le fichier de conf du cluster est dans config.ini
Sur ndbdata1,2,3,4 il faut lancer les processus (ndbd) en lançant le service ndbd
Les noeuds utilisent 0.75GiB de RAM pour stocker les relations. Ne vous alarmez pas si vous voyez qu'ils utilisent 100% de la RAM du container, c'est normal. (Et même, si vous voulez vous amuser, vous pouvez augmenter la RAM du container et vous rendre compte qu'il utilisera quand même 100% de la RAM)
Sur les noeuds d'accès (ndbsql1,2), il suffit de lancer le service mysql pour qu'il rejoignent le cluster.
Leur disponibilité est cruciale. C'est pour ça qu'il y a un système d'IP virtuelle, mis en place grâce à keepalived qui s'assure qu'il y ait toujours une machine qui ait l'IP 192.168.102.52.
Pour permettre à MySQL de listen sur l'IP 192.168.102.52 même sur les machines qui n'ont pas cette ip, il faut juste faire:
echo 1 > /proc/sys/net/ipv4/ip_nonlocal_bind
ou ajouter dans /etc/sysctl.conf:
net.ipv4.ip_nonlocal_bind = 1
Attention ! Dans le cas où tous les noeuds seraient down, si vous les relancez tous avec comme option –initial, la table des privilèges MySQL sera perdue ! (voir https://dev.mysql.com/doc/refman/5.7/en/mysql-cluster-privilege-distribution.html)
Si le cluster n'a pas été éteint proprement, pour le redémarrer, il faut :
> /usr/sbin/ndb_mgmd -f /usr/mysql-cluster/config.ini –config-dir=/usr/mysql-cluster –nowait-nodes=666