Bon, un petit peu de contexte tout d'abord !
L'objectif du jour est d'aller (ré)installé 2 machines dans un de notre autre point de présence, pour pouvoir fournir un PRA à un de nos clients

Un PRA, c'est quoi ?
PRA, pour Plan de Reprise d'Activité, c'est un ensemble de processus, de moyen technique, qui permet en cas d'incident sur la prod, de pouvoir remonter le plus vite possible la ou une partie des outils nécessaire au client

En gros, imaginez que notre Data Center prennent feu, ou qu'une météorite tombe pile-poil sur notre salle IT2, le client pourra basculer sur la PRA, lui permettant de continuer à travailler, a minima en version dégradé

Il y a autant de façon de faire une PRA que d'infrastructure cliente. Chez nous, on a décidé (pour cet infra du moins) d'utiliser le système de Continuous Replication fourni par Xen Orchestra

Pour résumer, après avoir "copié" la VM à un instant T sur la machine de PRA, XO va s'occuper tout les X temps (2h, 6h, 3 jours, c'est comme on veut) d'envoyer un différentiel entre l'état de la VM de prod, et la VM copié sur la PRA.
(xen-orchestra.com/docs/continu)

Cela nous permet de faire des exports vers la PRA régulier, et, en cas de mise en place de la PRA, de n'avoir que quelques heures de différence entre la prod avant qu'elle explose et la VM resté tranquillement à attendre sur les machines de PRA

Pendant que j'écrivais les Tweets précédents, j'ai procédé à la mise à jour des BIOS et BNC. L'avantage de SuperMicro c'est que ça se fait plutôt rapidement, et à distance via l'IPMI.
Les deux machines viennent de finir et de reboot, il est temps de se mettre en route vers le DC!

Pendant que je fini ma clope, je réfléchis à mon plan d'attaque :
- Rentrer dans le DC
- Changement des RAM et des disques dans chaque machines
- Installation d'@xcpng@twitter.com
- Vérifier que ça ping
- On sort :D
Je devrais en avoir pour 45min si tout roule bien

Je vous déjà montré l'UI la plus pété pour créé un raid?
Bah voilà:

Comme la tradition le veut sur mon discord: Stonks
Les install, c'est presque le moins long :D

Follow

Tiens, pendant que ça installe, petite anecdote:
Ces machines (on en a peu de ce modèle) on tendance à, en plus d'avoir une UI raid moisi, à perdre leur carte raid complètement si on change TOUT les disques
Le seul moyen de la faire revenir, claquer ou technique de la pile

Claquer: sortir la lame légèrement du châssis pour la déconnecter et la reclaquer juste ensuite, de préférence en insultant la carte RAID
Technique de la pile: enlever la pile, reboot, le RAID reviens, faire l'install, éteindre, mette la pile, booter

Je vous rassure, ce genre de problème ça arrive que lors des réinstall/changement de disque/changement de RAM, jamais quand la machine est en prod !

C'est tout pour aujourd'hui !
Peut être une suite dans la semaine ! :D

Bon je vois que ça plaît, si vous avez des idées de thread, n'hésitez pas!

@ataxyanetwork

Bonjour.
C'était vraiment très intéressant...

Cela vous arrive de vous débarrasser de vieux serveurs (ou de pouvoir en récupérer chez vos clients) ?

Sign in to participate in the conversation
social.ataxya.net

The social network of the future: No ads, no corporate surveillance, ethical design, and decentralization! Own your data with Mastodon!