This DIY Datacenter is NUTS
Cette vidéo offre une plongée exclusive dans les coulisses du data center de Hetzner à Falkenstein, révélant une philosophie d’ingénierie DIY poussée à l’extrême, où chaque choix technique est guidé par l’efficacité énergétique et la flexibilité, jusqu’à la construction de ser...
SYNTHÈSE STRUCTURÉE
Une localisation stratégique pour le refroidissement naturel
Hetzner a choisi Falkenstein pour son climat frais, essentiel à leur stratégie de refroidissement par air. Cette approche minimise la consommation d’eau et d’énergie, et explique aussi la présence d’un second site à Helsinki, en Finlande. L’intervenant souligne : « Pour garder leurs coûts, leur consommation d’eau et leur consommation d’énergie faibles, Hetzner s’appuie fortement sur le refroidissement par air, et plus l’air est froid, mieux cela fonctionne pour eux. »
Une architecture de bâtiments pensée pour la convection naturelle
Contrairement aux data centers multi-étages classiques, Hetzner construit en largeur avec des toits en pente spécialement conçus. Cette forme permet à la convection naturelle d’évacuer l’air chaud vers le haut, où il est directement rejeté à l’extérieur. L’intervenant note : « C’est quelque chose que je n’ai jamais vu auparavant : un data center ouvert à l’air extérieur. » La pression interne positive, maintenue par des turbines, empêche toute entrée d’eau ou de neige.
Des serveurs « bare metal » sur mesure pour la flexibilité
Hetzner privilégie des solutions matérielles personnalisées plutôt que des racks standard. Leur système « Easy Stack » (ES) repose sur des plateaux de cartes mères montés sur des glissières métalliques, avec des composants modulaires. Cette approche permet d’ajuster le stockage (jusqu’à 15 disques durs par système) ou la puissance selon les besoins clients, tout en réduisant les coûts. L’intervenant résume : « La flexibilité et le coût sont les plus grands avantages. »
L’obsession de l’efficacité jusque dans les moindres détails
Hetzner va jusqu’à désactiver le RGB des cartes mères sur des centaines de milliers de systèmes, car chaque watt compte. Ils utilisent aussi des ventilateurs standard de boîtier plutôt que des modèles haute performance, car cela suffit dans leurs allées froides. L’intervenant ironise : « Pour vous donner une idée de leur obsession, ils désactivent même le RGB des cartes mères. »
Un mélange assumé de matériel grand public et entreprise
Le data center abrite un mélange éclectique : des systèmes Ryzen grand public avec des « reset boards » pour la gestion à distance, des serveurs ARM Ampere, et des serveurs EPYC sur cartes mères enterprise avec NVMe. Cette diversité reflète la clientèle variée de Hetzner, qui commande souvent des systèmes par petites quantités. L’intervenant explique : « C’est un mélange total. Parfois, on voit de grands blocs du même système, mais pas souvent. »
Une gestion réseau physique personnalisable
Hetzner permet à ses clients de gérer directement le switch en haut du rack et de câbler physiquement leurs systèmes sur un réseau privé, plutôt que de se limiter aux VLANs. Cette approche offre une flexibilité rare dans l’industrie. L’intervenant souligne : « Hetzner va plus loin et vous permet de gérer le switch de rack et de câbler vos propres systèmes sur un réseau physique privé. »
Une infrastructure de refroidissement et d’alimentation pragmatique
Le système de refroidissement utilise des échangeurs de chaleur évaporatifs compacts, placés à l’ombre du toit, car les températures extrêmes ne surviennent que quelques jours par an. Pour l’alimentation, des batteries au plomb assurent une transition de 10 à 15 minutes avant le démarrage des générateurs diesel, qui peuvent fonctionner plusieurs jours. L’intervenant note : « Ces batteries sont un choix vraiment sensé, avec une durée de vie de 10 à 15 ans. »
Un processus de construction de serveurs industrialisé et DIY
Hetzner assemble plus de 1 000 serveurs par semaine sur place, avec un flux logistique optimisé : commandes sur écran, picking des pièces, convoyeur, et assemblage par des techniciens. L’intervenant a même construit un serveur en production, avec des vis auto-taraudeuses pour les cartes mères, une première pour lui : « Je n’ai jamais utilisé de vis auto-taraudeuses pour monter une carte mère. Félicitations, Hetzner, c’est une première. »
L’impression 3D pour les pièces sur mesure
Hetzner imprime en 3D des conduits de refroidissement et autres pièces, plutôt que de les commander à des tiers. Cela offre une flexibilité immédiate et une adaptation rapide aux besoins. L’intervenant précise : « Cela ne fait pas forcément économiser beaucoup d’argent, mais cela donne une bien meilleure flexibilité. »
Un laboratoire de R&D pour l’avenir
Un rack de test contient toutes les configurations standard pour valider les mises à jour firmware, ainsi que des systèmes expérimentaux, comme des machines à 8 GPU avec ou sans switch PCIe. Une salle secrète abrite des solutions de refroidissement liquide, comme le « Leak Shield » à pression négative. L’intervenant conclut : « Alors que la densité de puissance augmente, je suis sûr qu’ils vont continuer à explorer. »
CONCEPTS CLÉS
- Bare metal : Serveur physique dédié à un client, sans virtualisation, offrant des performances maximales et une personnalisation matérielle.
- Easy Stack (ES) : Système modulaire de Hetzner où les composants (disques, SSD, etc.) se fixent sur des plateaux, simplifiant l’assemblage et la maintenance.
- Reset board : Petit circuit pour les cartes mères grand public, permettant un reset ou une extinction à distance sans IPMI.
- IPMI : Interface de gestion à distance pour les serveurs, permettant d’accéder au BIOS ou de contrôler l’alimentation.
- Convection naturelle : Mouvement de l’air chaud vers le haut, exploité par les toits en pente pour évacuer la chaleur sans ventilateurs supplémentaires.
- Pression positive : Maintien d’une pression interne supérieure à l’extérieur, empêchant l’entrée de contaminants ou d’eau.
- VLAN : Réseau virtuel pour segmenter le trafic, ici complété par une option de câblage physique privé.
- Leak Shield : Système de refroidissement liquide à pression négative, empêchant les fuites en cas de brèche.
CONCLUSION
Le message principal est que l’efficacité et la flexibilité ne sont pas des options, mais des principes directeurs qui transforment chaque décision technique, de l’architecture des bâtiments aux vis utilisées. Hetzner démontre qu’une approche DIY, même à grande échelle, peut rivaliser avec les solutions enterprise traditionnelles, tout en réduisant les coûts et l’impact environnemental. Cette philosophie est cruciale dans un secteur où la consommation énergétique et la durabilité deviennent des enjeux majeurs, et elle inspire une nouvelle façon de concevoir les infrastructures cloud.