Il y a quelques jours, nous sommes allés faire un petit tour entre Lille et Roubaix afin de découvrir l'usine OVHcloud de Croix. Une usine pour un spécialiste de l'hébergement en ligne ? Voilà qui a de quoi interpeler, mais le titre de l'invitation était clair : OVHcloud 20 ans de watercooling.
Cela fait donc 20 ans que la société fondée par Octave Klaba développe ses propres solutions de refroidissement pour ses serveurs, ce qui représente de nombreux avantages économiques et écologiques. Mais avant de fabriquer et d'installer les éléments de la boucle de refroidissement liquide, particulièrement complexe, il faut d'abord fabriquer les serveurs...
En France, cela se passe donc à Croix dans un ancien bâtiment industriel réaffecté avec plusieurs zones de production. L'entrepôt est ainsi découpé de manière logique afin d'avoir accès aux éléments qui composent le serveur et à ceux qui sont fabriqués sur place. OVHcloud fabrique et assemble ses serveurs dans leur totalité, avec plusieurs prestataires externes qui sont désormais... Internes. Le gain en réactivité pour OVHcloud est important, puisqu'il suffit de faire quelques pas de la chaine d'assemblage à la chaine de production de châssis, par exemple, pour demander une modification spéciale. Les câbles et risers, par exemple, sont aussi fabriqués sur place. Une véritable usine réduite, commençons par les châssis justement !
Ces derniers sont particulièrement simples dans leur conception, puisqu'il s'agit en fait d'un simple plateau en acier avec des éléments qui peuvent être soulevés pour l'installation des composants. Point de capot pour tout fermer, le coût est ainsi réduit et la maintenance est bien plus simple une fois la lame retirée.
Chaque élément va ensuite être posé dessus sur plusieurs lignes d'assemblage, avec là aussi des solutions efficaces pour gagner sur les coûts et réduire un peu les déchets. Par exemple, les cartons de livraison de certains éléments, comme les cartes mères, sont découpés et réutilisés pour faire des petites commodes avec un accès direct aux cartes qui seront installées. Simple et efficace ? Il semblerait, et on peut déjà dire que ces boites Supermicro sont remplies de cartes d'une autre marque.
Ne reste qu'à tout placer dans le serveur, également fabriqué sur place. De l'acier, encore de l'acier, de la tuyauterie et... Un format spécial puisque le serveur est horizontal, avec possibilité d'en empiler plusieurs pour gagner en espace. Comme sur la chaine de fabrication, avoir un serveur horizontal offre certains bénéfices dans la maintenance avec encore une fois un accès rapide aux éléments, d'autant plus que chaque carte a son propre système hot-swap pour le watercooling. Mais nous reviendrons dessus plus tard.
Question watercooling justement, chaque serveur est autonome dans son fonctionnement avec un système de redondance pour les pompes et tout ce qu'il faut sur l'arrière pour évacuer la chaleur. Se trouvent donc plusieurs portes équipés de radiateurs à faire pâlir d'envie les amateurs de MORA. Douze ventilateurs de 120 mm par radiateur, et c'est parti pour envoyer les calories hors du serveur !
Evidemment, chaque serveur est testé avant sa mise en fonctionnement, et ce sur l'ensemble des éléments. Une fois dans le datacenter, il commence une première vie avant d'en avoir une seconde, puis éventuellement une troisième. Car toujours dans l'optique de limiter les déchets et réduire les coûts, certains éléments sont réutilisés : le châssis est en bon état ? Il est nettoyé et trouve sa place avec une autre carte mère. La carte mère, justement, fonctionne encore très bien, mais ne répond plus aux critères de performance de l'offre ? Elle bascule sur une autre offre plus abordable ou moins exigeante.
Sont ainsi reconditionnés de nombreux composants (25 % en 2022), proprement stockés dans l'entrepôt à côté d'éléments neufs. Encore une fois, chaque composant qui passe en reconditionné est testé, et détruit si nécessaire, notamment tout ce qui concerne les éléments de stockage.
Les avantages pour OVHcloud de tout concevoir de A à Z (plus ou moins) et de recycler des éléments sont importants avec notamment une grande réactivité quand une demande spécifique arrive. L'hébergeur est également moins tributaires des problèmes de disponibilité de certains composants, mais surtout, le watercooling permet l'installation de centres dans des endroits plutôt incongrus. OVHcloud a juste besoin d'un entrepôt avec des murs, un toit et une dalle qui supporte la charge, et c'est tout ! Point de salle blanche avec de grosses climatisations à installer.
Sur un plan économique, la consommation en électricité est ainsi grandement réduite, ce qui rejoint le plan économique. OVHcloud annonce ainsi un PUE (utilisation de l'énergie) de 1.28 (norme ISO 30134-2) contre 1.55 pour un datacenter avec climatisation, tandis l'utilisation de l'eau est de seulement 0.26 L/kWh (norme ISO 30134-9) contre 1.8 L/kWh.
Et le watercooling ? OVHcloud assemble ses propres serveurs depuis 2002, et avec du watercooling depuis 2003. Tout est fabriqué sur place, du waterblock à la tuyauterie. Et entre les premiers modèles et ceux installés actuellement, il y a tout un gouffre ! Les plus anciens qui ont connu, notamment, 1A-Cooling, ne seront pas dépaysés... Les cartes pouvant évoluer d'une génération à l'autre, les waterblocks évoluent également en temps réel, tout comme les tuyaux. Plutôt réduits sur le diamètre, ils sont intégralement en cuivre au niveau du châssis, avant de partir sur des tuyaux plus classiques avec un système hot-swap qui permet une branchement facile du châssis au reste du serveur.
Cela fait donc 20 ans que la société fondée par Octave Klaba développe ses propres solutions de refroidissement pour ses serveurs, ce qui représente de nombreux avantages économiques et écologiques. Mais avant de fabriquer et d'installer les éléments de la boucle de refroidissement liquide, particulièrement complexe, il faut d'abord fabriquer les serveurs...
En France, cela se passe donc à Croix dans un ancien bâtiment industriel réaffecté avec plusieurs zones de production. L'entrepôt est ainsi découpé de manière logique afin d'avoir accès aux éléments qui composent le serveur et à ceux qui sont fabriqués sur place. OVHcloud fabrique et assemble ses serveurs dans leur totalité, avec plusieurs prestataires externes qui sont désormais... Internes. Le gain en réactivité pour OVHcloud est important, puisqu'il suffit de faire quelques pas de la chaine d'assemblage à la chaine de production de châssis, par exemple, pour demander une modification spéciale. Les câbles et risers, par exemple, sont aussi fabriqués sur place. Une véritable usine réduite, commençons par les châssis justement !
Ces derniers sont particulièrement simples dans leur conception, puisqu'il s'agit en fait d'un simple plateau en acier avec des éléments qui peuvent être soulevés pour l'installation des composants. Point de capot pour tout fermer, le coût est ainsi réduit et la maintenance est bien plus simple une fois la lame retirée.
Chaque élément va ensuite être posé dessus sur plusieurs lignes d'assemblage, avec là aussi des solutions efficaces pour gagner sur les coûts et réduire un peu les déchets. Par exemple, les cartons de livraison de certains éléments, comme les cartes mères, sont découpés et réutilisés pour faire des petites commodes avec un accès direct aux cartes qui seront installées. Simple et efficace ? Il semblerait, et on peut déjà dire que ces boites Supermicro sont remplies de cartes d'une autre marque.
Ne reste qu'à tout placer dans le serveur, également fabriqué sur place. De l'acier, encore de l'acier, de la tuyauterie et... Un format spécial puisque le serveur est horizontal, avec possibilité d'en empiler plusieurs pour gagner en espace. Comme sur la chaine de fabrication, avoir un serveur horizontal offre certains bénéfices dans la maintenance avec encore une fois un accès rapide aux éléments, d'autant plus que chaque carte a son propre système hot-swap pour le watercooling. Mais nous reviendrons dessus plus tard.
Question watercooling justement, chaque serveur est autonome dans son fonctionnement avec un système de redondance pour les pompes et tout ce qu'il faut sur l'arrière pour évacuer la chaleur. Se trouvent donc plusieurs portes équipés de radiateurs à faire pâlir d'envie les amateurs de MORA. Douze ventilateurs de 120 mm par radiateur, et c'est parti pour envoyer les calories hors du serveur !
Evidemment, chaque serveur est testé avant sa mise en fonctionnement, et ce sur l'ensemble des éléments. Une fois dans le datacenter, il commence une première vie avant d'en avoir une seconde, puis éventuellement une troisième. Car toujours dans l'optique de limiter les déchets et réduire les coûts, certains éléments sont réutilisés : le châssis est en bon état ? Il est nettoyé et trouve sa place avec une autre carte mère. La carte mère, justement, fonctionne encore très bien, mais ne répond plus aux critères de performance de l'offre ? Elle bascule sur une autre offre plus abordable ou moins exigeante.
Sont ainsi reconditionnés de nombreux composants (25 % en 2022), proprement stockés dans l'entrepôt à côté d'éléments neufs. Encore une fois, chaque composant qui passe en reconditionné est testé, et détruit si nécessaire, notamment tout ce qui concerne les éléments de stockage.
Les avantages pour OVHcloud de tout concevoir de A à Z (plus ou moins) et de recycler des éléments sont importants avec notamment une grande réactivité quand une demande spécifique arrive. L'hébergeur est également moins tributaires des problèmes de disponibilité de certains composants, mais surtout, le watercooling permet l'installation de centres dans des endroits plutôt incongrus. OVHcloud a juste besoin d'un entrepôt avec des murs, un toit et une dalle qui supporte la charge, et c'est tout ! Point de salle blanche avec de grosses climatisations à installer.
Sur un plan économique, la consommation en électricité est ainsi grandement réduite, ce qui rejoint le plan économique. OVHcloud annonce ainsi un PUE (utilisation de l'énergie) de 1.28 (norme ISO 30134-2) contre 1.55 pour un datacenter avec climatisation, tandis l'utilisation de l'eau est de seulement 0.26 L/kWh (norme ISO 30134-9) contre 1.8 L/kWh.
Et le watercooling ? OVHcloud assemble ses propres serveurs depuis 2002, et avec du watercooling depuis 2003. Tout est fabriqué sur place, du waterblock à la tuyauterie. Et entre les premiers modèles et ceux installés actuellement, il y a tout un gouffre ! Les plus anciens qui ont connu, notamment, 1A-Cooling, ne seront pas dépaysés... Les cartes pouvant évoluer d'une génération à l'autre, les waterblocks évoluent également en temps réel, tout comme les tuyaux. Plutôt réduits sur le diamètre, ils sont intégralement en cuivre au niveau du châssis, avant de partir sur des tuyaux plus classiques avec un système hot-swap qui permet une branchement facile du châssis au reste du serveur.
Partagez :
Posté le 22 Avril 2023 à 09:35 par Sébastien Vandeborre
