Comment nous avons construit un système d'alimentation de secours dans le centre de données de Tushino: ingénierie et finances





DPC "Tushino" est un centre de données commercial de détail d'un demi-mégawatt pour tout le monde et tout. Le client peut non seulement louer le matériel déjà installé, mais aussi y placer le sien, y compris des appareils non standard tels que des serveurs dans des boîtiers classiques pour PC de bureau, des fermes minières ou des systèmes d'intelligence artificielle. En termes simples, ce sont les tâches populaires les plus diverses qui sont les plus demandées par les entreprises nationales de divers degrés d'ampleur. C'est ce qui le rend intéressant. Dans cet article, vous ne trouverez pas de solutions techniques exclusives et une réflexion sur l'ingénierie. Nous parlerons de problèmes et de solutions standards. Autrement dit, environ ce que 90% des spécialistes font 90% de leur temps de travail.



Tier - plus il y en a, mieux c'est?



La tolérance aux pannes du centre de données Tushino est conforme au niveau Tier II. En substance, cela signifie que le centre de données est situé dans une pièce préparée normale, que des alimentations redondantes sont utilisées et que les ressources système sont en excès.



Cependant, contrairement à l'idée fausse commune, les niveaux de niveau ne caractérisent pas du tout la «dureté» du centre de données, mais la mesure dans laquelle il répond aux objectifs commerciaux actuels. Et parmi eux, il y en a beaucoup pour qui une tolérance aux pannes élevée est soit insignifiante, soit pas assez importante au point de surpayer 20 à 25 000 roubles par an, ce qui en cas de crise peut être très douloureux pour le client.



D'où vient ce montant? C'est elle qui fait la différence entre les prix de placement des informations dans les centres de données de niveaux Tier II et Tier III pour un serveur. Plus vous avez de données, plus les économies potentielles sont importantes.



De quelles tâches parlez-vous? Par exemple, stocker des sauvegardes ou extraire de la crypto-monnaie. Dans ces cas, un temps d'arrêt de serveur autorisé de niveau II est moins cher que de niveau III.



La pratique montre que dans la plupart des cas, les économies sont plus importantes qu'une tolérance aux pannes accrue. Il n'y a que cinq centres de données de niveau III à Moscou. Et il n'y a pas du tout de niveau IV entièrement certifié.



Comment le système d'alimentation électrique du centre de données Tushino est-il organisé?



Les exigences relatives au système d'alimentation électrique du centre de données Tushino sont conformes aux conditions de niveau II. Il s'agit de la redondance des lignes électriques selon le schéma N + 1, de la redondance des alimentations sans coupure selon le schéma N + 1 et de la redondance du groupe électrogène diesel selon le N. l'un des principaux éléments échouera, et N - un schéma sans redondance, dans lequel une défaillance dans le fonctionnement de n'importe quel élément conduit à l'arrêt de l'ensemble du système



De nombreux problèmes liés à l'énergie sont résolus en choisissant le bon emplacement pour le centre de données. Le centre de données "Tushino" est situé sur le territoire de l'entreprise, là où viennent déjà deux lignes 110 kV de différentes centrales électriques de la ville. Sur l'équipement de l'usine elle-même, la haute tension est convertie en moyenne tension et deux lignes indépendantes de 10 kV sont alimentées à l'entrée du centre de données.



La sous-station de transformation à l'intérieur du bâtiment du centre de données convertit la tension moyenne en tension de consommation 240-400 V. Toutes les lignes sont exécutées en parallèle, de sorte que l'équipement du centre de données est alimenté par deux sources externes indépendantes.



La basse tension des postes de transformation est envoyée aux commutateurs de transfert automatiques, qui assurent la commutation entre les réseaux urbains. Les variateurs de vitesse installés sur l'ATS nécessitent 1,2 seconde pour cette opération. Pendant tout ce temps, la charge tombe sur les alimentations sans coupure.



Un ATS séparé est responsable de la mise en marche automatique du générateur diesel en cas de perte de puissance sur les deux lignes. Le démarrage d'un générateur diesel n'est pas un processus rapide et nécessite environ 40 secondes, au cours desquelles l'alimentation électrique est complètement fournie aux batteries de l'onduleur.



Lorsqu'il est complètement chargé, le générateur diesel assure le fonctionnement du centre de données pendant 8 heures. Compte tenu de cela, le centre de données a conclu deux contrats avec des fournisseurs indépendants de gazole, qui s'engageaient à livrer une nouvelle portion de carburant dans les 4 heures suivant l'appel. La probabilité que les deux subissent une sorte de force majeure à la fois est extrêmement faible. Ainsi, l'autonomie peut durer aussi longtemps que nécessaire pour que les équipes de réparation rétablissent l'alimentation d'au moins un des réseaux de la ville.



Comme vous pouvez facilement le voir, il n'y a pas d'améliorations techniques ici. Cela est dû, entre autres, au fait que lors de la construction de l'infrastructure d'ingénierie, des modules prêts à l'emploi ont été utilisés, dont les fabricants sont guidés par un certain «consommateur moyen».



Bien entendu, tout professionnel de l'informatique vous dira que la moyenne n'est «ni poisson ni viande» et suggérera de développer un ensemble unique de composants pour un système particulier. Cependant, ceux qui souhaitent les payer pour ce plaisir ne font clairement pas la queue. Il faut donc être réaliste. En pratique, tout sera exactement comme ça: l'achat d'équipement fini et l'assemblage d'un système qui résoudra les problèmes commerciaux urgents. Ceux qui ne sont pas d'accord avec cette approche seront rapidement renvoyés du ciel sur terre par le directeur financier de l'entreprise.



Tableaux



À l'heure actuelle, neuf tableaux assurent le fonctionnement des dispositifs de distribution d'entrée et quatre tableaux de distribution sont utilisés directement pour connecter la charge. Il n'y avait pas de restrictions sérieuses sur le lieu, mais il n'y en a jamais beaucoup, donc un moment d'ingénierie intéressant était toujours présent.



Comme vous pouvez facilement le voir, le nombre de cartes «d'entrée» et de «charge» ne coïncide pas - la seconde est presque deux fois moins. Cela est devenu possible parce que les concepteurs de l'infrastructure du centre de données ont décidé d'utiliser de grands panneaux pour y ajouter trois lignes entrantes ou plus. Il y a environ 36 lignes secondaires pour chaque machine d'entrée, protégées par des machines séparées.



Ainsi, parfois l'utilisation de modèles plus grands vous permet d'économiser un espace limité. Simplement parce qu'il faut moins de boucliers.



Alimentations sans interruption



Eaton 93PM d'une capacité de 120 kVA, fonctionnant en mode de double conversion, est utilisé comme alimentation sans coupure au centre de données de Tushino.





L'onduleur Eaton 93PM est disponible dans une variété de conceptions. Photo: Eaton



Les principales raisons du choix de cet appareil particulier sont les caractéristiques suivantes.



Tout d'abord, le rendement de cet onduleur atteint 97% en mode double conversion et 99% en mode économie d'énergie. L'appareil occupe moins de 1,5 mètre carré. m et n'occupe pas l'espace de la salle des serveurs de l'équipement principal. Il en résulte de faibles coûts d'exploitation et les économies dont les entreprises ont besoin.



Deuxièmement, avec la gestion thermique intégrée, l'onduleur Eaton 93PM peut être placé n'importe où. Même près du mur. Même si ce n'est pas nécessaire tout de suite, cela peut être nécessaire plus tard. Par exemple, pour libérer de l'espace qui n'est pas suffisant pour un rack supplémentaire.



Troisièmement, la facilité d'utilisation. Y compris - Logiciel Intelligent Power utilisé pour la surveillance et le contrôle. Les métriques envoyées par SNMP permettent de contrôler la consommation et certaines pannes globales, ce qui permet de répondre rapidement aux situations d'urgence.



Quatrièmement, modularité et évolutivité. C'est peut-être la qualité la plus importante en raison de laquelle un seul onduleur modulaire est utilisé dans le système de sauvegarde du centre de données Tushino. Il comprend deux modules de travail et une sauvegarde. Cela fournit le schéma N + 1 requis pour le niveau II.



C'est beaucoup plus simple et plus fiable qu'une configuration à trois onduleurs. Par conséquent, le choix d'un appareil dans lequel la possibilité de fonctionnement en parallèle est initialement prévue est tout à fait logique.



Mais pourquoi les concepteurs n'ont-ils pas choisi DRIBP au lieu de l'onduleur et du générateur diesel séparés? Les principales raisons à cela ne résident pas dans l'ingénierie, mais dans la finance.



La structure modulaire est a priori affinée pour la mise à niveau - à mesure que la charge augmente, des sources et des générateurs sont ajoutés à l'infrastructure d'ingénierie. Dans le même temps, les anciens fonctionnaient comme ils le faisaient. Avec DRIBP, la situation est radicalement différente: vous devez acheter un tel appareil avec une grande réserve de marche. De plus, il y a peu de «petites moissonneuses-batteuses», et elles coûtent très décemment - incomparablement plus cher qu'un générateur diesel séparé et un onduleur. DRIBP est également très capricieux dans le transport et l'installation. Ceci, à son tour, affecte également le coût de l'ensemble du système.



La configuration existante résout ses tâches avec succès. L'onduleur Eaton 93PM peut prendre en charge l'équipement principal du centre de données pendant 15 minutes, soit plus de 15 fois la réserve.



Là encore, l'onde sinusoïdale pure produite par l'onduleur en ligne évite au propriétaire du centre de données de devoir acheter des stabilisateurs séparés. Et voici les économies.



Malgré la simplicité déclarée, l'onduleur Eaton 93PM est un appareil assez complexe. Par conséquent, sa maintenance technique dans le centre de données de Tushino est effectuée par une société tierce, qui dispose de spécialistes hautement qualifiés dans son personnel. C'est un plaisir coûteux de garder un employé formé dans votre propre personnel à cette fin.



Résultats et perspectives



C'est ainsi que le centre de données a été créé, qui permet de fournir des services de haute qualité aux consommateurs dont les tâches ne nécessitent pas un haut niveau de redondance et n'impliquent pas de coûts économiques importants. Un tel service sera toujours demandé.



La construction déjà prévue de la deuxième phase utilisera l'onduleur Eaton déjà acheté pour créer un système d'alimentation de secours. En raison de la conception modulaire, sa modernisation sera réduite à l'achat d'un module supplémentaire, ce qui est plus pratique et moins cher qu'un remplacement complet de l'appareil. Cette approche sera approuvée à la fois par l'ingénieur et le financier.



All Articles