Updates


Event Date Summary

Narval est maintenant opérationnel à pleine capacité.

Narval is now fully operational. 

The Rorqual acceptance tests need more time than expected, but the electrical power needs will change over the next two weeks:

  • Between January 29 and February 6 at 10 a.m. (EST), Narval's compute capacity is temporarily back to 100%.
  • From 10 a.m. (EST) on February 6, only 30% of the compute capacity will be available.
  • Narval is expected to be back to full production (100%) on Friday February 14.

Les tests d'acceptation de Rorqual requièrent plus de temps que prévu, mais les besoins en puissance électrique vont varier au cours des deux prochaines semaines :

  • Entre le 29 janvier et le 6 février à 10h (HNE), la capacité de calcul de Narval est temporairement de retour à 100%.
  • À partir de 10h (HNE) le 6 février, seulement 30% de sa capacité de calcul sera disponible.
  • Narval devrait être de retour à sa pleine capacité (100%) le vendredi 14 février.

The large-scale stability test of Rorqual has been postponed to Friday January 24. The Narval compute capacity will temporarily be reduced to 20-25%. The capacity is still around 30% for medium-scale tests.

Once these large-scale tests will be done (estimate January 28), the Narval capacity will be back to 50%. We still estimate that Narval will come back at 100% on January 31.


Le test de stabilité à grande échelle de Rorqual est reporté à vendredi 24 janvier. La capacité de calcul de Narval sera temporairement réduite à 20-25%. La capacité est actuellement à 30% pour des tests de performance de taille moyenne.

Une fois les tests à grande échelle complétés (estimation : 28 janvier), la capacité de Narval sera de retour à 50%. Il est toujours prévu que Narval revienne à 100% le 31 janvier.

So far, the performance and stability tests on Rorqual are going well.

Starting early next week (on January 20 or 21), the most power demanding tests will be done, but the forecasted cold weather in Montreal has significantly reduced the electrical capacity of the data center. To remedy this limitation, the Narval compute capacity will temporarily be reduced to 20-25% (now is around 45-50%). Once these large-scale tests will be done (estimate Friday, January 24), the Narval capacity will be back to 50%. We still estimate that Narval will come back at 100% on January 31.


Jusqu'à présent, les tests de performance et de stabilité de Rorqual avancent bien.

En début de la semaine prochaine (le 20 ou 21 janvier), les tests de performance à grande échelle seront faits, mais le temps très froid annoncé à Montréal cause une réduction significative de la capacité électrique du centre de données. Pour remédier à cette limitation, la capacité de calcul de Narval sera temporairement réduite à 20-25% (actuellement à 45-50%). Une fois les tests à grande échelle complétés (estimation : 24 janvier), la capacité de Narval sera de retour à 50%. Il est toujours prévu que Narval revienne à 100% le 31 janvier.


Incident description

Service Incident status Start Date End Date
Narval Closed
Created by Pier-Luc St-Onge on

Title


2025-01-13 - 2025-02-14 - Planned partial outage - Arrêt partiel planifié


Summary


Performance and stability tests on Rorqual will require the shutdown of about half of Narval compute nodes from 8 a.m. on January 13, 2025 (EST).

About half of the nodes of each type (CPU, GPU and large memory) will be shut down.

======

Les tests de performance et de stabilité de Rorqual nous obligent à éteindre environ la moitié des nœuds de calcul de Narval à partir de 8 h le 13 janvier 2025 (HNE).

Environ la moitié des nœuds de chaque type (CPU, GPU, grande mémoire) seront éteints.


Updated by Maxime Boissonneault on