[GRAAL] Automatisation des tests

[gary-van-woerkens]

Il faut automatiser les tests de GRAAL afin de pouvoir les jouer sur n'importe quels environnements et par la meme de pouvoir comparer les environnements entre eux (OVH, Scaleway, Azure).

On doit pouvoir faire un test sur Azure pour valider notre implémentation chez OVH qui parfois n'est pas tres stable et génère des timeouts lors des runs.

[gary-van-woerkens]

• Tests plus longs
• Distinguer les scenarios dans les dashboard des tests (est-ce qu'on a que le dernier ?)
• Analyse des charts et des valeurs présentées (avec selection des metrics intéressantes pour chaque scenario)
  • vitesse de réponse dans le temps
  • taux d'erreur dans le temps

Bonus:

• VRAM utilisées dans le temps
• Occupation des GPUs
• repérer les crashs