Bonjour, Les réponses ci-dessous. Cordialement, --- Marisol Rodriguez Perez -- Administratrice Réseau et Systèmes LIPN - LAGA Bureau A308 Tel : 01 49 40 35 43 Le 2021-05-16 11:17, Joseph Le Roux a écrit :
Bonjour Marisol,
il y a pas plusieurs problèmes avec les GPU que je t'ai signalés pour certains il y a presque 15 jours pour d'autres il y a une semaine, penses-tu pouvoir les résoudre bientôt ? Car si on ajoute la mise à jour de lipn-rtx1 qui rend cette machine indisponible, on se retrouve coincés avec très peu de GPU à se partager.
- sur labex, on ne peut plus rien lancer:
On avait coupé le serveur pour mettre les cartes 2080, cependant ça n'a pas été possible car il manque les câbles pour brancher les cartes. Ils sont été déjà commandés. Après qu'on a remis le serveur apparemment, il y a eu un souci avec le redémarrage des cartes gpu. Maintenant ça l'air bon.
JOBID PARTITION NAME USER ST TIME NODES NODELIST(REASON)
7843 labex Supervis laurene. PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions)
7844 labex Supervis laurene. PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions)
7845 labex Supervis laurene. PD 0:00 2 (PartitionNodeLimit)
- sur lipn-gpu, squeue renvoie
JOBID PARTITION NAME USER ST TIME NODES NODELIST(REASON) 34 lipn global leroux CG 12:35 1 lipn-rtx2 35 lipn global leroux CG 9:48 1 lipn-rtx2
Depuis le premier mail j'ai essayé de régler le souci, mais effectivement je n'arrive pas non plus a couper ces travaux. Je crois qu'il faudra arrêter slurm, mais j'ai peur de tuer vos processus sur lipn-rtx3. J'ai redémarré la machine lipn-rtx2 plusieurs fois, sans succès. Pour lipn-rtx1 je vais l'installer au début juin. Il y a des choses que nous devons finir avec Xavier et il ne serait plus là.
depuis 3 semaines: ces deux jobs bloquent lipn-rtx2: impossible de les tuer ou de les annuler. la machine lipn-rtx2 est inutilisable.
Peut-être devrait-on mettre en place une mailing-list pour les utilisateurs de GPU ? Parce que les utilisateurs de RCLN viennent vers moi quand il y a des problèmes mais, comme je ne peux rien faire à part leur dire de vous contacter et que c'est sûrement toujours pour les mêmes problèmes, c'est sûrement mieux que tout le monde soit au courant.
Cordialement,