May 2022 - GPU - Listes du LIPN

job arrêté par cause de limite de temps
by Jorge Garcia Flores 18 May '22

18 May '22

Bonjour, Notre job (user: zaman) a été arrêté après 5 jours avec ce message dans MyFirstJob.err Est-ce normal ? Y a-t-il une limite de temps pour les jobs ? Amitiés -- ---- Jorge Garcia Flores Ingénieur de recherche CNRS LIPN - Université Sorbonne Paris Nord http://lipn.univ-paris13.fr/~garciaflores/

1 0

premier avertissement: jobs à 3 gpu/3 nodes
by Jorge Garcia Flores 17 May '22

17 May '22

Salut Mustapha... Je n'ai pas l'adresse de l'utilisateur /Madane /(il me semble qu'il s'agit d'un stagiaire à toi)/... /Il lance des jobs à 3 gpus qui bloquent tout le monde... est-ce que tu pourrais lui transmettre le message suivant ? *Bonjour M/Mme. Madane,* ** *Ceci est un premier avertissement par rapport au lancement des jobs sur tous les gpus du node (3) dans le cluster de calcul lipn-rtx, qui bloquent le travail des autres utilisateurs. On vous rappelle que, sauf exception, les jobs doivent être lancés sur un seul GPU, et si la tâche nécessite plus, il faut demander l'autorisation à la liste mail **gpu(a)lipn.univ-paris13.fr**** * ** *On vous prie de lancer vos processus de calcul avec les paramètres suivants :* ** *#SBATCH --gres=gpu:1** * * **ou** * * **#SBATCH --gpus-per-node=1* *Vous pouvez vérifier les paramètres sur **la documentation du wiki LIPN <https://lipn.univ-paris13.fr/wiki/doku.php?id=public:support:labex-efl-gpu:…>**. ** * ** *Si l'incident se répète, nous serons obligés de restreindre vos accès. * ** *Cordialement* -- ---- Jorge Garcia Flores Ingénieur de recherche CNRS LIPN - Université Sorbonne Paris Nord http://lipn.univ-paris13.fr/~garciaflores/

4 4

Jobs queued at server TAL (Labex GPU)
by Gerardo Aleman M 11 May '22

11 May '22

Hello, I executed a batch yesterday afternoon (around 6 pm) on server TAL (Labex GPU) but the server send me the following message: 10800 labex Mfs_nove gerardo. PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions) Today is has the same message and other jobs queued JOBID PARTITION NAME USER ST TIME NODES NODELIST(REASON) 10797 labex oneie niama.el PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions) 10800 labex Mfs_nove gerardo. PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions) 10806 labex DL_train francesc PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions) 10807 labex DL_train francesc PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions) 10808 labex DL_train francesc PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions) 10809 labex DL_train francesc PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions) 10774 labex NQKzfrec ghazi.fe R 22:56:40 1 tal-gpu-labex1 Can you please see what is happening with TAL (Labex GPU) server? Regards Gerardo -- _____________________________ Gerardo Aleman Manzanarez LIPN - Université Sorbonne Paris Nord aleman(a)lipn.univ-paris13.fr

2 1

Re: [Gpu] Fwd: demande d'aide cluster gpu
by Jorge Garcia Flores 10 May '22

10 May '22

Bonjour M. Arezki, On vous prie de ne pas lancer des jobs qui sollicitent toutes les cartes GPUs du nœud sans prévenir avant la liste mail gpu(a)lipn.univ-paris13.fr. D'autant plus que votre job n'en a utilisé qu'un seul gpu (comme on peut le voir avec un "srun -w lipn-rtx1 nvidia-smi"), ce qui empêche 2 gpu d'être utilisés par d'autres utilisateurs. Bien cordialement Jorge Garcia Flores Ingénieur de recherche CNRS LIPN - Université Sorbonne Paris Nord http://lipn.univ-paris13.fr/~garciaflores/ Le 31/03/2022 à 11:51, Bouzid AREZKI a écrit : > > > --- > Bouzid AREZKI > Université Paris 13 > > -------- Message original -------- > Objet: demande d'aide cluster gpu > Date: 31/03/2022 11:50 > De: Bouzid AREZKI <bouzid.arezki(a)edu.univ-paris13.fr> > À: systeme(a)lipn.univ-paris13.fr > > bonjour je suis utilisateur de votre GPU, j'ai quelque soucis lors de > l’accès a mon adresse lien jupyter, > > voici mon script bach que j'ai lance avec la commande sbatch : > > #!/bin/bash > > > #SBATCH -J jupyter > #SBATCH -N 1 > #SBATCH --gpus-per-node=3 > #SBATCH -t 900:00:00 > #SBATCH --mail-type=ALL > #SBATCH --output=%x-%j.out > #SBATCH --error=%x-%j.err > > > export PATH="/users/arezki/miniconda3/bin:$PATH" > source activate myenvpy37 # Activation de votre environnement python > jupyter notebook --no-browser --port=$1 # > Démarrage de jupyter > > le job est bien lancé je peut l'apercevoir dans la queue et j'ai mon > lien pour jupyter dans un fichier , > > puis j'ai lancé cette commande afin d'avoir accès a ce lien localement. > > ssh -NfL 8888:127.0.0.1:8888 arezki(a)192.168.90.120 > > la connexion est bien établie mais quand j'essaie d’accéder au lien > sur mon navigateur > > je reçois ce message d'erreur : > > channel 2: open failed: connect failed: Connection refused > > d’après mes recherches j'ai trouver que ce message d'erreur est du car > y'a aucun tache a été lancer dans le serveur mais ce n'est pas le cas > car le job est lancé . > > cordialement.

2 3