Re: [Gpu] Fwd: demande d'aide cluster gpu
Bonjour M. Arezki, On vous prie de ne pas lancer des jobs qui sollicitent toutes les cartes GPUs du nœud sans prévenir avant la liste mail gpu@lipn.univ-paris13.fr. D'autant plus que votre job n'en a utilisé qu'un seul gpu (comme on peut le voir avec un "srun -w lipn-rtx1 nvidia-smi"), ce qui empêche 2 gpu d'être utilisés par d'autres utilisateurs. Bien cordialement Jorge Garcia Flores Ingénieur de recherche CNRS LIPN - Université Sorbonne Paris Nord http://lipn.univ-paris13.fr/~garciaflores/ Le 31/03/2022 à 11:51, Bouzid AREZKI a écrit :
--- Bouzid AREZKI Université Paris 13
-------- Message original -------- Objet: demande d'aide cluster gpu Date: 31/03/2022 11:50 De: Bouzid AREZKI <bouzid.arezki@edu.univ-paris13.fr> À: systeme@lipn.univ-paris13.fr
bonjour je suis utilisateur de votre GPU, j'ai quelque soucis lors de l’accès a mon adresse lien jupyter,
voici mon script bach que j'ai lance avec la commande sbatch :
#!/bin/bash
#SBATCH -J jupyter #SBATCH -N 1 #SBATCH --gpus-per-node=3 #SBATCH -t 900:00:00 #SBATCH --mail-type=ALL #SBATCH --output=%x-%j.out #SBATCH --error=%x-%j.err
export PATH="/users/arezki/miniconda3/bin:$PATH" source activate myenvpy37 # Activation de votre environnement python jupyter notebook --no-browser --port=$1 # Démarrage de jupyter
le job est bien lancé je peut l'apercevoir dans la queue et j'ai mon lien pour jupyter dans un fichier ,
puis j'ai lancé cette commande afin d'avoir accès a ce lien localement.
ssh -NfL 8888:127.0.0.1:8888 arezki@192.168.90.120
la connexion est bien établie mais quand j'essaie d’accéder au lien sur mon navigateur
je reçois ce message d'erreur :
channel 2: open failed: connect failed: Connection refused
d’après mes recherches j'ai trouver que ce message d'erreur est du car y'a aucun tache a été lancer dans le serveur mais ce n'est pas le cas car le job est lancé .
cordialement.
Bonjour, pour être plus clair sur la façon de lancer un job avec un seul gpu, il faut ajouter dans l'entête du fichier slurm: #SBATCH --gres=gpu:1 ou #SBATCH --gpus-per-node=1 Notez la valeur "1", et non "3". Cordialement, Jorge Garcia Flores <jgflores@lipn.fr> writes:
Bonjour M. Arezki,
On vous prie de ne pas lancer des jobs qui sollicitent toutes les cartes GPUs du nœud sans prévenir avant la liste mail gpu@lipn.univ-paris13.fr. D'autant plus que votre job n'en a utilisé qu'un seul gpu (comme on peut le voir avec un "srun -w lipn-rtx1 nvidia-smi"), ce qui empêche 2 gpu d'être utilisés par d'autres utilisateurs.
Bien cordialement
Jorge Garcia Flores Ingénieur de recherche CNRS LIPN - Université Sorbonne Paris Nord http://lipn.univ-paris13.fr/~garciaflores/ Le 31/03/2022 à 11:51, Bouzid AREZKI a écrit :
--- Bouzid AREZKI Université Paris 13
-------- Message original -------- Objet: demande d'aide cluster gpu Date: 31/03/2022 11:50 De: Bouzid AREZKI <bouzid.arezki@edu.univ-paris13.fr> À: systeme@lipn.univ-paris13.fr
bonjour je suis utilisateur de votre GPU, j'ai quelque soucis lors de l’accès a mon adresse lien jupyter,
voici mon script bach que j'ai lance avec la commande sbatch :
#!/bin/bash
#SBATCH -J jupyter #SBATCH -N 1 #SBATCH --gpus-per-node=3 #SBATCH -t 900:00:00 #SBATCH --mail-type=ALL #SBATCH --output=%x-%j.out #SBATCH --error=%x-%j.err
export PATH="/users/arezki/miniconda3/bin:$PATH" source activate myenvpy37 # Activation de votre environnement python jupyter notebook --no-browser --port=$1 # Démarrage de jupyter
le job est bien lancé je peut l'apercevoir dans la queue et j'ai mon lien pour jupyter dans un fichier ,
puis j'ai lancé cette commande afin d'avoir accès a ce lien localement.
ssh -NfL 8888:127.0.0.1:8888 arezki@192.168.90.120
la connexion est bien établie mais quand j'essaie d’accéder au lien sur mon navigateur
je reçois ce message d'erreur :
channel 2: open failed: connect failed: Connection refused
d’après mes recherches j'ai trouver que ce message d'erreur est du car y'a aucun tache a été lancer dans le serveur mais ce n'est pas le cas car le job est lancé .
cordialement.
_______________________________________________ Gpu mailing list Gpu@lipn.univ-paris13.fr https://lipn.univ-paris13.fr/listes-lipn/listinfo/gpu
-- Joseph Le Roux RCLN, LIPN, Université Sorbonne Paris Nord Tel: +33 (0) 1 49 40 32 13 URL: https://www.lipn.fr/~leroux GPG fingerprint: 647E BA11 F377 FA03 2A6A AFB6 6090 6D35 BE65 36C5
Bonjour, Désolé d'insister mais vos jobs jupyter continuent d'occuper 3 GPU alors qu'ils n'en n'utilisent qu'un seul. Je ne peux pas lancer mes jobs alors que certains GPU ne sont pas utilisés. Pouvez-vous relancer vos jobs en changeant l'option que j'ai mentionnée plus bas s'il vous plaît ? Cordialement "Joseph Le Roux" <leroux@lipn.fr> writes:
Bonjour,
pour être plus clair sur la façon de lancer un job avec un seul gpu, il faut ajouter dans l'entête du fichier slurm:
#SBATCH --gres=gpu:1
ou
#SBATCH --gpus-per-node=1
Notez la valeur "1", et non "3".
Cordialement,
Jorge Garcia Flores <jgflores@lipn.fr> writes:
Bonjour M. Arezki,
On vous prie de ne pas lancer des jobs qui sollicitent toutes les cartes GPUs du nœud sans prévenir avant la liste mail gpu@lipn.univ-paris13.fr. D'autant plus que votre job n'en a utilisé qu'un seul gpu (comme on peut le voir avec un "srun -w lipn-rtx1 nvidia-smi"), ce qui empêche 2 gpu d'être utilisés par d'autres utilisateurs.
Bien cordialement
Jorge Garcia Flores Ingénieur de recherche CNRS LIPN - Université Sorbonne Paris Nord http://lipn.univ-paris13.fr/~garciaflores/ Le 31/03/2022 à 11:51, Bouzid AREZKI a écrit :
--- Bouzid AREZKI Université Paris 13
-------- Message original -------- Objet: demande d'aide cluster gpu Date: 31/03/2022 11:50 De: Bouzid AREZKI <bouzid.arezki@edu.univ-paris13.fr> À: systeme@lipn.univ-paris13.fr
bonjour je suis utilisateur de votre GPU, j'ai quelque soucis lors de l’accès a mon adresse lien jupyter,
voici mon script bach que j'ai lance avec la commande sbatch :
#!/bin/bash
#SBATCH -J jupyter #SBATCH -N 1 #SBATCH --gpus-per-node=3 #SBATCH -t 900:00:00 #SBATCH --mail-type=ALL #SBATCH --output=%x-%j.out #SBATCH --error=%x-%j.err
export PATH="/users/arezki/miniconda3/bin:$PATH" source activate myenvpy37 # Activation de votre environnement python jupyter notebook --no-browser --port=$1 # Démarrage de jupyter
le job est bien lancé je peut l'apercevoir dans la queue et j'ai mon lien pour jupyter dans un fichier ,
puis j'ai lancé cette commande afin d'avoir accès a ce lien localement.
ssh -NfL 8888:127.0.0.1:8888 arezki@192.168.90.120
la connexion est bien établie mais quand j'essaie d’accéder au lien sur mon navigateur
je reçois ce message d'erreur :
channel 2: open failed: connect failed: Connection refused
d’après mes recherches j'ai trouver que ce message d'erreur est du car y'a aucun tache a été lancer dans le serveur mais ce n'est pas le cas car le job est lancé .
cordialement.
_______________________________________________ Gpu mailing list Gpu@lipn.univ-paris13.fr https://lipn.univ-paris13.fr/listes-lipn/listinfo/gpu
-- Joseph Le Roux RCLN, LIPN, Université Sorbonne Paris Nord Tel: +33 (0) 1 49 40 32 13 URL: https://www.lipn.fr/~leroux GPG fingerprint: 647E BA11 F377 FA03 2A6A AFB6 6090 6D35 BE65 36C5
Bonjour M. Arezki, Ceci est un deuxième avertissement par rapport au lancement des jobs sur tous les gpus du node (3) dans le cluster de calcul lipn-rtx, qui bloquent le travail des autres utilisateurs. On vous rappelle que, sauf exception, les jobs doivent être lancés sur un seul GPU, et si la tâche nécessite plus, il faut demander l'autorisation à la liste mail gpu@lipn.univ-paris13.fr On vous prie (à nouveau) de lancer vos processus de calcul avec les paramètres suivants : #SBATCH --gres=gpu:1 ou #SBATCH --gpus-per-node=1 Si l'incident se répète une troisième fois, nous serons obligés de restreindre vos accès. Cordialement Jorge Garcia Flores Ingénieur de recherche CNRS LIPN - Université Sorbonne Paris Nord http://lipn.univ-paris13.fr/~garciaflores/ Le 11/04/2022 à 08:22, Jorge Garcia Flores a écrit :
Bonjour M. Arezki,
On vous prie de ne pas lancer des jobs qui sollicitent toutes les cartes GPUs du nœud sans prévenir avant la liste mail gpu@lipn.univ-paris13.fr. D'autant plus que votre job n'en a utilisé qu'un seul gpu (comme on peut le voir avec un "srun -w lipn-rtx1 nvidia-smi"), ce qui empêche 2 gpu d'être utilisés par d'autres utilisateurs.
Bien cordialement
Jorge Garcia Flores Ingénieur de recherche CNRS LIPN - Université Sorbonne Paris Nord http://lipn.univ-paris13.fr/~garciaflores/ Le 31/03/2022 à 11:51, Bouzid AREZKI a écrit :
--- Bouzid AREZKI Université Paris 13
-------- Message original -------- Objet: demande d'aide cluster gpu Date: 31/03/2022 11:50 De: Bouzid AREZKI <bouzid.arezki@edu.univ-paris13.fr> À: systeme@lipn.univ-paris13.fr
bonjour je suis utilisateur de votre GPU, j'ai quelque soucis lors de l’accès a mon adresse lien jupyter,
voici mon script bach que j'ai lance avec la commande sbatch :
#!/bin/bash
#SBATCH -J jupyter #SBATCH -N 1 #SBATCH --gpus-per-node=3 #SBATCH -t 900:00:00 #SBATCH --mail-type=ALL #SBATCH --output=%x-%j.out #SBATCH --error=%x-%j.err
export PATH="/users/arezki/miniconda3/bin:$PATH" source activate myenvpy37 # Activation de votre environnement python jupyter notebook --no-browser --port=$1 # Démarrage de jupyter
le job est bien lancé je peut l'apercevoir dans la queue et j'ai mon lien pour jupyter dans un fichier ,
puis j'ai lancé cette commande afin d'avoir accès a ce lien localement.
ssh -NfL 8888:127.0.0.1:8888 arezki@192.168.90.120
la connexion est bien établie mais quand j'essaie d’accéder au lien sur mon navigateur
je reçois ce message d'erreur :
channel 2: open failed: connect failed: Connection refused
d’après mes recherches j'ai trouver que ce message d'erreur est du car y'a aucun tache a été lancer dans le serveur mais ce n'est pas le cas car le job est lancé .
cordialement.
participants (2)
-
Jorge Garcia Flores -
Joseph Le Roux