Bonjour J'ai rencontré un problème d'utilisation des gpus LIPN. Pour les GPUs de LIPN, il me semble qu'il y a un problème avec le node lipn-rtx1 Si j'utilise srun --nodelist=lipn-rtx1 nvidia-smi, ça me donne: Failed to initialize NVML: Driver/library version mismatch J'ai lancé une exp en lipn-rtx1, ça marche mais il n'y pas d'accélération ou très peu d'accélération (8-9 fois plus lents que l'exp en lipn-rtx2). Et aussi il me semble que maintenant lipn-rtx3 n'est pas bon. J'ai essayé de lancer une exp, mais ça me donne: srun: error: Unable to create step for job 653: Requested node configuration is not available. le fichier de slurm que j'ai utilisé est: #!/bin/bash #SBATCH --job-name=python #SBATCH --gres=gpu:1 #SBATCH --output=./modelLinearCRF1/slurmt.out #SBATCH --error=./modelLinearCRF1/slurmt.err #SBATCH --nodes=1 #SBATCH --ntasks-per-node=1 srun -w lipn-rtx3 python debug_linear.py Cordialement! Xudong Zhang
Bonjour, il semble que le système était dans un état intermédiaire suite à une màj automatique incomplète (restart required + nouvel upgrade). J'ai achevé cette màj manuellement mais je vois des jobs dessus. Quelqu'un peut-il m'autoriser à redémarrer rtx3 ? Un problème quasiment identique est survenu sur rtx1 (une partie des màj automatiques étaient en échec), qui lui a été nettoyé et redémarré à l'instant. Je vais voir avec Marisol s'il est judicieux de passer les màj en mode manuel. Amicalement, M. Tournier Le 23/07/2021 à 09:29, Zhang Xudong a écrit :
Bonjour
J'ai rencontré un problème d'utilisation des gpus LIPN.
Pour les GPUs de LIPN, il me semble qu'il y a un problème avec le node lipn-rtx1
Si j'utilise srun --nodelist=lipn-rtx1 nvidia-smi, ça me donne: Failed to initialize NVML: Driver/library version mismatch
J'ai lancé une exp en lipn-rtx1, ça marche mais il n'y pas d'accélération ou très peu d'accélération (8-9 fois plus lents que l'exp en lipn-rtx2).
Et aussi il me semble que maintenant lipn-rtx3 n'est pas bon. J'ai essayé de lancer une exp, mais ça me donne: srun: error: Unable to create step for job 653: Requested node configuration is not available.
le fichier de slurm que j'ai utilisé est:
#!/bin/bash
#SBATCH --job-name=python
#SBATCH --gres=gpu:1
#SBATCH --output=./modelLinearCRF1/slurmt.out
#SBATCH --error=./modelLinearCRF1/slurmt.err
#SBATCH --nodes=1
#SBATCH --ntasks-per-node=1
srun -w lipn-rtx3 python debug_linear.py
Cordialement!
Xudong Zhang
_______________________________________________ Gpu mailing list Gpu@lipn.univ-paris13.fr https://lipn.univ-paris13.fr/listes-lipn/listinfo/gpu
participants (2)
-
Frédéric Tournier -
Zhang Xudong