- GPU - Listes du LIPN

Re: [Gpu] serveur lipn-gpu
by Jorge Garcia Flores 10 Nov '22

10 Nov '22

Malheureusement, je n'ai pas les droits pour réinitialiser ton compte. Par contre, tu peux installer Miniconda correctement à partir de zéro. Juste fait /conda deactivate, /installe /miniconda /dès zéro tel qu'il est spécifié dans cette documentation <https://www.overleaf.com/9659184284hjtydkdcvczc> et essaye tel que c'est marqué dans le guide sur notre wiki <https://lipn.univ-paris13.fr/wiki/doku.php?id=public:support:labex-efl-gpu:…>... Bon courage ---- Jorge Garcia Flores Ingénieur de recherche CNRS LIPN - Université Sorbonne Paris Nord http://lipn.univ-paris13.fr/~garciaflores/ Le 10/11/2022 à 12:21, faye bilal a écrit : > J'ai vu le guide tardivement. > Du coup j'ai créé un environnement conda moi même. J'ai supprimé tous > fichiers pour recommencer mais ça reste toujours. > Pourriez vous alors réinitialiser mon compte ? Pour que je suis le guide. > > Le jeu. 10 nov. 2022, 12:12, Jorge Garcia Flores <jgflores(a)lipn.fr> a > écrit : > > Ce n'est pas possible de recréer de nouveaux identifiants, mais > vous pouvez recréer un autre environement conda pour le même > utilisateur. > > Avez-vous suivi cette procédure (qui est documenté ici > <https://lipn.univ-paris13.fr/wiki/doku.php?id=public:support:labex-efl-gpu:…> > sur le wiki ?) (Je viens de la suivre, et même si ça prend > quelques secondes, j'arrive à voir les 3 GPUs avec tensorflow) > > > Cordialement > > ---- > Jorge Garcia Flores > Ingénieur de recherche CNRS > LIPN - Université Sorbonne Paris Nord > http://lipn.univ-paris13.fr/~garciaflores/ > > Le 10/11/2022 à 11:52, faye bilal a écrit : >> Oui je comprends. >> Faut faire srun nvidia-smi. >> Mon problème se situe ailleurs. J'ai installé tensorflow mais il >> ne voit pas les gpus. >> Est ce possible de supprimer l'utilisateur faye et de le recréer >> pour que je puisse réessayer au début ? >> >> Le jeu. 10 nov. 2022, 11:35, Jorge Garcia Flores >> <jgflores(a)lipn.fr> a écrit : >> >> Vous avez besoin d'utiliser la commande srun et le framework >> slurm pour voir les gpus... >> >> La doc est ici: >> >> https://lipn.univ-paris13.fr/wiki/doku.php?id=public:support:labex-efl-gpu:… >> >> Tenez moi au courant >> >> Cordialement >> >> ---- >> Jorge Garcia Flores >> Ingénieur de recherche CNRS >> LIPN - Université Sorbonne Paris Nord >> http://lipn.univ-paris13.fr/~garciaflores/ >> >> Le 09/11/2022 à 20:15, faye bilal a écrit : >>> Merci pour votre retour ! >>> En fait je travaille avec tensorflow. J'ai installé conda, >>> mais tensorflow n'arrive pas à voir les gpus >>> >>> Le mer. 9 nov. 2022, 17:08, Jorge Garcia Flores >>> <jgflores(a)lipn.fr> a écrit : >>> >>> Bonjour... est-ce que tu l'as lancé avec srun ? >>> >>> Cordialement >>> >>> El 9 de noviembre de 2022 2:04:14 p. m. GMT+01:00, faye >>> bilal <biljolefa(a)gmail.com> escribió: >>> >>> Bonjour Jorge, >>> Je m'appelle Bilal Faye, je suis doctorant de Hanane >>> Azzage au LIPN. >>> Je me suis connecté au serveur lipn-gpu >>> (https://lipn.univ-paris13.fr/wiki/doku.php?id=public:support:labex-efl-gpu:…) >>> mais il n'y a aucun gpu là-bas. >>> Est-ce normal ? >>> Merci d'avance >>>

1 0

Fwd: [argos] [save the date] Atelier calcul HPC sur l'utilisation du framework SYSCL/oneAPI à Polytechnique
by Marisol Rodriguez Perez 20 Oct '22

20 Oct '22

Bonjour, Je vous envoie cette info si vous êtes intéressés. Cordialement, --- Marisol Rodriguez Perez -- Administratrice Réseau et Systèmes LIPN - LAGA Bureau A308 Tel : 01 49 40 35 43 -------- Message transféré -------- SUJET : [argos] [save the date] Atelier calcul HPC sur l'utilisation du framework SYSCL/oneAPI à Polytechnique DATE : Wed, 19 Oct 2022 13:05:38 +0200 DE : Yannick Fitamant <yannick.fitamant(a)polytechnique.edu> RÉPONDRE À : argos(a)listes.resinfo.org POUR : argos(a)listes.resinfo.org Bonjour, L'unité de service IDCS (Infrastructure Données Calcul Scientifique) de l'Ecole Polytechnique organise un atelier calcul HPC sur le framework SYSCL/OneAPI (programmation en environnement hétérogène CPU et GPU) du 28 novembre jusqu'au 1er décembre. Plusieurs sessions (journée) sont proposés pendant ces 4 jours sur le campus de l'école Polytechnique à Palaiseau. Il reste des places de disponible. Si dans vos laboratoires vous avez des ingénieurs calcul et/ou des utilisateurs HPC susceptibles d'être interessés, merci de bien vouloir relayer cette information. Le site de l'évènement : https://indico.mathrice.fr/event/366/ Cordialement / Best regards, --- Yannick Fitamant Centre de Physique Théorique - UMR 7644 Service Informatique Mutualisé PHYMATH (CMLS, CPHT, CMAP) Unité de service Polytechnique I.D.C.S Institut Polytechnique de Paris - Palaiseau Bâtiment 6, bureau 06 1004 Tél : + 33 1 69 33 42 25 Email : yannick.fitamant(a)polytechnique.edu

1 0

Re: [Gpu] Utilisation de 2 GPUs
by Jorge Garcia Flores 24 Aug '22

24 Aug '22

Bonjour, Juste prévenez nous sur la liste gpu(a)lipn.univ-paris13.fr sur quand allez vous lancer les processus sur 2 GPUs. Cordialement Jorge Garcia Flores Ingénieur de recherche CNRS LIPN - Université Sorbonne Paris Nord http://lipn.univ-paris13.fr/~garciaflores/ Le 24/08/2022 à 10:28, RAMZI RADDAOUI a écrit : > Bonjour Jorge, > > Dans le cadre de mon stage, je veux utiliser 2 gpus pour expérimenter > sur différentes architectures auto-supervisées qui nécessitent une > grande taille de batch. > > Merci, > > Cordialement, >

1 0

[Serveur TAL LABEX] Problème de connexion au serveur
by Lila Kim 21 Jul '22

21 Jul '22

Bonjour, Je me permets de vous contacter parce qu'il n'est plus possible de me connecter au serveur TAL/LABEX. Je viens de l'utiliser pour transférer mes données sur le serveur, mais quand j'essaye d'y accéder avec le code ssh -p 60022 lila.kim(a)tal.lipn.univ-paris13.fr il apparaît un message : Connection refused, lost connection. Pensez-vous que c'est parce qu'il y avait plusieurs essais de ma part pour accéder au serveur ? Pourriez-vous également me dire comment le résoudre, et comment me déconnecter du serveur ? Je vous remercie d'avance, Cordialement Lila KIM

2 1

Re: [Gpu] bibliothèque à installer - serveur lipn-gpu
by Jorge Garcia Flores 28 Jun '22

28 Jun '22

Bonjour, Vous ne pouvez pas avoir le sudo sur le serveur gpu, par contre vous pouvez installer miniconda (tel qu'il est marqué sur la documentation <https://lipn.univ-paris13.fr/wiki/doku.php?id=public:support:labex-efl-gpu:…>) et installer toutes les bibliothèques nécessaires dans conda. Cordialement PS: le mdp pour la documentation correspond à votre utilisateur LIPN. ---- Jorge Garcia Flores Ingénieur de recherche CNRS LIPN - Université Sorbonne Paris Nord http://lipn.univ-paris13.fr/~garciaflores/ Le 27/06/2022 à 13:18, RAMZI RADDAOUI a écrit : > Bonjour Mr. Garcia Flores, > > Je suis Ramzi RADDAOUI, stagiaire au L2TI. > Je suis maintenant bloqué car j'ai besoin de la bibliothèque > libGL.so.1 (*message erreur: ImportError: libGL.so.1: cannot open > shared object file: No such file or directory*). > Cette dernière ne peut être installée ni avec*"pip install"*ni avec > *"conda install"*, mais seulement avec*"*|*apt-get install"*lien > <https://stackoverflow.com/a/68666500/15556429> avec les droits > d'administrateur.| > | > | > Merci pour votre compréhension, > > Cordialement, >

2 4

[TAL/LABEX EFL GPU] Problème d'installation cmake
by Lila Kim 10 Jun '22

10 Jun '22

Bonjour, Je me permets de vous écrire suite à un souci rencontré lors de l'installation des packages cmake. Voici le code que je souhaite exécuter sur le serveur : sudo apt install git build-essential cmake 1/ sudo n'est pas reconnu par le système 2/ lorsque je supprime 'sudo', et essaye d'exécuter le reste du code, deux messages d'erreur apparaissent : E: Could not open lock file /var/lib/dpkg/lock-frontend - open (13: Permission denied) E: Unable to acquire the dpkg frontend lock (/var/lib/dpkg/lock-frontend), are you root? Également, j'essaye également de créer un dossier /opt/cmake/bin/cmake, mais je n'ai pas la permission pour cela non plus. Sauriez-vous d'où viennent ces problèmes ou comment les résoudre ? N'est-il pas possible d'installer d'autres packages sur le serveur ? Je vous remercie d'avance pour votre aide, Bien cordialement Lila KIM

2 1

bienvenus aux accélerateurs GPU du LIPN/L2Ti
by Jorge Garcia Flores 01 Jun '22

01 Jun '22

Bonjour, Vos comptes pour accéder aux accélérateurs de calcul GPU du LIPN/L2Ti viennent d'être créés. Vous devez avoir reçu les identifiants sur vos comptes personnels. La doc ainsi que les caractéristiques techniques des GPUs sont sur ce lien : https://lipn.univ-paris13.fr/wiki/doku.php?id=public:support:labex-efl-gpu:… Si vous avez des questions, vous pouvez écrire sur la liste gpu(a)lipn.univ-paris13.fr Deux règles d'or : *1) ne pas utiliser Jupyter (il faut tout lancer à partir de scripts SLURM) * *2) ne jamais lancer des travaux de calcul sur plus d'un GPU sans demander l'autorisation préalable * Vous devriez donc lancer vos processus de calcul avec les paramètres suivants : #SBATCH --gres=gpu:1 ou #SBATCH --gpus-per-node=1 Bien cordialement -- ---- Jorge Garcia Flores Ingénieur de recherche CNRS LIPN - Université Sorbonne Paris Nord http://lipn.univ-paris13.fr/~garciaflores/

2 1

job arrêté par cause de limite de temps
by Jorge Garcia Flores 18 May '22

18 May '22

Bonjour, Notre job (user: zaman) a été arrêté après 5 jours avec ce message dans MyFirstJob.err Est-ce normal ? Y a-t-il une limite de temps pour les jobs ? Amitiés -- ---- Jorge Garcia Flores Ingénieur de recherche CNRS LIPN - Université Sorbonne Paris Nord http://lipn.univ-paris13.fr/~garciaflores/

1 0

premier avertissement: jobs à 3 gpu/3 nodes
by Jorge Garcia Flores 17 May '22

17 May '22

Salut Mustapha... Je n'ai pas l'adresse de l'utilisateur /Madane /(il me semble qu'il s'agit d'un stagiaire à toi)/... /Il lance des jobs à 3 gpus qui bloquent tout le monde... est-ce que tu pourrais lui transmettre le message suivant ? *Bonjour M/Mme. Madane,* ** *Ceci est un premier avertissement par rapport au lancement des jobs sur tous les gpus du node (3) dans le cluster de calcul lipn-rtx, qui bloquent le travail des autres utilisateurs. On vous rappelle que, sauf exception, les jobs doivent être lancés sur un seul GPU, et si la tâche nécessite plus, il faut demander l'autorisation à la liste mail **gpu(a)lipn.univ-paris13.fr**** * ** *On vous prie de lancer vos processus de calcul avec les paramètres suivants :* ** *#SBATCH --gres=gpu:1** * * **ou** * * **#SBATCH --gpus-per-node=1* *Vous pouvez vérifier les paramètres sur **la documentation du wiki LIPN <https://lipn.univ-paris13.fr/wiki/doku.php?id=public:support:labex-efl-gpu:…>**. ** * ** *Si l'incident se répète, nous serons obligés de restreindre vos accès. * ** *Cordialement* -- ---- Jorge Garcia Flores Ingénieur de recherche CNRS LIPN - Université Sorbonne Paris Nord http://lipn.univ-paris13.fr/~garciaflores/

4 4

Jobs queued at server TAL (Labex GPU)
by Gerardo Aleman M 11 May '22

11 May '22

Hello, I executed a batch yesterday afternoon (around 6 pm) on server TAL (Labex GPU) but the server send me the following message: 10800 labex Mfs_nove gerardo. PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions) Today is has the same message and other jobs queued JOBID PARTITION NAME USER ST TIME NODES NODELIST(REASON) 10797 labex oneie niama.el PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions) 10800 labex Mfs_nove gerardo. PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions) 10806 labex DL_train francesc PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions) 10807 labex DL_train francesc PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions) 10808 labex DL_train francesc PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions) 10809 labex DL_train francesc PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions) 10774 labex NQKzfrec ghazi.fe R 22:56:40 1 tal-gpu-labex1 Can you please see what is happening with TAL (Labex GPU) server? Regards Gerardo -- _____________________________ Gerardo Aleman Manzanarez LIPN - Université Sorbonne Paris Nord aleman(a)lipn.univ-paris13.fr

2 1