Afficher la pageAnciennes révisionsHaut de page Cette page est en lecture seule. Vous pouvez afficher le texte source, mais ne pourrez pas le modifier. Contactez votre administrateur si vous pensez qu'il s'agit d'une erreur. ~~NOTOC~~ ====== Organisation des files d'attente====== ===== Cluster Lumière ===== <wrap hi> **Nœud de soumission** : mesologin1.univ-fcomte.fr ou mesologin2.univ-fcomte.fr</wrap> ^Nom ^Limite de temps ^ Nombre de slots ^ Limite slots/user ^Limite mémoire/coeur ^ Type d'application^ |all.q |8j|892 | 64 |-|Mémoire partagée : OpenMP, tableaux de tâches, séquentielles| |parallel.q | 8j|1088 |128|4G/coeur| Mémoire distribuée : MPI spécifique| |tesla.q | 8j| 8 slots, 4 GPU | -|-| calculs GPGPU| |volta.q | 8j| 2 noeuds, 8 GPU | -|-| IA et Deep Learning| |xphi.q | 3j| 12 slots, 4 cartes | - |-| calculs parallèle spécifique| |bigmem.q|8j|8 slots, 96G|-| -|Séquentiel, OpenMP| <note tip>On peut afficher les files d'attente avec la commande : ''qconf -sql '' ou ''qstat -g c''</note> ====== Configuration SGE====== Un système de ''quotas'' et de partage équitable (''fairshare'') est utilisé pour s'assurer que les ressources (CPU, MEM) soient accessibles à tous les utilisateurs dans les meilleurs délais. ====== Les quotas ====== * Il existe des quotas (slots et h_vmem) par utilisateur qui garantissent qu'un utilisateur n'utilise plus de 20% de la file d'attente utilisée. * La mémoire (h_vmem) rentre de le calcul des quotas (4G/coeur). * Aucun quota par laboratoire ou équipe n'est en place pour le moment <note tip>Exemple : pour un quota de **48 slots** sur la file **all.q**, la valeur maximale de **h_vmem** est 4x48 = **192G**. </note> <note> - important ces quotas sont régulièrement ajustés en fonction de la charge du cluster - On peut afficher les quotas SGE des utilisateurs connectés avec la commande ''qquotatAll'' </note> ====== Le partage équitable ("fairshare") ====== Le ''fairshare'' est un mécanisme surveillant l'usage des ressources dans le temps, de manière à permettre aux utilisateurs occasionnels de passer plus facilement par rapport à de gros consommateurs en ressource. **Pour ce faire, les priorités de chaque job en attente sur le cluster sont ajustées à la volée, ce qui peut se traduire par deux priorités différentes pour des jobs par ailleurs identiques.** ====== Utilisation mémoire ====== La mémoire et les slots sont des ressources consommables, allouées à un job une fois lancé : Pour une meilleure utilisation des machines, nous invitons donc les utilisateurs à bien estimer la mémoire. Un ensemble d'outils ont été mis en place pour vous aider à connaître la mémoire réellement utilisée par vos calculs. Durant l'exécution, vous pouvez visualiser la mémoire réellement consommée par vos applications : * en ligne de commandes : <code bash>qmemview -j <jobid></code> * sur le portail : [[https://mesoportail.univ-fcomte.fr]] A la fin de l'exécution: <code bash>qacct -j <jobid></code> <note tip>Des alertes par email vous seront envoyées en fin de job en cas de sous utilisation de la mémoire demandée.</note> queues.txt Dernière modification : 2025/03/27 14:44de admin