Différences
Ci-dessous, les différences entre deux révisions de la page.
| Les deux révisions précédentes Révision précédente Prochaine révision | Révision précédente | ||
| helios [2021/07/06 16:28] – [Mode interactif] admin | helios [2021/07/07 13:19] (Version actuelle) – [Test du cluster Helios] admin | ||
|---|---|---|---|
| Ligne 1: | Ligne 1: | ||
| ====== Test du cluster Helios ====== | ====== Test du cluster Helios ====== | ||
| + | Caractéristiques principales : | ||
| + | * Système Centos7.9 Final | ||
| + | * Slurm 2020 pour la gestion des ressources | ||
| + | * 192 To Stockage BeeGFS (WORK) | ||
| + | * Réseau 10G/s pour Data | ||
| + | * Réseau 100G/s pour MPI | ||
| + | * Processeurs Intel Skylake-avx512 pour la partition compute | ||
| + | * Processeurs AMD Zen 3 pour la partition gpu | ||
| + | * 9 cartes A100 (PCI, 40G de mémoire) -> 3 cartes par serveur. | ||
| + | |||
| + | **Noeuds de calculs et partitions (slurm)** | ||
| + | <code bash> | ||
| + | |||
| + | [kmazouzi@mesointeractive ~]$ sinfo -Nl | ||
| + | Wed Jul 07 13:24:59 2021 | ||
| + | NODELIST | ||
| + | node4-1 | ||
| + | node4-2 | ||
| + | node4-3 | ||
| + | node4-4 | ||
| + | node4-5 | ||
| + | node4-6 | ||
| + | node4-7 | ||
| + | node4-8 | ||
| + | node4-21 | ||
| + | node4-22 | ||
| + | node4-23 | ||
| + | </ | ||
| + | |||
| + | **Logiciels installés (Spack), selon l' | ||
| + | <code bash>$ module avail | ||
| + | -------------------------------------------------------------------------------------------------------------------------------- / | ||
| + | gcc@11.1.0 | ||
| + | |||
| + | ----------------------------------------------------------------------------------------------------------------------------- / | ||
| + | gromacs@2021.2-mkl | ||
| + | intel-mkl@2020.4.304 | ||
| + | |||
| + | ---------------------------------------------------------------------------------------------------------------------------------- / | ||
| + | anaconda3@2020.11 | ||
| + | |||
| + | |||
| + | </ | ||
| ===== Connexion ===== | ===== Connexion ===== | ||
| Utilisation SSH | Utilisation SSH | ||
| Ligne 34: | Ligne 77: | ||
| * '' | * '' | ||
| * '' | * '' | ||
| - | * A noter que la mémoire, par defaut, allouée est de '' | + | * A noter que la mémoire, par defaut, allouée est de '' |
| Une fois connecté sur le noeud. Vous pouvez utiliser WORK pour travailler. | Une fois connecté sur le noeud. Vous pouvez utiliser WORK pour travailler. | ||
| Ligne 40: | Ligne 83: | ||
| <note tip>Pour la file d' | <note tip>Pour la file d' | ||
| Il est accessible via la variable d' | Il est accessible via la variable d' | ||
| - | Cette espace est utile pour les applications qui font beaucoup de streaming. | + | Cette espace |
| </ | </ | ||
| Ligne 46: | Ligne 89: | ||
| L' | L' | ||
| - | **Exemple d'un cas d' | + | === Conda pour installer tensforflow-gpu === |
| + | **Exemple d'un cas d' | ||
| On se place dans le scratch local: | On se place dans le scratch local: | ||
| <code bash> | <code bash> | ||
| Ligne 55: | Ligne 99: | ||
| <code bash> | <code bash> | ||
| $ module load anaconda3@2020.11 | $ module load anaconda3@2020.11 | ||
| + | </ | ||
| + | |||
| + | On crée un environnement conda : | ||
| + | <code bash> | ||
| + | $ conda env create -n meso_test | ||
| + | </ | ||
| + | On active l' | ||
| + | |||
| + | <code bash> | ||
| + | $ conda env list | ||
| + | $ conda activate meso_test | ||
| + | $ (meso_test)$ conda list | ||
| + | </ | ||
| + | On install tesnforflow-gpu | ||
| + | <code bash> | ||
| + | $ (meso_test)$ conda install tesnforflow-gpu | ||
| </ | </ | ||
| ==== Mode Batch ===== | ==== Mode Batch ===== | ||
| + | Créer un script Slurm dans '' | ||
| + | |||
| + | Adapter le script suivant selon besoins.\\ | ||
| + | |||
| + | **Exemple script GPU** | ||
| + | |||
| + | <file bash gpu.slurm> | ||
| + | #!/bin/bash | ||
| + | # Fichier submission.SBATCH | ||
| + | |||
| + | #SBATCH --job-name=" | ||
| + | #SBATCH --output=%x.%J.out | ||
| + | #SBATCH --error=%x.%J.out | ||
| + | |||
| + | #SBATCH --partition=gpu | ||
| + | #SBATCH --gres=gpu: | ||
| + | |||
| + | ## votre dresse mail pour les notifs | ||
| + | #SBATCH --mail-user=votreadresseufc@univ-fcomte.fr | ||
| + | #SBATCH --mail-type=END, | ||
| + | |||
| + | nvidia-smi | ||
| + | |||
| + | module purge | ||
| + | module load anaconda3@2020.11 | ||
| + | conda activate meso_test | ||
| + | |||
| + | </ | ||
| + | soumettre le job : | ||
| + | <code bash> | ||
| + | $ sbatch gpu.slurm | ||
| + | </ | ||
| + | |||
| + | statut des jobs | ||
| + | <code bash> | ||
| + | $ squeue | ||
| + | </ | ||
| + | |||
| + | |||
| + | **Exemple script NAMD** | ||
| + | |||
| + | <file bash namd.slurm> | ||
| + | #!/bin/bash | ||
| + | # Fichier submission.SBATCH | ||
| + | |||
| + | #SBATCH --job-name=" | ||
| + | #SBATCH --output=%x.%J.out | ||
| + | #SBATCH --error=%x.%J.out | ||
| + | |||
| + | #SBATCH --partition=compute | ||
| + | #SBATCH -n 96 | ||
| + | |||
| + | #SBATCH --mail-user=votreadresseufc@univ-fcomte.fr | ||
| + | #SBATCH --mail-type=END, | ||
| + | |||
| + | module purge | ||
| + | module load namd@2.14-mkl | ||
| + | |||
| + | NAMD_SCRIPT=grap10 | ||
| + | srun namd2 $NAMD_SCRIPT.namd > $NAMD_SCRIPT.out | ||
| + | |||
| + | </ | ||
| + | |||
| + | |||