Descriptif des ressources en calcul
En tant que membre du LJK, vous avez accès à l’intégralité des ressources du méso-centre de calcul. Vous avez en particulier un accès prioritaire aux noeuds du cluster Luke qui ont été financés par le LJK (cf. liste des moyens mutualisés).
Description des clusters
Trois clusters sont accessibles : Dahu, Luke et Froggy.
Pour une présentation exhaustive des ressources, nous vous renvoyons vers la description détaillée des infrastructures de calcul du site de Gricad.
Cluster | noeuds/coeurs | RAM(GB/noeud) | GPUs | Interconnexion | Divers |
---|---|---|---|---|---|
Dahu | > 100/ > 3000 | 192 | Tesla V100 | Omnipath | |
Luke | \(\approx\) 60/\(\approx\) 1200 | 64 \(\geq\) RAM \(\geq\) 512 | K40 | hétérogène, infiniband et 10GB | Très hétérogène |
Froggy | \(\approx\) 200/3000 | 64 \(\geq\) RAM \(\geq\) 128 | K20 | infiniband | Fin de vie |
Quelle machine pour quelle utilisation ?
Cluster recommandé pour : | Dahu | Luke | Froggy | Grille |
---|---|---|---|---|
Calcul parallèle distribué, MPI | ✅ | ✔︎ | ✅ | |
Calcul parallèle, mémoire partagée | ✔︎ | ✅ | ✔︎ | |
IA, calcul sur GPU | ✅ | ✅ | ||
Data processing | ✅ | |||
Noeud de visu | ❌ | ✅ | ✅ | ❌ |
Beaucoup de jobs séquentiels | max 50 | max 50 | max 50 | ✅ |
Priorité d’accès LJK | ❌ | ✅ | ❌ | ❌ |
Gestion des données
La version courte
Sur Luke et Dahu, vous disposez de plusieurs espaces :
- /home/$USER
- /bettik/$USER (> 1PB), un “scratch”, commun à tous les clusters
- un stockage via le cloud (Mantis). Pour les détails, consultez la doc Gricad.
$USER : votre login perseus.
Warning
/home/$USER est commun à tous les noeuds d’un cluster mais n’est pas partagé entre les clusters.
Tip
Utilisez bettik pour toutes les I/O volumineuses. Pas de stockage de données dans les homes.
La version détaillée
Pour plus d’informations et un bon usage des ressources, nous vous recommandons fortement la lecture de la doc Gestion des données et infrastructure de stockage.
Pour aller plus loin
- Un tutoriel est disponible sur ce site : vous trouverez le minimum à connaitre pour bien démarrer sur les clusters.
- La référence : documentation officielle de GRICAD.
- Le cours Introduction au calcul parallèle auquel nous participons activement et qui est proposé au collège doctoral. Tous les TPs sont réalisés sur les clusters de GRICAD.