Stockage VALERIA¶
VALERIA offre aux chercheurs de l'Université Laval et à leurs équipes trois solutions de stockage situées sur le campus de l'Université Laval. Sécuritaires et accessibles, ces technologies sont adaptées à divers besoins et visent à libérer l'utilisateur des systèmes de stockage physiques et propriétaires, souvent onéreux et peu sécuritaires.
Pour plus d'informations, consulter les services sur notre portail ou écrire à info@valeria.science
Quotas de stockage subventionné¶
Les chercheurs de l'Université Laval ont accès à un quota de base :
| Type | Variable | Espace | Fichiers |
|---|---|---|---|
| HOME | $HOME |
50 Go | 300 k |
| PROJECT | - | 1 To | 500 k |
| SCRATCH | - | 1 To | 500 k |
| LOCAL SCRATCH | $SLURM_TMPDIR |
- | - |
| Objet (S3) | - | 4 To | 1000 compartiments 1M fichiers / compartiment |
| Type | Variable | Espace | Fichiers |
|---|---|---|---|
| HOME | $HOME |
50 Go | 300 k |
| PROJECT | - | - | - |
| SCRATCH | - | - | - |
| LOCAL SCRATCH | $SLURM_TMPDIR |
- | - |
| Objet (S3) | - | 25 Go | - |
Pour avoir accès à davantage de ressources, écrire à info@valeria.science
Consulter mes quotas et mon utilisation¶
Il est possible de consulter votre utilisation pour le stockage Lustre et S3 avec certaines commandes :
Lustre
Si vous souhaitez téléverser un ensemble de données de votre poste de travail vers la plateforme de calcul: vous devez configuré Rclone.
Pour afficher vos quotas et l'utilisation de vos espaces (HOME, PROJECTs et SCRATCH), utiliser la commande val-show-space.
Voici un exemple de sortie :
$ val-show-space
**** HOME
Filesystem used quota limit grace files quota limit grace
/lustre-a/ 10G 0k 50G - 95104 0 300000 -
**** SCRATCH
Filesystem used quota limit grace files quota limit grace
/lustre-a/ 5G 0k 1T - 50 0 500000 -
**** PROJECT def-<IDUL>
Filesystem used quota limit grace files quota limit grace
/lustre-a 200G 0k 1T - 11100 0 500000 -
Stockage object (s3)
Pour le stockage objet, il est possible de consulter la taille et le nombre d'objets à l'aide des commandes rclone size ou rclone ncdu.
Préalable:
Pour ce faire, il faut avoir configuré Rclone, pour l'accès au stockage objet de VALERIA.
# Pour tous mes compartiments
rclone size s3:
rclone ncdu s3:
# Pour un compartiment précis
rclone size s3:<compartiment>
rclone ncdu s3:<compartiment>
Résumé des caractéristiques du stockage Lustre et Objet (s3) de VALERIA¶
| Type | Utilisation | Performances | Accès externe | Globus | Backup |
|---|---|---|---|---|---|
| Lustre - HOME | Fichiers personnels non-partagés. | ||||
| Lustre - PROJECT | |||||
| Lustre - SCRATCH | |||||
| Noeud - LOCALSCRATCH | |||||
| Objet - S3 | Données tièdes et froides. |