Aller au contenu principal

46 articles tagués avec « flashinfo »

Le Flash Info est la lettre électronique envoyée à tous les utilisateurs de l'IDRIS. Son objectif est d'informer ses lecteurs des dernières nouveautés concernant l'IDRIS. Son rythme de parution dépend de l'information à diffuser.

Voir tous les tags

Flash Info n°2024-16

IDRIS
IDRIS
Computing center

Modification des modalités d'accès au STORE

[English version below]

Bonjour,

Avec l'arrivée de l'extension H100 est également prévu un renouvellement des espaces de stockage durant l'été. La volumétrie de stockage (en octets) des espaces WORK sera augmentée à cette occasion. En contrepartie, les modalités d'accès au STORE devront être adaptées. En particulier, l'accès au STORE en lecture et écriture ne sera plus possible depuis les nœuds de calcul. Il sera maintenu sur les noeuds de connexion et sur les partitions "prepost", "visu", "compil" et "archive".

Ce changement sera effectif après la maintenance prévue le mardi 9 juillet 2024. Nous vous invitons dès à présent à modifier vos jobs si vous accédez directement à l'espace STORE depuis les nœuds de calcul. Pour vous guider, des exemples ont été ajoutés à la fin de notre documentation sur les travaux multi-étapes : http://www.idris.fr/jean-zay/cpu/jean-zay-cpu-exec_cascade.html

Pour rappel, le STORE est un espace dédié au stockage pérenne de données archivées. Actuellement, il existe pour le STORE une redondance de la donnée, sauvegardée à la fois sur disques rotatifs et sur bandes magnétiques. La présence de la donnée sur disques rotatifs permet une lecture/écriture relativement rapide de celle-ci. À l'avenir, la donnée pourra être stockée uniquement sur bande magnétique (avec deux copies sur des bandes différentes pour garantir la redondance de donnée) ce qui dégraderait fortement les performances de vos calculs en cas d'accès direct au STORE.

N'hésitez pas à contacter l'assistance IDRIS (assist@idris.fr) si vous avez besoin d'aide.

Bien cordialement,

L'équipe assistance de l'IDRIS


Hello,

with the arrival of the H100 extension, we are also planning to renew the storage spaces over the summer. The storage size (in bytes) of WORK spaces will be increased on this occasion. In return, access to the STORE will have to be adapted. In particular, read and write access to the STORE will no longer be possible from the compute nodes. It will be maintained on the login nodes and on the "prepost", "visu", "compil" and "archive" partitions.

This change will take effect after the maintenance scheduled for Tuesday, July 9, 2024. We invite you to modify your jobs now if you access the STORE space directly from the compute nodes. To guide you, examples have been added at the end of our documentation on multi-step jobs: http://www.idris.fr/eng/jean-zay/cpu/jean-zay-cpu-exec_cascade-eng.html

As a reminder, the STORE is a space dedicated to the long-term storage of archived data. For now, the STORE provides redundant data storage on both rotating disks and magnetic tapes. The presence of data on rotating disks means that it can be read and written relatively quickly. In the future, data may only be stored on magnetic tape (with two copies on different tapes to maintain data redundancy), which would severely degrade the performance of your calculations when accessing the STORE directly.

Please do not hesitate to contact IDRIS support (assist@idris.fr) if you need any assistance.

Best regards,

The IDRIS support team

Flash Info n°2024-15

IDRIS
IDRIS
Computing center

Correctif : Arrêt du 19 juin 8h au 21 juin midi et retour en Red Hat 8.6

[English version below]

Bonjour,

Contrairement à ce que nous avions annoncé vendredi, des contraintes techniques supplémentaires nous empêchent finalement de maintenir l'accès à la partition A100 pendant l'arrêt de la machine prévu du mercredi 19 juin 8h au vendredi 21 juin midi.

Les frontales, les nœuds de pré/post-traitement et compilation ainsi que les espaces de stockage resteront accessibles du mercredi 19 juin vers 12h au vendredi 21 juin 8h.

Par ailleurs le retour en arrière vers la version 8.6 du système d'exploitation Red Hat de Jean Zay ne sera peut-être pas nécessaire et ne sera en tout cas pas réalisé à l'occasion de cet arrêt.

Nous nous excusons pour la gêne occasionnée.

Bien cordialement, L'équipe assistance de l'IDRIS


Hello,

Contrary to what we announced on Friday, extra technical constraints finally prevent us from maintaining access to the A100 partition during the machine shutdown scheduled from Wednesday, June 19 8am to Friday, June 21 at noon.

Front nodes, pre/post and compilation nodes, as well as storage spaces will remain accessible from Wednesday around noon to Friday 8 am.

Besides, the roll-back to the 8.6 version of the Red Hat Jean Zay operating system might not be necessary and will, in any case, not be performed during this shutdown.

We apologize for the inconvenience.

Best regards, The IDRIS user support team

Flash Info n°2024-14

IDRIS
IDRIS
Computing center

Arrêt du 19 juin 8h au 21 juin midi et retour en Red Hat 8.6

[English version below]

Bonjour,

Dans le cadre de l'installation de l'extension H100 de Jean Zay, un arrêt de la machine est nécessaire du mercredi 19 juin 8h au vendredi 21 juin midi afin d'effectuer des opérations sur l'infrastructure de l'IDRIS.

Les frontales, les nœuds A100 et de pré/post-traitement ainsi que les espaces de stockage resteront accessibles du mercredi 19 juin vers 14h au vendredi 21 juin 8h. Seuls les travaux dont la durée maximale est suffisamment courte pourront s'exécuter pendant cette période.

A l'occasion de cet arrêt, nous effectuerons par ailleurs un retour en arrière vers la version 8.6 du système d'exploitation Red Hat de Jean Zay. Cela fait suite à des problèmes de stabilité observés sur l'accès aux systèmes de fichiers depuis la mise à jour vers Red Hat 9.2. Ce retour en arrière sera effectif dès mercredi après-midi.

Ce changement de version du système d'exploitation devrait normalement avoir un impact limité sur votre utilisation de la machine. Nous vous recommandons néanmoins de recompiler vos codes une fois la mise à jour effectuée, même si la majorité devrait continuer à fonctionner sans action de votre part.

Nous nous excusons pour la gêne occasionnée par ces opérations. En cas de problème, n'hésitez pas à contacter l'assistance de l'IDRIS.

Bien cordialement, L'équipe assistance de l'IDRIS


Hello,

Jean Zay will be unavailable from Wednesday, June 19th at 8am to Friday, June 21st at noon in order to perform some operations on the infrastructure of IDRIS required to finalize the installation of the H100 extension of Jean Zay.

The login nodes, A100 nodes, pre/post-processing nodes and storage spaces will nevertheless be usable from Wednesday, June 19th around 2pm to Friday, June 21st at 8am. The jobs targeting those nodes will be executed as long as their maximum elapsed time is short enough.

Additionally, during that downtime, the operating system of the Jean Zay supercomputer will be downgraded to Red Hat 8.6 due to some stability issues affecting the accesses to the filesystems since the upgrade to Red Hat 9.2. This downgrade will take effect on Wednesday afternoon.

This operating system version change should have a limited impact on your use of the machine. Nevertheless, we recommend that you recompile your codes once after the update, even if the majority of them should continue to work without any action on your part.

We are sorry for the inconvenience caused by those operations. In case of problems, contact the IDRIS Support.

Best regards, The IDRIS user support team

Flash Info n°2024-13

IDRIS
IDRIS
Computing center

Migration du système d'exploitation en Red Hat 9.2

[English version below]

Bonjour,

À l'occasion de la maintenance d'aujourd'hui (4 juin 2024), le système d'exploitation du supercalculateur Jean Zay est mis à jour en Red Hat 9.2 (contre 8.6 actuellement). Cette mise à jour a pour but de disposer d'un environnement logiciel récent sur Jean Zay et s'inscrit dans le cadre de la préparation de l'installation de l'extension H100 de Jean Zay.

Ce changement de version du système d'exploitation devrait normalement avoir un impact limité sur votre utilisation de la machine. Nous vous recommandons néanmoins de recompiler vos codes une fois la mise à jour effectuée, même si la majorité devrait continuer à fonctionner sans action de votre part.

Nous vous signalons néanmoins quelques points d'attention :

  • Les compilateurs GNU distribués avec le système passent en version 11.3.1 à l'occasion de cette mise à jour. Les compilateurs Intel dont la version est inférieure à 2021 ne sont plus compatibles avec cette version du compilateur GNU. Les modules "intel-compilers" inférieurs à 2021 chargent donc maintenant automatiquement les compilateurs GNU 8.5.0. Il reste possible d'utiliser une autre version (inférieure à 11) en la chargeant avant le compilateur Intel, par exemple "module load gcc/10.1.0 intel-compilers/19.1.3".

  • Le retour en production de JupyterHub sera décalé de quelques heures, l'accès devrait être à nouveau possible d'ici la fin de la journée.

  • L'accès aux noeuds de visualisation via un client VNC sera suspendu quelques jours le temps de finaliser la migration.

  • En raison de l'obsolescence de certains algorithmes de chiffrement, l'accès à Jean Zay depuis certaines machines utilisant une version ancienne de SSH pourrait ne plus être possible (tout comme l'accès depuis Jean Zay à de telles machines).

En cas de problème, n'hésitez pas à contacter l'assistance de l'IDRIS.

Bien cordialement, L'équipe assistance de l'IDRIS


Hello,

During today's maintenance (June 4th, 2024), the operating system of the Jean Zay supercomputer has been updated to Red Hat 9.2 (from 8.6 currently). This update aims at making a recent software environment available on Jean Zay and is part of the preparation framework for the installation of the Jean Zay H100 extension.

This operating system version change should have a limited impact on your use of the machine. Nevertheless, we recommend that you recompile your codes once after the update, even if the majority of them should continue to work without any action on your part.

Please note:

  • The GNU compilers bundled with the operating system have been updated to version 11.3.1. The Intel compilers whose version is lower than 2021 are not compatible anymore with this version of the GNU compilers. The "intel-compilers" modules lower than 2021 will now automatically load the GNU compilers 8.5.0. You can still use another version (lower than 11) by loading it before the Intel compiler, for example "module load gcc/10.1.0 intel-compilers/19.1.3".

  • JupyterHub will still be unavailable for a few hours, it should be back online by the end of the day.

  • The access to the visualization node through a VNC client will be suspended for a few days while we finalize the migration.

  • Due to the deprecation of some encryption algorithms, the access to Jean Zay from some machines using an old SSH version might not be possible anymore (similarly the access from Jean Zay to such machines also might not work).

In case of problems, contact the IDRIS Support.

Best regards, The IDRIS user support team

Flash Info n°2024-12

IDRIS
IDRIS
Computing center

JupyterHub : Nouvelle interface de connexion à partir du mardi 4 juin 2024

[English version below]

Bonjour,

A partir du mardi 4 juin 2024, la connexion à JupyterHub se fera via le service d'authentification centralisée de l'IDRIS. Seule l'interface de connexion change, le nom d'utilisateur et le mot de passe sont toujours ceux que vous utilisez pour vous connectez à la machine Jean Zay.

Lors de votre connexion à notre instance JupyterHub, vous devrez cliquer sur "Sign in with Jean Zay SSO" et suivre les instructions décrites dans notre documentation : http://www.idris.fr/jean-zay/pre-post/jean-zay-jupyterhub.html#nouvelle_interface_de_connexion_a_partir_du_mardi_4_juin_2024.

Bien cordialement, L'équipe assistance de l'IDRIS


Hello,

Starting from Tuesday, June 4th, 2024, the connection to our JupyterHub instance will use IDRIS Single Sign-on. The user interface will be different but your login and password are still the same as those for accessing the Jean Zay machine.

When accessing our JupyterHub instance, you will need to click on "Sign in with Jean Zay SSO" and follow the instructions described in our documentation: http://www.idris.fr/eng/jean-zay/pre-post/jean-zay-jupyterhub-eng.html#new_authentication_interface_starting_from_tuesday_june_4th_2024.

Best regards, The IDRIS user support team

Flash Info n°2024-11

IDRIS
IDRIS
Computing center

Sommaire :

  • La 2ème Journée Deep Learning pour la Science, c'est demain !
  • Formations IDRIS
  • La 2ème Journée Deep Learning pour la Science, c'est demain !

La deuxième édition de la Journée Deep Learning pour la Science (JDLS) a lieu demain, le 24 mai 2024 au siège du CNRS à Paris. Retrouvez le programme et toutes les informations sur http://www.idris.fr/annonces/jdls2024.html. Les inscriptions sont closes mais la journée sera retransmise en live sur la chaîne YouTube de Fidle : https://www.youtube.com/@CNRS-FIDLE (sans inscription nécessaire).

  • Formations IDRIS

Pensez à vous inscrire dès maintenant aux formations IDRIS planifiées jusqu'à fin juin :

  • C++ Scientifique Moderne, du 3 au 5 juin
  • Workshop Jean Zay, les 6 et 7 juin

Pour plus d'informations sur le catalogue 2024 des formations de l'IDRIS et les modalités d'inscription : http://www.idris.fr/formations/catalogue.html


Flash Info n°2024-10

IDRIS
IDRIS
Computing center

Sommaire : Information relative aux sauvegardes des espaces disques sur Jean Zay Taille maximale par fichier sur les espaces disques de Jean Zay Inscriptions pour la 2ème Journée Deep Learning pour la Science Formations IDRIS

  • Information relative aux sauvegardes des espaces disques sur Jean Zay

En raison des opérations liées à l'arrivée de l'extension H100, nous ne sommes plus en mesure de garantir les sauvegardes de l'espace disque WORK (http://www.idris.fr/jean-zay/cpu/jean-zay-cpu-calculateurs-disques.html#les_sauvegardes). À terme, cette fonctionnalité disparaîtra complètement puisque la nouvelle technologie de système de fichiers parallèle Lustre qui sera mise en place ne la fournira pas.

  • Taille maximale par fichier sur les espaces disques de Jean Zay

Pour des raisons techniques, nous allons prochainement limiter la taille maximale par fichier à 10 Tio sur les espaces disques de Jean Zay. Nous vous invitons à vous conformer dès à présent à cette limite.

  • Inscriptions pour la 2ème Journée Deep Learning pour la Science

La deuxième édition de la Journée Deep Learning pour la Science (JDLS) aura lieu le 24 mai 2024 au siège du CNRS à Paris. Si vous souhaitez venir en présentiel, il faut vous inscrire dès maintenant sur https://jdls-2024.sciencesconf.org/. Vous pouvez également venir présenter un poster et/ou participer à la session "Mon projet en 3 minutes", il suffit de nous contacter à jdls@idris.fr ou de déposer directement votre candidature sur https://jdls-2024.sciencesconf.org/submission/submit. La journée sera retransmise en live sur la chaîne YouTube de Fidle (https://www.youtube.com/@CNRS-FIDLE). Si vous souhaitez seulement suivre le live à distance, aucune inscription n'est demandée.

  • Formations IDRIS

Pensez à vous inscrire dès maintenant aux formations IDRIS planifiées jusqu'à fin juin :

  • C++ Scientifique Moderne, du 3 au 5 juin
  • Workshop Jean Zay, les 6 et 7 juin
  • Deep Learning Optimisé sur Jean Zay, du 11 au 14 juin
  • OpenMP / MPI, du 17 au 21 juin
  • Introduction à OpenACC et OpenMP GPU, du 26 au 28 juin.

Pour plus d'informations sur le catalogue 2024 des formations de l'IDRIS et les modalités d'inscription : http://www.idris.fr/formations/catalogue.html


Flash Info n°2024-09

IDRIS
IDRIS
Computing center

Réduction transitoire de la capacité de stockage du SCRATCH

[English version below]

Bonjour,

Comme annoncé récemment, l'arrivée de l'extension H100 de Jean Zay s'accompagnera du renouvellement de ses espaces de stockage. Afin de préparer cette évolution technique, la capacité de l'espace SCRATCH (3,4 Pio) a dû être réduite d'environ un tiers ce qui correspond approximativement à un retour à la capacité disponible avant la dernière extension de cet espace courant 2023. Cette situation perdurera jusqu'à la mise en service du nouvel espace SCRATCH de 4,6 Pio, au plus tard en septembre 2024.

Nous vous invitons donc à faire régulièrement du ménage dans votre SCRATCH lorsque cela est possible. Vous pouvez par exemple supprimer les données dont vous n'avez plus besoin ou déplacer celles que vous n'allez pas réutiliser prochainement vers les espaces WORK ou STORE (en regroupant les fichiers dans des archives "tar" si nécessaire, sans dépasser 10 Tio par fichier).

Bien cordialement, L'équipe assistance de l'IDRIS


Hello,

As recently announced, the new H100 extension of Jean Zay will be accompanied by the renewal of Jean Zay's storage spaces. In order to prepare this technical change, the capacity of the SCRATCH filesystem (3.4 PiB) had to be reduced by about a third which corresponds approximately to going back to the capacity available before the latest extension of that disk space in 2023. The new SCRATCH filesystem of 4.6 PiB will be available in September 2024 at the latest.

We invite you to clean up your SCRATCH space regularly whenever possible. You can for example remove unused data or move data that you will not use in the near future to the WORK or STORE storage spaces (regrouping files in "tar" archives when necessary, without going over 10 TiB per file).

Best regards, The IDRIS user support team

Flash Info n°2024-08

IDRIS
IDRIS
Computing center

Sommaire : Inscriptions ouvertes pour la 2de Journée Deep Learning pour la Science Formations IDRIS

  • Inscriptions ouvertes pour la 2de Journée Deep Learning pour la Science

La deuxième édition de la Journée Deep Learning pour la Science (JDLS) aura lieu le 24 mai 2024 au siège du CNRS à Paris. Si vous souhaitez venir en présentiel, il faut vous inscrire dès maintenant sur https://jdls-2024.sciencesconf.org/. Vous pouvez également venir présenter un poster et/ou participer à la session "Mon projet en 3 minutes", il suffit de nous contacter à jdls@idris.fr ou de déposer directement votre candidature sur https://jdls-2024.sciencesconf.org/submission/submit. La journée sera retransmise en live sur la chaîne YouTube de Fidle (https://www.youtube.com/@CNRS-FIDLE). Si vous souhaitez seulement suivre le live à distance, aucune inscription n'est demandée.

  • Formations IDRIS

Pensez à vous inscrire dès maintenant aux formations IDRIS planifiées jusqu'à fin juin :

  • Programmation Hybride MPI/OpenMP, les 30 et 31 mai
  • C++ Scientifique Moderne, du 3 au 5 juin
  • Workshop Jean Zay, les 6 et 7 juin
  • Deep Learning Optimisé sur Jean Zay, du 11 au 14 juin
  • OpenMP / MPI, du 17 au 21 juin
  • Introduction à OpenACC et OpenMP GPU, du 26 au 28 juin.

Pour plus d'informations sur le catalogue 2024 des formations de l'IDRIS et les modalités d'inscription : http://www.idris.fr/formations/catalogue.html


Flash Info n°2024-07

IDRIS
IDRIS
Computing center

Sommaire : Panoram'IA : rendez-vous demain, vendredi 5 avril à 10h Formations IDRIS

  • Panoram'IA : rendez-vous demain, vendredi 5 avril à 10h

L'assistance de l'IDRIS vous propose demain matin, vendredi 05/04 à 10h, "Panoram'IA" : le magazine vidéo mensuel et en direct qui aborde l'actualité scientifique et technique de l'IA. Au programme de cette session : les brèves de l'IA, optimisation mémoire sur GPU pour les LLMs, alignement de modèle et notre sélection de papier avec Papers Storm. Le direct ainsi que les rediffusions sont disponibles sur notre chaîne Youtube "Un oeil sur l'IDRIS" : https://www.youtube.com/@idriscnrs. Les sessions suivantes auront lieu les 03/05/2024 et 21/06/2024.

  • Formations IDRIS

Pensez à vous inscrire dès maintenant aux formations IDRIS planifiées jusqu'à fin juin :

  • Programmation Hybride MPI/OpenMP, les 30 et 31 mai
  • C++ Scientifique Moderne, du 3 au 5 juin
  • Workshop Jean Zay, les 6 et 7 juin
  • Deep Learning Optimisé sur Jean Zay, du 11 au 14 juin
  • OpenMP / MPI, du 17 au 21 juin
  • Introduction à OpenACC et OpenMP GPU, du 26 au 28 juin.

Pour plus d'informations sur le catalogue 2024 des formations de l'IDRIS et les modalités d'inscription : http://www.idris.fr/formations/catalogue.html