20 ans du Groupe Calcul

Programme

lundi 03/06

09:30 10:00

La génèse du groupe Calcul

Thierry Dumont, Violaine Louvet

10:00 10:45

Limiter son impact environnemental.

Denis Trystram

Cet exposé part du constat que la consommation du secteur du Numérique est très grande et en forte augmentation. L'impact du secteur est de plus de 4% des émissions de CO2, sans parler des autres impacts négatifs sur l'environnement. Même si dans la communauté, il reste quelques collègues qui sont dans le déni, le gros des troupes a pris conscience que ces impacts sont bien réels. Je développerai une étude récente qui situe le domaine du calcul à haute performance dans cette problématique avec des indicateurs chiffrés. La seconde partie de l'exposé se concentrera sur un tour d'horizon des solutions possibles : une première voie est de chercher à diminuer ces impacts sur les services existants. La question est alors de savoir si ces solutions sont à la hauteur des enjeux. Je discuterai ensuite la position majoritaire de la communauté qui pense que les émissions vont compenser celles des autres domaines. Ceci est très difficile à vérifier et reste spéculatif, mais surtout, les études d’impacts sont partielles et ne comptent que la partie du calcul proprement dite, sans la matérialité ni les effets indirects ou rebonds. Je conclurai en ouvrant sur une autre voie qui promeut un Calcul intégrerant les limites planétaires à tous les stades du cycle de vie des applications, y compris lors de la phase de conception.

10:45 11:15

Pause café

11:15 12:00

Calcul Quantique

Félix Givois, Sabine Mehr

12:00 12:45

Évolution du matériel

Georg Hager

12:45 14:15

Déjeuner

14:15 15:00

Les grands modèles de langages : enjeux théoriques et numériques

Gabriel Peyré

Les grands réseaux de neurones de type "transformers" sont au cœur de la révolution de l'IA générative. La combinaison de ce nouveau type de réseaux avec des techniques de pré-entraînement auto-supervisé a permis, en moins de quatre ans, des percées fantastiques non seulement pour la génération de textes et d'images, mais aussi pour résoudre des tâches difficiles avec très peu de supervision, voire sans supervision du tout. Ces avancées posent de nouvelles questions théoriques pour comprendre la façon dont ces transformers résolvent ces tâches, ce qu'on appelle maintenant "in-context learning" (la capacité de ces réseaux d'implémenter des algorithmes paramétrés par le début d'un texte à compléter). Elles posent aussi d'immenses difficultés en termes de coût de calcul et de mémoire, qui croissent quadratiquement avec la taille des entrées. Enfin, il faut garder à l'esprit que ces succès sont essentiellement cantonnés au langage naturel, pour lequel on peut pré-entraîner ces réseaux à prédire les mots de façon auto-régressive. L'extension de ces techniques à d'autres champs scientifiques, tels que la génomique (que je prendrai en exemple), est un problème ouvert majeur qui va stimuler la recherche dans les années à venir.

15:00 15:45

Avenir des méthodes numériques

Virginie Erlacher

15:45 16:15

Pause café

16:15 17:00

20 ans du Groupe Calcul : retour sur 20 ans de calcul en modélisation du climat

Marie-Alice Foujols, Nikolai Cheplagin

Dans cet exposé, nous reviendrons sur les ressources de calcul utilisées à l’IPSL pour la modélisation du climat ces 20 dernières années et illustrerons les progrès techniques et scientifiques associés. Nous tenterons d’évaluer le coût environnemental de ces simulations. Dans un second temps, nous discuterons de visions des modèles au sein des groupes de modélisation en France et en Allemagne. Nous analyserons l’articulation de facteurs d’ordre technique et sociologique qui étayent les stratégies de futurs développements.