Stéphane Mallat Collège de France Science des données Année 2023-2024 Séminaire - Francis Bach : Une vision alternative des modèles de diffusion par débruitage
Stéphane Mallat Collège de France Science des données Année 2023-2024 08 - Apprentissage et génération par échantillonnage aléatoire
Stéphane Mallat Collège de France Science des données Année 2023-2024 Séminaire - Christian Robert : Calculs bayésiens approximés (ABC) : d'un substitut élémentaire à une nouvelle forme d'inférence
Stéphane Mallat Collège de France Science des données Année 2023-2024 07 - Apprentissage et génération par échantillonnage aléatoire
Stéphane Mallat Collège de France Science des données Année 2023-2024 Séminaire - Randal Douc : Échantillonnage par distributions auxiliaires : de la téléportation à l'échantillonnage d'importance par chaîne de Markov
Stéphane Mallat Collège de France Science des données Année 2023-2024 06 - Apprentissage et génération par échantillonnage aléatoire
Stéphane Mallat Collège de France Science des données Année 2023-2024 Séminaire - Michèle Sebag : Modèles causaux : les modèles génératifs en support à des interventions
Stéphane Mallat Collège de France Science des données Année 2023-2024 05 - Apprentissage et génération par échantillonnage aléatoire
Stéphane Mallat Collège de France Science des données Année 2023-2024 Séminaire - Marylou Gabrié : Modèles génératifs pour la simulation de systèmes à l'équilibre
Stéphane Mallat Collège de France Science des données Année 2023-2024 04 - Apprentissage et génération par échantillonnage aléatoire
Stéphane Mallat Collège de France Science des données Année 2023-2024 Séminaire - Stéphane Mallat : Présentations de gagnants des challenges 2023
Stéphane Mallat Collège de France Science des données Année 2023-2024 03 - Apprentissage et génération par échantillonnage aléatoire
Stéphane Mallat Collège de France Science des données Année 2023-2024 Séminaire - Stéphane Mallat : Apprentissage et génération par échantillonnage aléatoire : Challenges de données 2
Stéphane Mallat Collège de France Science des données Année 2023-2024 02 - Apprentissage et génération par échantillonnage aléatoire
Stéphane Mallat Collège de France Science des données Année 2023-2024 Séminaire - Stéphane Mallat : Apprentissage et génération par échantillonnage aléatoire : Challenges de données 1
Stéphane Mallat Collège de France Science des données Année 2023-2024 01 - Apprentissage et génération par échantillonnage aléatoire
Stéphane Mallat Collège de France Science des données Année 2022-2023 Modèles, information et physique statistique Séminaire - Marc Mézard : Physique statistique et inférence : le défi des données structurées Les cinq dernières décennies ont vu la construction d'une nouvelle branche de physique statistique qui étudie les systèmes fortement désordonnés. Partant de l'étude des verres de spin, ce champ s'est étendu et s'est intéressé à des systèmes complexes dans différentes branches de la science, allant de l'informatique à la biologie en passant par la théorie de l'information. Quatre obstacles principaux ont dû être surmontés pour développer la théorie des systèmes désordonnés en très grande dimension : étudier des ensembles statistiques d'échantillons, analyser quantitativement le désordre microscopique, explorer des paysages d'énergie complexes, comprendre leurs liens avec les propriétés dynamiques. Cet exposé proposera tout d'abord une vision synthétique de ces développements. Il décrira ensuite le nouveau défi posé par l'application de ces méthodes en apprentissage machine, celle du désordre structuré.
Stéphane Mallat Collège de France Science des données Année 2022-2023 Modèles, information et physique statistique Le cours introduit les outils mathématiques permettant de modéliser des données en grande dimension, en lien avec la physique statistique et la théorie de l'information. La physique statistique montre que les lois macroscopiques résultent de la statistique des interactions de particules microscopiques. La théorie de l'information relie cette perspective avec la modélisation de données, à travers les notions d'entropie, d'énergie de Gibbs et de dépendances locales. Les applications concernent l'inférence de modèles, la génération de nouvelles données ou la compression, ainsi que la résolution de problèmes inverses.
Stéphane Mallat Collège de France Science des données Année 2022-2023 Modèles, information et physique statistique Séminaire - Erwan Allys : Modélisation et séparation statistiques de composantes en astrophysique Un des défis de l'astrophysique et de la cosmologie est d'étudier des processus non linéaires complexes à partir d'un nombre souvent limité d'observations multicomposantes. Cette tâche est rendue d'autant plus difficile que la modélisation physique de ces processus n'est pas toujours achevée, ce qui implique de ne reposer que sur les observations disponibles, sans étape d'entraînement préalable. Dans ce séminaire, on étudiera comment construire des modèles performants en basse dimension prenant en compte le caractère physique et la régularité des processus étudiés. Ces modèles de maximum d'entropie, construit à partir de représentations de type scattering transforms, peuvent être construits directement à partir des données observationnelles. On discutera ensuite comment ces outils permettent de développer de nouveaux types de séparations de composantes, permettant notamment d'estimer les statistiques, et donc de construire un modèle, de processus inconnus à partir d'observations multicomposantes.
Stéphane Mallat Collège de France Science des données Année 2022-2023 Modèles, information et physique statistique Le cours introduit les outils mathématiques permettant de modéliser des données en grande dimension, en lien avec la physique statistique et la théorie de l'information. La physique statistique montre que les lois macroscopiques résultent de la statistique des interactions de particules microscopiques. La théorie de l'information relie cette perspective avec la modélisation de données, à travers les notions d'entropie, d'énergie de Gibbs et de dépendances locales. Les applications concernent l'inférence de modèles, la génération de nouvelles données ou la compression, ainsi que la résolution de problèmes inverses.
Stéphane Mallat Collège de France Science des données Année 2022-2023 Modèles, information et physique statistique Séminaire - Valentin De Bortoli : Synthèse d'images par maximum d'entropie Ces dernières années ont vu l'essor des techniques basées sur les réseaux de neurones pour la synthèse d'images. Ces méthodes reposent le plus souvent sur la minimisation d'une fonction, pour laquelle les minimiseurs sont supposés être les solutions du problème de synthèse. Dans cet exposé, nous étudions, à la fois théoriquement et expérimentalement, un autre cadre pour aborder ce problème en utilisant un schéma d'échantillonnage / minimisation alterné. Tout d'abord, nous utilisons des résultats de la géométrie de l'information afin de définir un problème de synthèse pour lequel la solution est une distribution d'entropie maximale sous contraintes d'espérance. Les échantillons de cette distribution représentent des images synthétiques. Ensuite, nous nous tournons vers l'analyse de notre méthode et nous montrons, en utilisant des résultats récents de la littérature sur les chaînes de Markov, que son erreur peut être explicitement bornée avec des constantes dépendantes de manière polynomiale de la dimension, même dans le cadre non convexe. Cela inclut le cas où les contraintes sont définies via un réseau de neurones différentiable.
Stéphane Mallat Collège de France Science des données Année 2022-2023 Modèles, information et physique statistique Le cours introduit les outils mathématiques permettant de modéliser des données en grande dimension, en lien avec la physique statistique et la théorie de l'information. La physique statistique montre que les lois macroscopiques résultent de la statistique des interactions de particules microscopiques. La théorie de l'information relie cette perspective avec la modélisation de données, à travers les notions d'entropie, d'énergie de Gibbs et de dépendances locales. Les applications concernent l'inférence de modèles, la génération de nouvelles données ou la compression, ainsi que la résolution de problèmes inverses.
Stéphane Mallat Collège de France Science des données Année 2022-2023 Modèles, information et physique statistique Séminaire - Bruno Loureiro : Physique statistique et réseaux de neurones
Stéphane Mallat Collège de France Science des données Année 2022-2023 Modèles, information et physique statistique Le cours introduit les outils mathématiques permettant de modéliser des données en grande dimension, en lien avec la physique statistique et la théorie de l'information. La physique statistique montre que les lois macroscopiques résultent de la statistique des interactions de particules microscopiques. La théorie de l'information relie cette perspective avec la modélisation de données, à travers les notions d'entropie, d'énergie de Gibbs et de dépendances locales. Les applications concernent l'inférence de modèles, la génération de nouvelles données ou la compression, ainsi que la résolution de problèmes inverses.
Stéphane Mallat Collège de France Science des données Année 2022-2023 Modèles, information et physique statistique Séminaire - Giulio Biroli : Entropie et physique statistique
Stéphane Mallat Collège de France Science des données Année 2022-2023 Modèles, information et physique statistique Le cours introduit les outils mathématiques permettant de modéliser des données en grande dimension, en lien avec la physique statistique et la théorie de l'information. La physique statistique montre que les lois macroscopiques résultent de la statistique des interactions de particules microscopiques. La théorie de l'information relie cette perspective avec la modélisation de données, à travers les notions d'entropie, d'énergie de Gibbs et de dépendances locales. Les applications concernent l'inférence de modèles, la génération de nouvelles données ou la compression, ainsi que la résolution de problèmes inverses.
Stéphane Mallat Collège de France Science des données Année 2022-2023 Modèles, information et physique statistique Séminaire - Modèles, information et physique statistique : Prix des challenges de la saison 2022
Stéphane Mallat Collège de France Science des données Année 2022-2023 Modèles, information et physique statistique Le cours introduit les outils mathématiques permettant de modéliser des données en grande dimension, en lien avec la physique statistique et la théorie de l'information. La physique statistique montre que les lois macroscopiques résultent de la statistique des interactions de particules microscopiques. La théorie de l'information relie cette perspective avec la modélisation de données, à travers les notions d'entropie, d'énergie de Gibbs et de dépendances locales. Les applications concernent l'inférence de modèles, la génération de nouvelles données ou la compression, ainsi que la résolution de problèmes inverses.
Stéphane Mallat Collège de France Science des données Année 2022-2023 Modèles, information et physique statistique Séminaire - Modèles, information et physique statistique : Challenge de données (2)
Stéphane Mallat Collège de France Science des données Année 2022-2023 Modèles, information et physique statistique Le cours introduit les outils mathématiques permettant de modéliser des données en grande dimension, en lien avec la physique statistique et la théorie de l'information. La physique statistique montre que les lois macroscopiques résultent de la statistique des interactions de particules microscopiques. La théorie de l'information relie cette perspective avec la modélisation de données, à travers les notions d'entropie, d'énergie de Gibbs et de dépendances locales. Les applications concernent l'inférence de modèles, la génération de nouvelles données ou la compression, ainsi que la résolution de problèmes inverses.