Année 2009/2010
Programme
Esperance conditionelle.
Chaînes de Markov.
Martingales.
Bibliographie conseillée
D. Williams, Probability with martingales , Cambridge.
P.Bremaud, Introduction aux probabilités. Modélisation des phénomènes aléatoires, Springer-verlag, New-York, 1984.
M. Benaïm, N. El Karoui. Promenade aleéatoire, Editions Ecole Polytechnique, 2005.
J.R.Norris. Markov chains, Cambridge University Press, 1997
P. Baldi, L. Mazliak, P. Priouret, Martingales et chaînes de Markov (Exercices corrigés) , Hermann
J.Neveu. Martingales à temps discret, Masson, Paris, 1972
R.Durrett. Probability: Theory and Examples, Wadsworth and Brooks, Pacific Grove, 1991
M.Cottrel, Ch.Duhamel, V.Genon-Catalot. Exercices de Probabilités, Berlin, Paris, 1980
Journal
[24/9, 8h30, Amphi 1] Introduction du cours. Pré-requis. Sous-tribus. L'espérance conditionnelle.
[30/9, 8h30, Amphi 1] Definition et proprietés de l'espérance conditionnelle.
[7/10, 8h30, Amphi 1] Chaînes de Markov, definition, matrice de transition et loi.
[14/10, 8h30, Amphi 1] Equation de Chapman-Kolmogorov, classification des etats.
[21/10, 8h30, Amphi 1] Recurrence et transience, regeneration.
[28/10, 8h30, Amphi 1] Recurrence dans les chaînes finies, probabilités stationnaires, existence pour les chaînes finies.
[4/11, 8h30, Amphi 1] Probabilités reversibles, unicité de la probabilité invariante pour les chaînes irreductibles. Excursions, existence des probabilités invariantes pour les chaînes recurrentes positives, relation entre temps moyen de retour et probas invariantes.
[25/11, 8h30, Amphi 1] Preuve de l'existence de mesure invariantes associées aux etats recurrents, theoreme ergodique pour les chaînes irreductibles et recurrentes positives.
[2/12, 8h30, Amphi 1] Fin de la preuve du theoreme ergodique, Convergence à l'equilibre.
[9/12, 8h30, Amphi 1] Estimation de la vitesse de convergence à l'equilibre, chaînes fortement irreductibles, aperiodicité.
[16/12, 8h30, Amphi 1] Filtrations. Martingales (sur- & sous-). Decomposition de Doob. Variation quadratique. Inegalité de Doob dans L²
[6/1, 8h30, Amphi 1] Théorèmes de convergence des martingales. Convergence L². Theoreme de convergence de Doob.
[13/1, 8h30, Amphi 1] Preuve du theoreme de convergence de Doob. Théorème d'arret de Doob.
Notes de cours et TDs
Poly 1. Esperance conditionelle (PDF)
Poly 2. Chaînes de Markov (PDF)
Poly 3. Théoremes limites pour les chaînes de Markov (PDF)
Poly 4. Martingales (PDF)
TD1. Esperance conditionelle. (PDF)
TD2. Chaînes de Markov I. (PDF)
TD3. Chaînes de Markov II. (PDF)
TD4. Chaînes de Markov III. (PDF)
TD5. Chaînes de Markov IV. (PDF)
Exercice sur le couplage des chaînes de Markov (PDF)
TD6. Martingales. (PDF)
Exercices en vue du partiel. (PDF)
Solutions des exercices en vue du partiel. (PDF)
Corrigé TD3 (PDF)
Corrigé TD4 (PDF)
Corrigé TD5 (PDF)
Corrigé TD6 (PDF)
Sujet du Partiel (PDF)
Corrigé du Partiel (PDF)
Exercices en vue de l'examen (PDF)
Solutions des exercices en vue de l'examen. (PDF)
Examen 2009/2010. (PDF)
Corrigé Examen 2009/2010. (PDF)
Comunications
Le partiel est fixé pour vendredi 20 novembre 2009 de 9h30 à 11h00 amphi 8. Il portera sur les arguments traités en cours jusqu'au 4/11 (voire ci-dessous) et sur les exercices des feuilles de TD jusqu'à la numéro 3 incluse.
L'examen est fixé pour mercredi 20 janvier 2010 de 17h00 à 19h00 dans les Amphis 2/3 et 4.
Sujets des années precedentes
2008/2009. Examen (PDF).
Programme
Complements sur l'espérance conditionnelle.
Chaînes de Markov controlées.
Complements sur les temps d'arrêt et sur les martingales. Arrêt optimal en horizon fini. Enveloppe de Snell
Arrêt optimale en horizon infini. Principe d'optimalité. Examples et applications.
Bibliographie conseillée (en anglais)
Les notes de cours de James Norris à Cambridge (url)
Le cours de Ben Van Roy à Stanford (url)
Bertsekas, D. P., Dynamic Programming. Prentice Hall, 1987.
Bertsekas, D. P., Dynamic Programming and Optimal Control, Volumes I and II, Prentice Hall, 1995.
Hocking, L. M., Optimal Control: An introduction to the theory and applications, Oxford 1991.
Ross, S., Introduction to Stochastic Dynamic Programming. Academic Press, 1983.
Journal
[25/9, 15h30, A305] Rapples sur l'espace L².
[1/10, 15h30, A305] Existence de l'espérance conditionnelle et quelques proprietés.
[8/10, 15h30, A305] Temps d'arrêt, tribu d'un temps d'arrêt, Identité de Wald et application à la ruine du joueur.
[15/10, 15h30, A305] Fin de l'exo sur la ruine du joueur. Proprieté de Markov forte.
[22/10, 15h30, A305] Principe de reflection.
[22/10, 17h00, B232] Chaîne de Markov controlées. Principe d'optimalite et equation de Bellman.
[29/10, 15h30, A305] Preuve du principe d'optimalite.
[5/11, 15h30, A305] Contrôle homogene et en horizon fini.
[26/11, 15h30, A305] Contrôle en horizon infini: cas des gains positifs.
[3/12, 15h30, A305] Contrôle en horizon infini: cas des coûts actualisés.
[10/12, 15h30, A305] Contrôle en horizon infini: cas des coûts positifs.
[17/12, 15h30, A305] Temps d'arret et structure de martingale, enveloppe de Snell, Arrêt optimal.
[7/1, 15h30, A305] Arrêt optimal, cas markovien et independant.
Notes de cours et TDs
Poly 1. Complements sur l'esperance conditionnelle. (PDF)
Poly 2. Temps d'arrêt, identité de Wald et propriété de Markov forte. (PDF)
Poly 3. Chaînes de Markov contrôlées. (PDF)
Poly 4. Arrêt optimal. (PDF)
TD1. Esperance conditionelle. (PDF)
TD2. Temps d'arrêt et propriété de Markov forte. (PDF)
TD3. Chaînes de Markov contrôlées. (PDF)
TD4. Chaînes de Markov contrôlées (II). (PDF)
TD5. Arrêt optimal. (PDF)
Corrigé TD5. (PDF)
Sujet du Partiel (PDF)
Corrigé du Partiel (PDF)
Exercices en vue de l'examen (PDF)
Comunications
Le partiel est fixé pour vendredi 20 novembre 2009 de 13h00 à 14h30 en salle C516.
L'examen est fixé pour vendredi 22 janvier 2010 de 13h00 à 15h00 en Amphi 5.
Programme
Théorème de Cramérs en R et Rd
Generalitées sur les grandes deviations
Lien entre grandes deviations et Gamma-convergence
Théorème de Sanov, conditionnement Gibbsien, champ moyen
Grandes deviation pour les processus, theoreme de Mogulskii
Théorème de Schilder et grandes deviations pour les EDS
Bibliographie conseillée (en anglais)
Dembo, Zeitouni, Large Deviation techniques and Applications, Springer Verlag, 1993
J.A. Bucklew, Large Deviation Techniques in Decision, Simulation, and Estimation , Wiley Series in Probability and Mathematical Statistics. Applied Probability and Statistics, New York, 1990 , ISBN 047161856X
Liens
Le cours de Dembo sur les GD (URL)
Le cours de Tsirelson sur les GD (URL)
Les notes de C. Shalizi sur les GD (URL)
La page web de J.A. Bucklew (URL)
Le cours de A. Puhalskii sur les GD (PDF)
Journal
[7/1/10, 9h00-12h00, Salle F, 3 heures] Introdution aux problematiques liées aux evenements rares. Grandes deviation pour la moyenne empirique et théoreme de Cramér.
[14/1, 8h30-11h45, B516, 3 heures] Théorème de Cramér
[21/1, 9h00-12h00, Salle F, 3 heures] Sous-suites rares dans les marches aléatoires. LD-convergence.
[28/1, 9h00-12h00, B217, 3 heures] LD-convergence et generalités sur les grandes deviations, théorème de Gärtner-Ellis et théorème de Cramer en Rd.
[19/2, 13h45-17h00, Salle B212 et B217, 3 heures] Preuve du théorème de Gärtner-Ellis, Definition et propriétés de l'entropie relative, Gamma-convergence des fonctionelles variationelles.
[25/2, 13h45-17h00, Salle B212, 3 heures] Equivalence entre grandes deviations et gamma-convergence de l'entropie relative renormalisée. Théorème de Dawson-Gartnër.
[15/3, 13h45-17h00, Salle B518, 3 heures ]
Notes de cours (en anglais)
Poly 1. Théoreme de Cramér sur R et application. (PDF)
Poly 2. Preliminaires topologiques. (PDF)
Poly 3. Principes des grandes deviations. (PDF)
Poly 4. Théoreme de Sanov et applications. (PDF)
Exams (en anglais)
Remarques sur l'examen (PDF)
Text 1. Random walks I (PDF)
Text 2. Random walks II (PDF)
Text 3. Curie-Weiss model (PDF)
Text 4. Brownian motion (PDF)
Text 5. Gibbsian conditioning (PDF)
Comunications
Cours de l'année derniere (Lien)
Chargées de TD: Paola Siri (TD1). Fadoua Balabdaoui-Mohr (TD2,TD3). Massimiliano Gubinelli (TD4). Milton Jara (TD5). Anne-Marie Boussion (TD6).
Programme
Rappels sûr les integrales multiples et le distributions des vecteurs aléatoires.
Vecteurs aléatoires gaussiens. Lois Gamma, Beta, Khi-deux, Student.
Convergence et theoremes limites. Inegalités de Tchebichev et Hölder. Convergence en loi. Convergence en probabilité. loi faible des grands nombres. Convergence presque sûre. Loi forte des grands nombres. Convergence en moyenne p-eme. Theoreme Central Limite. La delta-méthode.
Estimation ponctuelle. Modéle parametrique. Estimateurs ponctuels. Exhaustivité des stastistiques. Méthodes d'estimation: moments, maximum de vraisemblance.
Estimation par intervalles de confiance.
Journal
[4/2, 10h15, Amphi 4] Amphi annulé. (rattrappé le 18/2)
[11/2, 10h15, Amphi 4] Rappels: integrales multiples et les distributions des vecteurs aléatoires.
[18/2, 10h15, Amphi 4 et 12h00, Amphi 2/3] Rappels: densités marginales, densité conditionnelle, relation entre indépendance, densité jointe et densité conditionnelle, espérance conditionnelle et ses propriétés, covariance et coefficient de corrélation linéaire. Préliminaires sur les vecteurs et les matrices, espérance d'un vecteur. Matrice de covariance et ses propriétés. Fonction caractéristique d'une v.a. réelle et d'un vecteur aléatoire. La fct caractéristique détermine la loi. Fct caractéristique de la loi exponentielle et de la loi gaussienne. Fct caractéristique et indépendance. Combinaisons linéaires des v.a. gaussiennes indépendantes. Définition de vecteurs gaussiens et existence.
[25/2, 10h15, Amphi 4] Fct caractéristique d'un vecteur gaussien. Racine carrée d'une matrice semidefinie positive. Construction d'un vecteur gaussien avec covariance donnée. Densité d'un vecteur Gaussien non degeneré.
[11/3, 10h15, Amphi 4] Preuve de la formule de la densité d'un vecteur Gaussien. Indépendance des composantes decorelées d'un vecteur Gaussien.
[18/3, 10h15, Amphi 4] Lois Gamma, Chi-deux et Student. Définition et premières propriétés de la convergence en loi.
[25/3, 10h15, Amphi 4] Convergence en probabilité. Example. Loi des grandes nombres.Inegalité de Chebichev
[31/3, 8h30, Amphi 4] Preuve de la loi faible des grandes nombres. Convergence presque sûre. Loi forte des grandes nombres.
[ 1/4, 10h15, Amphi 4] Convergence en moyenne p-éme. Liens entre les modes de convergence. Théorème centrale limite.
[ 8/4, 10h15, Amphi 4] Preuve du Théoreme Centrale Limite. Methode delta.
[ 6/5, 17h15, Amphis 2/3] Estimation ponctuelle
[20/5, 10h15, Amphi 4] Statistiques exhaustives
[27/5, 10h15, Amphi 4] Intervalles de confiance
Cours
Poly 1. Rappels et vecteurs aleatoires. (PDF)
Poly 2. Fonction caractéristique et vecteurs Gaussiens. (PDF)
Poly 3. Convergence des variables aléatoires. Loi des grandes nombres et théorème centrale limite. (PDF)
Poly 4. Estimation ponctuelle. (PDF)
Poly 5. Intervalles de confiance. (PDF)
Feuilles de TD et sujets
TD1: Intégrales doubles et couples de variables aléatoires. (PDF)
TD1s: Supplement sur les intégrales doubles. (PDF)
TD2: Vecteurs aléatoires, vecteurs Gaussiens et loi Gamma et Khi-deux. (PDF)
TD3: Vecteurs Gaussiens. (PDF)
TD4: Convergence en loi. (PDF)
Pre-Contrôle continu 1. (PDF)
Premier Contrôle continu. (PDF)
Partiel. (PDF)
TD5: Estimation ponctuelle. (PDF)
TD6: Intervalles de confiance. (PDF)
Deuxieme Contrôle continu. (PDF)