Année 2012/2013
Descriptive du cours
Bibliographie et liens (en anglais)
Journal
Course material (in english)
Journal
Cours de l'année dernière (Lien)
Chargés de TD: Joseph Lehec et François Simenhaus.
Programme
Espérance conditionnelle.
Martingales. Stratégies. Convergence des martingales. Arrêt optionnel.
Chaînes de Markov.
Bibliographie conseillée
D. Williams, Probability with martingales , Cambridge.
P.Bremaud, Introduction aux probabilités. Modélisation des phénomènes aléatoires, Springer-verlag, New-York, 1984.
M. Benaïm, N. El Karoui. Promenade aleéatoire, Editions Ecole Polytechnique, 2005.
J.R.Norris. Markov chains, Cambridge University Press, 1997
P. Baldi, L. Mazliak, P. Priouret, Martingales et chaînes de Markov (Exercices corrigés) , Hermann
J.Neveu. Martingales à temps discret, Masson, Paris, 1972
R.Durrett. Probability: Theory and Examples, Wadsworth and Brooks, Pacific Grove, 1991
M.Cottrel, Ch.Duhamel, V.Genon-Catalot. Exercices de Probabilités, Berlin, Paris, 1980
Le cours de Lalley (link)
Journal
[17/9, 10h15, Amphi 4] Introduction du cours. Pré-requis. Motivation et définition générale de l'espérance conditionnelle.
[24/9, 10h15, Amphi 4] Sous-tribus. Preuve de l'unicité p.s. de l'espérance conditionnelle. Quelques propriétés des l'espérance conditionnelle.
[1/10, 10h15, Amphi 4] Autres propriétés de l'espérance conditionnelle. Quelques exemples. Filtrations. Processus adaptés. Stratégies dans les jeux d'hasard. Introduction aux martingales.
[8/10, 10h15, Amphi 4] Martingales et stratégies.
[15/10, 10h15, Amphi 4] Définition de martingale. Premières propriétés.
[22/10, 10h15, Amphi 4] Transformation de martingales. Théorème d'arret optionnel de Doob.
[29/10, 10h15, Amphi 4] Théorème de convergence des martingales.
[5/11, 10h15, Amphi 4] Encore convergence des martingales. Martingales bornées dans L².
[26/11, 10h15, Amphi 4] Chaînes de Markov. Definition et quelques exemples. Recurrences aléatoires. Matrice de transition. Equation de Chapman-Kolmogorov. Loi de la chaîne de Markov. Calculs de probabilités liées à la chaînes.
[27/11, 12h00, Amphi 4] Probabilité d'atteinte, methode à un pas. Classification des états. Ètats recurrents et transients.
[3/12, 10h15, Amphi 4]
[10/12, 10h15, Amphi 4]
[17/12, 10h15, Amphi 4]
Notes de cours et TDs
Poly 1. Espérance conditionnelle (PDF) []
Poly 2. Martingales, stratégies et arrêt optionnel (PDF) []
Poly 3. Comportement asymptotique des martingales (PDF) []
Poly 4. Chaînes de Markov (PDF) []
TD1. Espérance conditionnelle. (PDF) []
TD2. Martingales, stratégies et arrêt optionnel (PDF) []
TD3. Comportement asymptotique des martingales (PDF) []
TD4. Chaînes de Markov (PDF) []
Sujets des années précédentes
2008/2009. Examen (PDF).
2009/2010. Partiel (PDF). Corrigé Partiel (PDF). Examen (PDF). Rattrapage (PDF).
2010/2011. Partiel (PDF). Corrigé Partiel (PDF). Examen (PDF). Rattrapage (PDF).
2011/2012. Partiel (PDF). Corrigé Partiel (PDF). Examen (PDF). Rattrapage (PDF).
Programme
Compléments sur l'espérance conditionnelle.
Chaînes de Markov contrôlées.
Compléments sur les temps d'arrêt et sur les martingales. Arrêt optimal en horizon fini. Enveloppe de Snell
Arrêt optimale en horizon infini. Principe d'optimalité. Exemples et applications.
Bibliographie conseillée (en anglais)
Les notes de cours de James Norris à Cambridge (url)
Le cours de Ben Van Roy à Stanford (url)
Bertsekas, D. P., Dynamic Programming. Prentice Hall, 1987.
Bertsekas, D. P., Dynamic Programming and Optimal Control, Volumes I and II, Prentice Hall, 1995.
Hocking, L. M., Optimal Control: An introduction to the theory and applications, Oxford 1991.
Ross, S., Introduction to Stochastic Dynamic Programming. Academic Press, 1983.
Notes de cours et TDs
Poly 1. Compléments sur l'espérance conditionnelle (PDF) []
Poly 3. Arrêt optimal en horizon fini. (PDF) []
Poly 4. Chaînes de Markov controlées. (PDF) []
TD1. Compléments sur l'espérance conditionnelle. (PDF) []
TD2. Arrêt optimal en horizon fini. (PDF) []
TD3. Integrabilité uniforme. (PDF) []
TD4. Chaînes de Markov controlées. (PDF) []
Sujets des années précédentes