Apprentissage en ligne par renforcement centré utilisateur pour la composition émergente d'applications ambiantes

Les systemes cyber-physiques connectes et ambiants entourent l'utilisateur humain de services mis a sa disposition. Ces services, plus ou moins complexes, doivent etre le plus possible adaptes a ses preferences et a la situation courante. Nous proposons de les construire automatiquement et a la volee par composition de services plus elementaires presents sur le moment dans l'environnement, ceci sans expression prealable des besoins de l'utilisateur. Pour cela, avec la forte variabilite dynamique de l'environnement ambiant et des besoins, ce dernier doit etre sollicite mais a minima. Afin de produire les connaissances necessaires a la composition automatique et en l'absence de donnees initiales, nous definissons une solution d'apprentissage en ligne par renforcement a horizon infini. Cette solution apprend incrementalement de l'utilisateur et pour l'utilisateur. Elle est decentralisee au sein d'un systeme multi-agent charge de l'administration et de la composition des services.