Christophe Jacquet: Research and Teaching

Research >

Research: PhD Thesis

Oportunistic presentation of information to mobile users within the framework of ambient intelligence

Defense

I defended my PhD on December, 14th 2006, at 13.00, at Supélec, in room F3.06.

The jury was be composed of (alphabetically):

Abstract

This research work takes place in the domain of human-computer interaction, and particularly multimodal interaction and ambient intelligence. It aims at specifying a theoretical model and a platform for the design and implementation of mobile users assistance systems. We introduce the KUP model, in which the system's functional core, the users and the presentation devices (screens, loudspeakers, etc.) are represented by logical entities. This model is original because it imposes no spatial nor temporal coupling between information providing by the functional core to the user entity on the one hand, and information presentation by a suitable device on the other hand. Both phases are opportunistic: they happen fortuitously, as (physical) users move around.

When a user is located at proximity of a number of presentation devices, the system must determine which device and which modality shall be used to convey information. First, an incremental algorithm is responsible for choosing a device while abiding by three ergonomic constraints: completeness, stability and display space optimization. Second, a tree-based algorithm selects and instantiates a modality while satisfying users' preferences.

The KUP model and the algorithms have been implemented in the PRIAM platform (PResentation of Information in AMbient Intelligence), which has enabled us to carry out evaluations in mock-up environments. The evaluations have shown that dynamic display systems enable users to look up their information far more quickly than static displays.

Résumé

Sujet en Français : Présentation opportuniste et multimodale d'informations dans le cadre de l'intelligence ambiante.

Ce travail se place dans le domaine de l'interaction homme-machine et en particulier dans celui de la multimodalité et des systèmes ambiants. Il vise à concevoir un modèle théorique et une plate-forme pour la spécification et l'implémentation de services d'assistance à des utilisateurs mobiles. Nous introduisons le modèle KUP, dans lequel le noyau fonctionnel du système, les utilisateurs et les dispositifs de présentation (écrans, haut-parleurs, etc.) sont représentés par des entités logiques. Ce modèle permet un découplage spatial et temporel entre d'une part la fourniture d'une information par le noyau fonctionnel à l'entité utilisateur, et d'autre part, la présentation de cette information par un dispositif adéquat, sur demande de l'entité utilisateur. Ces deux phases sont opportunistes: elles surviennent au gré des déplacements des utilisateurs.

Lorsqu'un utilisateur se trouve à proximité de dispositifs de présentation, il faut déterminer quel dispositif et quelle modalité utiliser. Un premier algorithme, conçu de façon incrémentale, permet de choisir le dispositif tout en respectant trois contraintes ergonomiques: complétude, stabilité, optimisation de l'espace. Un second algorithme permet de sélectionner et d'instancier les modalités, en essayant de donner satisfaction aux utilisateurs concernés.

Le modèle KUP et les algorithmes correspondants ont été implémentés dans la plate-forme PRIAM (PRésentation des Informations dans l'AMbiant), qui a permis de réaliser des évaluations en laboratoire. Celles-ci ont montré que des systèmes d'affichage dynamiques permettent à des utilisateurs de retrouver leurs informations bien plus rapidement que des affichages statiques.

Lire également le résumé long (PDF).

Dissertation

Download my PhD dissertation / mémoire de thèse de Christophe Jacquet (in French, A4 paper, 264 pages).

Schedule and Collaborations

My PhD went on from Fall 2003 to Fall 2006. This research work was carried out both at Supélec and LIMSI-CNRS. I have been working with:

Further Reading