arrow drop search cross

Thesis Defense - Emilie Palagi (I3S)

Évaluation des moteurs de Recherche Exploratoire: Élaboration d'un corps de méthodes centrées utilisateurs, basées sur une modélisation du processus de recherche exploratoire


23/11/2018   :   14h00
Inria Sophia Antipolis Méditerranée
Publication : 23/11/2018
Partager cet article :

Abstract:
Exploratory search systems (ESSs), such as Discovery Hub or 3cixty are search engines that help users to explore a topic of interest. These ESSs differ from classic search engines such as Google, Bing or Yahoo!, which rather support lookup searches. A shortcoming of current evaluation methods is that they cannot be used to determine if an exploratory search system can effectively help the user in performing exploratory search (ES) tasks. One of the reasons is that these methods are not based on a suitable model of exploratory search process, or are too close to lookup process models. The main objective of this thesis is to propose for the designers of ESSs (i.e. computer scientists) user-centered evaluation methods of exploratory search systems based on an “approximate” model of ES process. We propose here: 1) a model of ES we designed from the analysis of ES definitions and existing models of information seeking; 2) the two model-based methods we designed, including: a) an inspe ction method with heuristics (evaluation without users and from the first sketches of the ESS); b) a user testing method with users. The evaluation of the model and the methods have demonstrated their usefulness. We also present two tools facilitating the use of the heuristics of ES: 1) an online evaluation checklist; 2) A Google Chrome plugin “CheXplore”.

Résumé :

Les moteurs de recherche exploratoire (MRE) tels que Discovery Hub ou 3cixty sont des systèmes qui aident les utilisateurs à explorer un domaine d’intérêt pour y faire des découvertes. Ces moteurs se distinguent en cela des moteurs de recherche classiques tels que Google, Bing ou Yahoo!, lesquels supportent plutôt des recherches ciblées ou recherches de consultation (lookup). Si l’on admet que l’évaluation des MRE vise à vérifier si ces derniers aident effectivement les utilisateurs à réaliser leur tâche d’exploration, on constate que les méthodes existantes d’évaluation de ces systèmes ne permettent pas réellement cette vérification. L’une des raisons à cela est que ces méthodes ne reposent pas sur un modèle approprié de la recherche exploratoire (RE) ou qu’elles restent accrochées à un modèle de la recherche de consultation. L’objectif principal de cette thèse est de proposer aux concepteurs de MRE des méthodes d’évaluation centrées utilisateurs reposant sur un modèle « approché » du processus de RE. Nous décrivons ici : 1) le modèle de la RE que nous avons élaboré à partir de l’analyse des définitions de la RE et de modèles existants ; 2) les deux méthodes que nous avons élaborées en nous appuyant sur ce modèle : a) une méthode d’inspection heuristique des interfaces des MRE (réalisable sans utilisateurs et utilisable dès les premières maquettes) ; b) une méthode de test avec utilisateurs. Le modèle et les méthodes ont fait l’objet d’évaluations qui montrent leur pertinence. Nous décrivons également deux outils que nous proposons pour faciliter l’utilisation de nos méthodes : 1) un formulaire en ligne d’inspection heuristique ; 2) l’extension Google Chrome « CheXplore ».

 

Jury:

  • Pierre De Loor (professeur à l'Ecole Nationale des Ingénieurs de Brest - ENIB), reviewer
  • Christian Bastien (professeur à l'université de Lorraine), reviewer
  • Sylvie Catellin (maître de conférence à l'université de Versailles-St Quentin-en-Yvelynes), examiner
  • Fabien Gandon (directeur de recherche à Inria), Thesis supervisor
  • Alain Giboin (chercheur à Inria), co-supervisor
  • Raphaël Troncy (maître de conférence à Eurecom), co-supervisor