Identifiant du document |
lyon2.1999.cmichel |
Code de l'institution |
lyon2 |
Année |
1999 |
Auteurs |
MICHEL Christine |
Titre |
Evaluation de systèmes de recherche d’information, comportant une fonctionnalité de filtrage, par des mesures endogènes — Réalisation et évaluation d’un prototype de système de recherche d’information avec filtre selon les profils des utilisateurs |
Titre autres langues |
en |
Evaluating Information Retrieval Systems, including a filtering feature, through measures endogenous — Implementing and evaluating a prototype search system with filter information according to user profiles |
|
Membres du jury |
PONCET Pierre --- FONDIN Hubert --- FLUHR Christian --- ROUAULT Jacques --- TETU Jean-françois --- LAFOUGE Thierry |
Directeurs de thèses |
PONCET Pierre |
Diplome |
Doctorat Nouveau Régime |
Etablissement |
Université Lumière Lyon 2 |
Ecole Doctorale |
Education, Cognition, Langages, Interactions, Psychologie |
Factulté |
Institut de la Communication |
Discipline |
Sciences de l'information et de la communication |
Date de soutenance |
1999-01-06 |
Type de document |
Thèse de Doctorat Nouveau Régime |
Résumés |
fr |
Dans la plupart des protocoles, les mesures permettant l'évaluation des systèmes de recherche d'information sont construites à partir des jugements de valeurs exprimés par des utilisateurs ou par des experts. Ces protocoles sont souvent critiqués du fait de la difficulté de leur mise en oeuvre. Dans ce travail, nous proposons un protocole d'évaluation s'appuyant sur des mesures endogènes, c'est à dire des mesures construites uniquement à partir des données produites par le système. Ce type de protocole permet de faire des évaluations technologiques des systèmes. Par exemple, nous analysons la méthode de recherche d'information en comparant les réponses produites par le système lorsque plusieurs stratégies de recherche sont disponibles. Pour comparer d'une manière fine ces ensembles nous proposons des mesures de proximité ordonnée. Celles-ci sont plus poussées que les mesures classiques utilisées en sciences de l'information (comme le coefficient de Jaccard, le cosinus ou le coefficient de Dice) puisqu'elles permettent de prendre en compte l'ordre de présentation des documents. Nous avons mené une étude expérimentale et proposons des mesures de rappel et de précision ordonnées. Ce travail s'inscrit dans le cadre du projet Profil-Doc, nous avons construit un prototype de système de recherche d'information s'appuyant sur le système SPIRIT W3. Ce prototype a la particularité de filtrer différemment les parties du discours des documents réponses selon l'usage qui en sera fait par des utilisateurs ayant des profils distincts. La base de données est en texte intégral, l'interrogation s'effectue en langue naturelle via Internet. Nous avons analysé ce prototype avec le protocole précédent et proposons un certain nombre de résultats permettant d'améliorer le système Profil-Doc. |
en |
Usually, evaluations of information systems are made using measurements based on a judgement of value expressed by users or experts. These protocols are often criticised because of the difficulty of their implementation. In this work, we propose to give technological evaluations of the systems by using new kind of measures and protocol of evaluation based only on the data produced by the system. To compare in a fine way sets of results' documents we put forward measures of ordered proximity. These one are better than the traditional measures used in information science (like the Jaccard's coefficient, the cosine or the Dice's coefficient) because they take in account the rank of presentation of documents. We have made an experimental study and put forward measures of ordered recall and precision. Within the framework of the project Profil-Doc, we built a prototype of information retrieval system using the system SPIRIT W3. This prototype is made to permit a personalisation of the filtering regards to the user's profile. He may expressed his request in natural language on a data base in plain text accessible by Internet. We've analysed this prototype with the precedent protocol and results are use to improve the system Profil-Doc. |
|
Mots-clés |
fr |
recherche de l'information ;informatique ;evaluation |
|
Editeur |
CyberDocs |
Format |
text/xml |
Langue |
fr |
Copyright |
Copyright MICHEL Christine et Université Lumière - Lyon 2 - 1999.Ce document est protégé en vertu de la loi du droit d'auteur. |
Diffusion |
[internet] |
Identifier |
http://theses.univ-lyon2.fr/documents/lyon2/1999/cmichel |
Extent |
6766 |