Scribd
Importer
76 vues2 pages

Série3 RI Evaluation OL

Ce document présente trois exercices d'évaluation de systèmes de recherche d'information. Le premier exercice pose des questions sur les concepts d'évaluation comme la précision, le rappel et les mesures F et E. Le deuxième exercice demande de calculer ces mesures pour un jeu de données. Le troisième exercice demande de tracer les courbes rappel-précision pour comparer deux systèmes.

Transféré par

Sou Miaa
Copyright
© © All Rights Reserved
Nous prenons très au sérieux les droits relatifs au contenu. Si vous pensez qu’il s’agit de votre contenu, signalez une atteinte au droit d’auteur ici.
Formats disponibles
Téléchargez aux formats PDF, TXT ou lisez en ligne sur Scribd
76 vues2 pages

Série3 RI Evaluation OL

Ce document présente trois exercices d'évaluation de systèmes de recherche d'information. Le premier exercice pose des questions sur les concepts d'évaluation comme la précision, le rappel et les mesures F et E. Le deuxième exercice demande de calculer ces mesures pour un jeu de données. Le troisième exercice demande de tracer les courbes rappel-précision pour comparer deux systèmes.

Transféré par

Sou Miaa
Copyright
© © All Rights Reserved
Nous prenons très au sérieux les droits relatifs au contenu. Si vous pensez qu’il s’agit de votre contenu, signalez une atteinte au droit d’auteur ici.
Formats disponibles
Téléchargez aux formats PDF, TXT ou lisez en ligne sur Scribd
Vous êtes sur la page 1/ 2

Université Saad Dahlab Blida 1 3ème Année Licence (ISIL) /INF

Faculté des Sciences Recherche d’information

Série d’exercices N° 3
Evaluation des systèmes de Recherche d’Information

Exercice 1 (questions de cours) :

1. Comment évaluer un système de recherche d’information ?


2. Quels sont les composants d’un environnement de test ?
3. Quelle est la différence entre le Rappel et la Précision ?
4. Quelle est la différence entre la F-mesure et la E-mesure ?

Exercice 2 :

Soit les similarités (RSV) pour les documents suivants par rapport à une requête Q dans un
système de recherche d’information :

Documents Documents pertinents selon RSV (D,Q)


l’environnement de test
D1 x 0.45
D2 x 0
D3 x 0.60
D4 x 0
D5 x 0.55
D6 x 0.40
D7 0.35
D8 0
D9 0.48
D10 0.25

Calculer pour ce système :


1- La F-mesure.
2- La précision@5.
3- La R-précision.

Exercice 3 :

Nous souhaitons ici évaluer les réponses d’un système de recherche d’information SRI1.
Supposons que pour une requête Q, le système de recherche d'information SRI1 renvoie les
réponses suivantes:

Classement document
1 D88
2 D89
3 D76
4 D90
5 D86
6 D92

1/2
Université Saad Dahlab Blida 1 3ème Année Licence (ISIL) /INF
Faculté des Sciences Recherche d’information

7 D84
8 D78
9 D91
10 D72
11 D103
12 D93
13 D73
14 D190

Les documents pertinents pour Q selon l’environnement de test sont : D72, D88, D89, D90,
D92.

1- Définir la courbe de rappel/précision du système SRI1 pour Q.

Nous voulons comparer SRI1 à un deuxième système de recherche d'information SRI2. Ce


dernier a pour tableau de rappel/précision pour la requête Q :

Rappel Précision
0.0 0.92
0.1 0.88
0.2 0.86
0.3 0.84
0.4 0.80
0.5 0.75
0.6 0.72
0.7 0.70
0.8 0.65
0.9 0.63
1.0 0.61

2- Tracer les courbes rappel/précision de SRI1 et SRI2 sur la même figure.


3- Analyser les résultats de cette évaluation.

2/2

Vous aimerez peut-être aussi