Il n'a échappé à personne qu'AltaVista a récemment lancé une nouvelle version de son outil de recherche (voir article de ce mois). De façon assez logique, nous avons eu envie de tester ce nouvel outil sous la forme d'un "duel au sommet" avec le site Google pour avoir une idée plus précise des améliorations qui avaient été portées, au nouvel algorithme de pertinence notamment, à cet AltaVista "new look".
L'idée est donc de comparer (comme nous l'avions déjà fait précédemment entre AOL.FR et Google.fr au mois de mai dernier), de façon quantitative, qualitative et fonctionnelle les deux outils pour deux populations différentes d'internautes : les débutants et les confirmés. Nous avons donc à nouveau utilisé la méthodologie qui nous a permis de comparer la plupart des outils de recherche francophones dans une étude sortie en septembre 2001, intitulée "Etude comparative des outils de recherche sur le Web francophone (annuaires et moteurs)" (disponible à l'adresse http://etudes.abondance.com/).
Les différents tests comparatifs mis en place dans le cadre de cette étude (toutes les recherches et comparatifs ont été effectués le mercredi 13 novembre 2002 pour les deux outils) sont les suivants :
- Comparatif quantitatif : combien les index des deux moteurs proposent-ils de pages web en langue française sur certaines requêtes ?
- Syntaxe d'interrogation : quelles sont les possibilités pour affiner au mieux les recherches en utilisant des opérateurs booléens adaptés (+, -, ET, OU, SAUF, etc.) ?
- Présence et qualité d'une zone de recherche avancée permettant de saisir simplement des requêtes plus complexes, sans connaître obligatoirement les différents opérateurs booléens.
- Qualité de la présentation des résultats proposés : lisibilité des résultats, nombre d'informations proposées (taille, date de dernière modification, etc.), fonctionnalités connexes (cache mémoire, etc.).
- Qualité de l'annuaire proposé avec le moteur de recherche.
- Délai d'affichage des pages d'accueil et de résultat : rapidité d'affichage des pages du site : plus l'affichage est rapide, moins on perd de temps (vieux proverbe internaute).
- Pertinence des réponses "moteur" : qualité des 10 premières réponses proposées lorsqu'on saisit une requête.
Pour des raisons pratiques, et notamment pour comparer ce qui est comparable, nous avons pris en compte les résultats fournis par le site Google France (http://www.google.fr/) avec l'option "Pages francophones" cochée, et celles d'AltaVista France (http://fr.altavista.com/) avec l'option "Rechercher : France" pour tester l'index local réservé aux internautes francophones. La difficulté, ici, est que l'option choisie est présentée par défaut sur AltaVista France mais demande à l'internaute de choisir l'option en cliquant sur le bouton radio adéquat sur Google. Il nous a quand même semblé plus important d'effectuer des tests amenant à des résultats réellement comparables plutôt que d'utiliser les pages d'accueil des deux moteurs "telles quelles".
Comparatif quantitatif
Pour ce test, nous avons saisis 30 mots clés sur chacun des deux outils de recherche et noté le nombre de résultats fournis à chaque fois. Les résultats sont les suivants :
Mot clé |
||
| résultats tournoi ATP | 2 064 | 8 200 |
| fabricant amortisseur | 133 | 700 |
| vin colmar | 1 290 | 3 440 |
| nestlé environnement | 1 253 | 4 980 |
| musées paris | 31 185 | 90 300 |
| astérix officiel | 1 134 | 5 910 |
| eye tracking | 166 | 790 |
| photos paris | 219 020 | 650 000 |
| exemples business plan | 510 | 17 700 |
| vidéos humour | 21 131 | 215 000 |
| virus sircam | 1 108 | 3 200 |
| location studio paris | 240 | 52 600 |
| téléphone portable santé | 5 025 | 20 900 |
| MP3 | 264 579 | 984 000 |
| recette couscous | 448 | 12 200 |
| jeux vidéo | 423 763 | 1 380 000 |
| warrants | 7 002 | 105 000 |
| sonneries GSM | 4 564 | 49 700 |
| convertisseur euro | 2 998 | 53 200 |
| hotmail | 58 642 | 493 000 |
| sexe | 409 019 | 5 110 000 |
| cartes voeux | 8 542 | 80 800 |
| fond d'écran | 20 137 | 108 000 |
| webcam | 231 204 | 985 000 |
| immobilier | 686 166 | 722 000 |
| référencement | 176 874 | 199 000 |
| euro | 323 177 | 1 240 000 |
| bourse | 737 231 | 845 000 |
| loftstory | 7 893 | 42 900 |
| yahoo | 106 619 | 1 670 000 |
Pour noter ce critère, nous avons ôté du calcul trois mots clés ou expressions pour lesquels les résultats nous semblaient par trop éloignés sur les deux outils ("location studio paris", "exemples business plan" et "recette couscous") et regardé l'écart moyen entre les deux résultats. Résultat : Google donne, dans tous les cas, des résultats supérieurs en nombre à ceux d'AltaVista, ce qui n'est pas surprenant puisque Google annonce un index global de 3 milliards de pages, alors que celui d'AltaVista dépasse légèrement le milliard. Il est donc logique que cet état de fait se concrétise dans les chiffres d'un test quantitatif. Les résultats quantitatifs de Google sont supérieurs à ceux d'Altavista dans un coefficient allant de 1,15 à 15,66 (moyenne : 7).
Fichier PDF téléchargeable ici (la lettre Réacteur n'était à cette époque-là disponible que sous cette forme).