L'évolution de la recherche d'information
et du référencement est intimement liée
à l'évolution d'Internet. C'est le développement
d'Internet qui a nécessité l'activité
du référencement. Comme nous ne pouvons décrire
l'évolution de la recherche d'information et du référencement
sans la positionner dans le développement d'Internet,
nous passerons en revue leurs développements parallèlement.
Né aux États-Unis dans les années 1980, l'Internet vient du besoin des militaires de la Défense
Nationale de communiquer entre eux. Par la suite, les universités,
surtout les chercheurs, et différents organismes, en
se basant sur ce qui avait été développé
auparavant, ont élaboré des réseaux de
communication entre eux. C'est surtout la messagerie électronique qui est alors utilisée, ainsi que le transfert des fichiers et de logiciels à condition de connaître exactement le nom du serveur surlequel ils sont stockés, ainsi que leur localisation et leur nom sur ce serveur.
1990
Création des premiers instruments de recherche d'information
par ftp (le protocole File Transfer Protocol) : "Archie", "Wais" (Wide Area Information Service). Il s'agit à ce moment-là de logiciels permettant d'afficher le contenu disponible sur un serveur pour le télécharger sur son ordinateur ou l'afficher à l'écran.
1991
Apparition de "Gopher". C'est le logiciel Gopher qui introduit la notion de "navigation" sur Internet.
1992
Développement du World Wide Web par Tim Burners Lee
Lancement du premier instrument de recherche de textes.
1993
Mise au point du premier robot Web
1994
- Galaxy, le premier annuaire est mis en service.
- Deux étudiants de l'Université de Stanford
lancent Yahoo!
- C'est au tour du Web robot Webcrawler d'entrer en fonction.
- Lycos est lancé et répertorie 54 000 documents.
Les concepteurs de sites et leurs propriétaires commencent
à soumettre leurs sites pour l'indexation sur le
Web.
- Ce sont les premiers balbutiements du référencement.
1995
- Infoseek est dévoilé et devient l'engin
de Netscape.
- Metacrawler offre la possibilité de la métarecherche.
- Six jeunes entrepreneurs lancent Excite.
- Fin 1995, Altavista gagne la faveur populaire par des
fonctionnalités uniques. Les logiciels de soumission
automatique font leur entrée. Peu après, des
concepteurs et des propriétaires de sites en profitent
pour lancer des centaines de soumissions par jour pour tenter
d'accaparer les positions sur les requêtes des moteurs.
Ces derniers contrent ces tentatives de "spamindexing"
en pénalisant ou bannissant ces abuseurs.
- Les concepteurs de sites se rendent compte de l'avantage
d'insérer des mots-clés dans les balises du
code HTML.
- Le référencement prend plus d'importance.
1996
- Inktomi est fondé avec une nouvelle technologie
de compression des données.
- Lancement de Hot Bot, cet engin peut indexer 10 millions
de pages par jour.
- Looksmart voit le jour et propose un annuaire par catégories.
Les webmasters et les développeurs d'outils de recherche
s'affrontent constamment.
- Étudiant l'environnement des moteurs de recherche,
les webmasters inventent de nouvelles méthodes pour
forcer le positionnement et les développeurs d'engins
changent leurs algorithmes de positionnement pour contrer
leurs stratégies.
Haut de la page
1997
- Ask Jeeves inaugure un outil de recherche qui se veut
"user friendly".
- Go To lance une nouvelle méthode de positionnement
: le " pay per click"
- Northern Light, le premier engin de recherche spécialisé
pour l'industrie, voit le jour. Les premiers logiciels de
vérification de positionnement sur les engins de
recherche font leur introduction. Les résultats du
référencement peut être vérifié
facilement par les optimisateurs des sites.
1998
- L'Open Directory project est lancé en juin. À
l'aide de bénévoles, ils créent un
annuaire thématique avec un contrôle de qualité.
- En septembre, deux finissants de Standford lancent Google
qui utilise des algorithmes de positionnement jugeant de
la pertinence et de la popularité d'une page ou d'un
site.
- Également en septembre, est lancé MSN search,
développé par Microsoft.
- Direct Hit introduit une nouvelle technologie qui calcul
la popularité d'un site par le nombre de passages
des internautes sur celui-ci. Les engins de recherche commencent
à intégrer la valeur du contenu et la popularité
d'un site comme facteur de positionnement et le référencement
devient plus complexe.
- Le référencement est devenu une spécialité
qui doit maintenant tenir compte de la pertinence des contenus.
- L'époque de gloire du "spam" commence.
Pour s'accaparer les meilleurs positions, plusieurs n'hésitent
pas à incorporer des milliers de mots-clés
invisibles à leurs pages.
1999
- Au cours de l'année, quelques gros joueurs ajoutent
leur participation. Disney lance Go et NBC crée le
portail NBCi.
- La compagnie norvégienne Fast lance Alltheweb,
le premier engin à atteindre 200 millions de pages
Web. Les moteurs commencent graduellement à contrer
le "spam" par mots invisibles. Ils optent pour
des informations hors sites et qui ne semblent pas à
la portée des concepteurs pour régulariser
le classement.
- La popularité des liens fait son apparition comme
facteur de positionnement mais les spammeurs utiliseront
cette popularité des liens pour poursuivre leur actions.
- C'est la naissance des "linkfarms", des sites
où l'ont peut enregistrer des liens et qui n'existent
que pour créer une fausse popularité et tromper
les outils de recherche.
2000
- La qualité du classement de l'annuaire Open Directory,
qui est disponible à la majorité des engins
de recherche, augmente la pertinence et l'intégrité
des résultats des requêtes.
- Plusieurs engins de recherche optent pour la formule "pay
per click".
- D'autres annuaires et moteurs exigent des frais lors de
la proposition d'un site à l'Indexation. L'intégration
des résultats de l'Open directory force les optimisateurs
de sites à créer des sites avec un meilleur
contenu.
- Des annonceurs comprennent la possibilité d'un
gain de positionnement sur des mots clés difficiles
en adoptant le système "pay per click"
- Les liens qui mènent vers un site sont jugés
selon leur valeur, rendant les "linkfarms" inutiles
et même nuisibles pour le positionnement.
Haut de la page
2001
- La location de positionnement, "sponsors", se
généralise sur les annuaires et les moteurs
de recherche qui deviennent tous des instruments hybrides.
- Beaucoup de mouvements se produisent dans le monde des
moteurs de recherche. Plusieurs ne deviennent que des portails
alimentés par des moteurs plus populaires.
- Ask Jeeves, achète Teoma et ferme Direct Hit, Looksmart
acquière Wisenut, Go To devient Overture et se spécialise
dans le e-business.
- Google fournit ses résultats à plusieurs
autres moteurs qui en deviennent des clones. Overture fait
la même chose. D'autres techniques ont vu le jour
pour fausser les résultats des outils de recherche.
Nous avons vu apparaître les page d'entrée,
"doorway pages", spécialement construites
pour influencer le positionnement sur les moteurs; les sites
mirroirs; le "cloaking", une redirection à
partir du serveur, aussi pour présenter un contenu
différent aux moteurs. Ces derniers ripostent fortement.
2002
- Les moteurs de recherche continuent à évoluer
et deviennent très sophistiqués.
- La compréhension de leur constante évolution
et de leur fonctionnement, qu'ils cachent soigneusement,
devient essentielle pour le positionnement. Le référencement
devient une spécialité complexe où
il faut constamment se ressourcer.
- La promotion d'un site doit maintenant tenir compte de
plusieurs éléments : l'analyse des comportements
de la clientèle, l'analyse de la concurrence, mettre
en œuvre un programme de popularité externe
au site, l'assurance de la fiabilité et de l'acceptation
du site par les outils de recherche et un suivi alerte et
constant.
2003
- Google introduit le système Addwords, une évolution
technologique majeure
- Le référencement payant devient courant
et mieux accepté
- Les avancées technologiques dans d'autres domaines
que le référencement payant stagnent.
- Le monde des outils de recherche connaît des évolutions
économiques importantes : Yahoo rachète Overture,
Fast, Altavista...
- Les outils se concentrent autour de deux grands Google
et Yahoo!
- Les autres survivent grâce à une spécialisation
ou à des innovations technologiques.
- Microsoft fait beaucoup parler de lui avec son projet
d'outil de recherche qui en fera le troisième grand
de la recherche d'information.
- L'évolution constante des outils de recherche (apparition
de nouveaux outils, rachats, fusions, partenariats, innovations
technologiques (souvent pas communiquées au public))
force ainsi les spécialistes en référencement
à mettre beaucoup de temps pour détecter les
variations des algorithmes de pertinence pour le classement
des résultats dans ces outils, qui changent même
après des évolutions à première
vue économiques. Par exemple, le partenariat avec
un nouvel acteur peut impliquer la modification des algorithmes
de positionnement pris en compte sur un outil de recherche.
Si le référenceur ne se tient pas au courant
de ces éventuelles évolutions les sites dont
il assure le référencement peuvent disparaître
des premières pages de résultats sans explication,
avec toutes les conséquences professionnelles que
cela implique. Pour rester compétitifs et ne pas
prendre de risques professionnels (dont un autre exemple
est le fait qu’une technique admise à une certaine
période peut devenir interdite peu de temps après),
les référenceurs se doivent ainsi de faire
une veille permanente.
2004 - 2005 - 2006 - 2007 ....
On assiste à l'explosion de la vente de mots clés, de plus en plus de domaines sont touchés et le marché génère des millions de dollars. Un grand évènement a été l'introduction en bourse de Google en 2005 dont les actions se sont vite envolées.
Parallèlement on assiste à un perfectionnement dans les techniques d'optimisation de pages pour obtenir un meilleur positionnement sur les pages de résultats des moteurs de recherche, ce qui fausse souvent la pertinence des résultats. Les outils de recherche sont ainsi amenés dans une course sans fin pour améliorer les résultats de recherche et pour contrer les techniques des référenceurs.
Les outils de recherche continueront très
certainement à innover. Ils porteront leur développement
vers une indexation plus efficace des contenus dynamiques
et à améliorer leur capacité à
une indexation plus profonde et sémantique des sites.
Ils devront améliorer leur capacité et leur
rapidité à enregistrer de nouvelles données
tout en améliorant la qualité des résultats.
Une autre évolution attendue en 2007 est la réponse européenne aux moteurs de recherche à majorité américains.
Haut de la page
Module suivant : Les
limites de la recherche d'information