Grub : une grille de calcul pour rattraper Google ?

Le grid computing s'attaque aux outils de recherche. Editeur d'un guide de sites web, la société Looksmart dévoile Grub, un projet d'indexation du web exploitant la bonne volonté des internautes dans le cadre d'une grille de calcul (grid computing).

Comme pour SETI@Home, le programme de recherche de vie extra-terrestre, les internautes sont invités à télécharger un petit logiciel sur leur PC exploitant, en tâche de fond ou sous forme d'économiseur d'écran, les capacités de leur ordinateur, pour chercher des sites internet et constituer un index.

Lancé le 8 avril dernier, cette "indexation distribuée" bénéficie de l'aide d'un millier d'internautes et serait déjà en mesure d'indexer 36 millions de documents par 24 heures, contre environ 150 millions pour Google.

La base de données ainsi constituée sera disponible sur WiseNut.com (propriété de LookSmart) mais les webmasters pourront également librement exploiter l'API de recherche pour enrichir le contenu d'un portail ou d'un site internet (Google propose également cet outil mais le plafonne à 10.000 requêtes par jour pour une utilisation gratuite).

Contrairement aux outils de recherche PtoP comme Kazaa, le projet Grub ne couple donc pas l'interface de recherche à l'installation de son logiciel. En outre, Grub ne s'appuie pas (encore) sur des algorithmes d'indexation, de classement et de recherche, aussi puissants que ceux ayant fait le succès de google.

Reste que ce type d'outil "distribué", exploré il y a quelques années par la jeune pousse tricolore Amoweba pour son outil HumanLinks, pourrait constituer une alternative intéressante pour constituer des outils de recherche capables de faire face à l'impressionnante croissance du web. En effet, on estime que le web compte plusieurs billions (milliers de milliards) de documents et les outils de recherche comme Google ou FAST se limitent pour le moment à moins de 2 milliards d'url indexés...