Dites, le propre d'un moteur de recherche, ce n'est pas de parcourir les sites -- bien sûr, c'est nécessaire
-- mais de permettre des recherches !
Requête-type : "donne-moi toutes les pages qui contiennent le mot "xxxxx"". Et pour traiter ce genre de requêtes, il te faut un index très particulier : un index plein-texte.
Alors avant de te demander comment on peut parcourir les pages Web, demande-toi comment on peut retrouver un document à partir d'un des mots qu'il contient. Et pour alimenter ton index, tu peux déjà utiliser des fichiers texte tout bêtes !
Une fois que tu sauras faire ça, tu pourras ajouter un outil de filtrage des balises dans le cas des fichiers HTML. Et après seulement, tu pourras réfléchir à comment on peut parcourir le Web.
Message édité par BifaceMcLeOD le 23-09-2002 à 12:43:52