'web crawler' (suite) : quel langage choisir ?

Recherche :

Mot : Pseudo : Filtrer
Bas de page
Auteur	Sujet : 'web crawler' (suite) : quel langage choisir ?

chicha

Je recherche des sources de 'web crawler' (code de moteur de recherche) en langage Python si possible, sinon en C-like.

[jfdsdjhfuetppo]--Message édité par chicha--[/jfdsdjhfuetppo]

Publicité

chicha

Vu les sources que je trouve sur le Net, et comme je ne veux pas demarrer "from scratch" : je m'oriente vers le PERL. Pensez-vous que je fais fausse-route ? Devrais-je plutot m'orienter vers le PHP par exemple ?
Habituellement, je programme en C ou en Ada, donc ces 2 languages sont nouveau pour moi... mais j'apprend vite :sol:

D'autre part, les données recoltées seront stockées dans une BD mySQL. Voila les infos pour mes bons conseilleurs

kadreg

profil: Utilisateur

Tu veux pas un larbin ? :

http://larbin.sourceforge.net/

C'est un webcrawler qui contient la partie parcours des pages, derrière, il y a plus qu'a rajouter la partie indexation.

---------------
brisez les rêves des gens, il en restera toujours quelque chose... -- laissez moi troller sur discu !

krolours1

ya 1 bouquin en ligne qui s'appelle "Web Client Programming with Perl" http://www.oreilly.com/openbook/webclient/
Ils parlent surement de crawlers dedans

chicha

c'est vrai kil est bien mais chez moi ca marche pas... peut etre a cause des proxy ?

chicha

:bounce:

FORUM HardWare.fr

Programmation

'web crawler' (suite) : quel langage choisir ?

Sujets relatifs
PHP: choisir la db???	passer du langage c à pascal
c'est bien le nouveau langage C# ?	Quel langage pour mon chtit projet de fin d'année ?
quel langage pour un client IRC ?	[Eiffel] quelqu'un connait ce langage ?
qui s'i connait en langage PCL je veux juste les commandes !!!!	[SQL]: Syntaxe complète du langage?
[PHP]Choisir un fichier avec un form(ou autre) et récupérer le LIEN	langage de commande sous nt
Plus de sujets relatifs à : 'web crawler' (suite) : quel langage choisir ?

Page générée en 0.034 secondes