2 votes

Exemple de robot d'exploration Web basé sur .Net

J'utilise VSTS 2008 + C# + .Net 3.5. Je veux trouver un outil (open source) qui crawle toutes les pages web d'un site web, et pour toutes les pages d'autres domaines qui sont liées à ce site web, je veux éviter de les crawler (je n'ai besoin que des pages de ce domaine spécifique). Pour les pages web explorées, je veux les stocker dans un répertoire de fichiers local.

Y a-t-il des échantillons ou un outil open source prêt à l'emploi ?

4voto

Steve Haigh Points 6261

Arachnode.net pourrait être ce que vous recherchez.

3voto

arachnode.net Points 729

Je suis l'auteur de AN.

AN indexe toutes les langues par défaut. Rien à configurer.

  • Mike

Prograide.com

Prograide est une communauté de développeurs qui cherche à élargir la connaissance de la programmation au-delà de l'anglais.
Pour cela nous avons les plus grands doutes résolus en français et vous pouvez aussi poser vos propres questions ou résoudre celles des autres.

Powered by:

X