223 votes

Télécharger une copie locale fonctionnelle d'une page web

Je voudrais télécharger une copie locale d'une page web et obtenir tous les css, images, javascript, etc.

Dans les discussions précédentes (par exemple aquí y aquí qui datent toutes deux de plus de deux ans), deux suggestions sont généralement avancées : wget -p y httrack . Cependant, ces suggestions échouent toutes les deux. J'apprécierais beaucoup que l'on m'aide à utiliser l'un ou l'autre de ces outils pour accomplir cette tâche ; les autres solutions sont également très agréables.

Option 1 : wget -p

wget -p télécharge avec succès tous les prérequis de la page web (css, images, js). Cependant, lorsque je charge la copie locale dans un navigateur web, la page est incapable de charger les prérequis car les chemins d'accès à ces prérequis n'ont pas été modifiés par rapport à la version sur le web.

Par exemple :

  • Dans le html de la page, <link rel="stylesheet href="http://stackoverflow.com/stylesheets/foo.css" /> devra être corrigé pour pointer vers le nouveau chemin relatif de foo.css
  • Dans le fichier css, background-image: url(/images/bar.png) devra également être ajustée.

Y a-t-il un moyen de modifier wget -p pour que les chemins soient corrects ?

Option 2 : httrack

httrack semble être un outil formidable pour mettre en miroir des sites Web entiers, mais je ne sais pas comment l'utiliser pour créer une copie locale d'une seule page. Il y a beaucoup de discussions sur ce sujet dans les forums httrack (par ex. aquí ) mais personne ne semble avoir de solution infaillible.

Option 3 : un autre outil ?

Certaines personnes ont suggéré des outils payants, mais je n'arrive pas à croire qu'il n'existe pas de solution gratuite.

22 votes

Si la réponse ne fonctionne pas, essayez : wget -E -H -k -K -p http://example.com - seul ceci a fonctionné pour moi. Crédit : superuser.com/a/136335/94039

0 votes

Il existe également des logiciels pour ce faire, Téléportation Pro .

4 votes

wget --random-wait -r -p -e robots=off -U mozilla http://www.example.com

285voto

serk Points 1417

Wget est capable de faire ce que vous demandez. Essayez simplement ce qui suit :

wget -p -k http://www.example.com/

El -p vous permettra d'obtenir tous les éléments nécessaires pour afficher le site correctement (css, images, etc.). Le site -k modifiera tous les liens (y compris ceux des CSS et des images) pour vous permettre de visualiser la page hors ligne telle qu'elle est apparue en ligne.

Extrait de la documentation de Wget :

‘-k’
‘--convert-links’
After the download is complete, convert the links in the document to make them
suitable for local viewing. This affects not only the visible hyperlinks, but
any part of the document that links to external content, such as embedded images,
links to style sheets, hyperlinks to non-html content, etc.

Each link will be changed in one of the two ways:

    The links to files that have been downloaded by Wget will be changed to refer
    to the file they point to as a relative link.

    Example: if the downloaded file /foo/doc.html links to /bar/img.gif, also
    downloaded, then the link in doc.html will be modified to point to
    ‘../bar/img.gif’. This kind of transformation works reliably for arbitrary
    combinations of directories.

    The links to files that have not been downloaded by Wget will be changed to
    include host name and absolute path of the location they point to.

    Example: if the downloaded file /foo/doc.html links to /bar/img.gif (or to
    ../bar/img.gif), then the link in doc.html will be modified to point to
    http://hostname/bar/img.gif. 

Because of this, local browsing works reliably: if a linked file was downloaded,
the link will refer to its local name; if it was not downloaded, the link will
refer to its full Internet address rather than presenting a broken link. The fact
that the former links are converted to relative links ensures that you can move
the downloaded hierarchy to another directory.

Note that only at the end of the download can Wget know which links have been
downloaded. Because of that, the work done by ‘-k’ will be performed at the end
of all the downloads.

2 votes

J'ai essayé cela, mais d'une manière ou d'une autre, les liens internes tels que index.html#link-to-element-on-same-page a cessé de fonctionner.

3 votes

15 votes

Certains serveurs répondront avec un code 403 si vous utilisez wget sans agent utilisateur, vous pouvez ajouter -U 'Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.8.1.6) Gecko/20070802 SeaMonkey/1.1.4'

Prograide.com

Prograide est une communauté de développeurs qui cherche à élargir la connaissance de la programmation au-delà de l'anglais.
Pour cela nous avons les plus grands doutes résolus en français et vous pouvez aussi poser vos propres questions ou résoudre celles des autres.

Powered by:

X