Comment obtenir le contenu d'une page Web dans une variable shell ?

Question

Sous Linux, comment puis-je récupérer une URL et obtenir son contenu dans une variable dans un script shell ?

Answer 1

Il y a la commande wget ou la commande curl.

Vous pouvez maintenant utiliser le fichier que vous avez téléchargé avec wget. Ou vous pouvez gérer un flux avec curl.

---

Ressources :

• linux.die - Wget homme
• linux.die - boucle pour homme

Answer 2

content=`wget -O - $url`

Answer 3

Vous pouvez utiliser curl ou wget pour récupérer les données brutes, ou vous pouvez utiliser w3m -dump pour avoir une belle représentation textuelle d'une page Web.

$ foo=$(w3m -dump http://www.example.com/); echo $foo
You have reached this web page by typing "example.com", "example.net","example.org" or "example.edu" into your web browser. These domain names are reserved for use in documentation and are not available for registration. See RFC 2606, Section 3.