2013
10
juillet
« Aspiration de site » avec wget
Rédigé par Marc GUILLAUME | Aucun commentaire">Aucun commentaireWget
La page man française de wget indique :
« Wget peut suivre les liens des pages HTML et XHTML et créer une copie locale de sites web distants, en récréant complètement la structure du site original. Ceci est parfois désigné sous le nom de « téléchargement récursif ». En faisant cela, Wget respecte le standard d'exclusion de robots (/robots.txt). Wget peut aussi convertir les liens dans les fichiers HTML téléchargés pour la consultation locale. »