[Tuto] Rapatrier un site web entier en UNE ligne de commande

Slystone · Le 01/08/2008, à 12:38

ok merci Pabix. Bah c'est pas très grave après tout. Quand t'y es depuis plusieurs heures il n'y a qu'à surveiller l'espace libre de temps en temps et puis on avise.
Super idée le tuto pour Wget, c'est une des choses qu'un débutant peut facilement apprendre pour comprendre l'intérêt de la console.

astibasta · Le 03/08/2008, à 11:00

Bonjour et merci pour cette mise en garde !

pabix · Le 04/08/2008, à 07:51

Slystone, l’option -Q de wget permet de spécifier un quota à ne pas dépasser ! Je complète.

swissmade · Le 06/08/2008, à 10:21

pabix a écrit :

Brunod : il y a plusieurs moyens de s'authentifier à un site web : par session, par cookie.
Pour les cookies : logue toi avec Firefox, et ensuite cherche le fichier nommé cookies.txt dans ~/.mozilla/firefox/abcdef.default :
wget -r -l5 -K -E --load-cookies ~/.mozilla/firefox/cefdvwsj.default/cookies.txt lesite
(le cefdvwsj, ça peut changer)
Benoit

J'ai pas de cookies.txt mais cookies.sql c'est normal?

Et pour les sessions on fait comment?

Autre chose on peu aspirer juste les images ou les sons ou autre chose en particulier?

Dernière modification par swissmade (Le 06/08/2008, à 10:28)

Slystone · Le 06/08/2008, à 10:30

Ca marche très bien pour les sons, je l'utilise sur Gutenberg pour récupérer des mp3. T'identifies le dossier qui les renferme, et après tu tapes :
wget -r -l1 (si y a qu'un dossier) --no-parent A.mp3 (ou autre) www.monsite/mp3/

Edit @ Pabix : je viens de voir ta réponse, merci c'est bon à savoir.

Dernière modification par Slystone (Le 06/08/2008, à 10:31)

swissmade · Le 06/08/2008, à 11:09

Slystone a écrit :

Ca marche très bien pour les sons, je l'utilise sur Gutenberg pour récupérer des mp3. T'identifies le dossier qui les renferme, et après tu tapes :
wget -r -l1 (si y a qu'un dossier) --no-parent A.mp3 (ou autre) www.monsite/mp3/
Edit @ Pabix : je viens de voir ta réponse, merci c'est bon à savoir.

Merci

je viens aussi de voire que l'option -A.jpg permet de ne récupérer que les fichier .jpg (on peu l'utiliser pour n'importe quel extention

®om · Le 06/08/2008, à 17:15

Sur un site il y a des noms de fichiers trop longs, du coup il écrit "Ne peut pas écrire ..." car le fichier est trop long. Y'a moyen qu'il renomme tout seul pour avoir des noms de fichiers plus courts.

Mehdi2500 · Le 13/08/2008, à 20:20

slt tt le monde jvoulais savoir si l'un d'entre vous c'est ou savé comment ajouter un fichier PADS sachant ke ces un genre de lecteur de video mé en format pads ki transfaire des videos d'un PC vers une set top box, ce dérnier l'envoir sur un ecran plasma
je voulais metre cette video sur une page web mais ne se passe ya le java le direct X mé pa le PADS donc.....
merci d'avance

SeTtHe · Le 13/08/2008, à 20:43

>Mehdi2500

C'est possible de refaire ton message en version décodée ???
Parce que le langage SMS sur un forum...

Ayral · Le 19/08/2008, à 22:55

slt tt le monde jvoulais savoir si l'un d'entre vous c'est ou savé comment ajouter un fichier PADS sachant ke ces un genre de lecteur de video mé en format pads ki transfaire des videos d'un PC vers une set top box, ce dérnier l'envoir sur un ecran plasma
je voulais metre cette video sur une page web mais ne se passe ya le java le direct X mé pa le PADS donc.....

Bonsoir
"Je voulais savoir si l'un d'entre vous sait ou savez comment ajouter un fichier Pads sachant que c'est un genre de lecteur vidéo mais en format Pads, qui transfère des vidéos d'un PC vers une set top box (?) ce dernier l'envoie sur un écran plasma. Je voulais mettre cette vidéo sur une page web, mais (rien) ne se passe. Il y a le java, le direct X, mais pas le Pads. Donc..."
Les erreurs du message cité ne concernent pas que l'utilisation du language texto, ce qui peut laisser supposer que l'auteur est un apprenant francophone non français... Donc un peu de compréhension...

Marilyn · Le 27/08/2008, à 11:24

Bonjour,

Je suis sur un forum où je souhaiterais utiliser l'astuce mais seulement pour récupérer mon post en vue d'une sauvegarde.

Je ne suis pas intéressée pour récupérer le forum, je veux juste mon post.

Pouvez-vous m'aiguiller sur la ligne de commande à taper ?

Merci

Marilyn · Le 27/08/2008, à 11:50

voilà ce que ça me donne... je crois que je n'ai encore rien compris pour changer

nico@no-limits:~$ wget -r -l5 -k -E --load-cookies www.adresse.forum.com/adresse.de.mon.post.htm
wget: URL manquant
Usage: wget [OPTION]... [url]...

pabix · Le 30/08/2008, à 04:52

En effet, après --load-cookies, il faut lui donner le nom du fichier contenant les cookies.
Et de plus, mets l’URL entre guillemets pour plus de sécurité.

Marilyn · Le 30/08/2008, à 08:59

Bonjour Pabix,

Je te remercie pour les précisions.

Je vais tester voir si j'ai bien tout marqué.

Merci encore

Edit : tu parles du fichier contenant les cookies, question un peu bête c'est le dossier de mon ordi ?

Dernière modification par Marilyn (Le 30/08/2008, à 10:10)

jo_6466 · Le 05/09/2008, à 18:40

Je suis sur OSX 10.4.11 et lorsque je tape la commande de base du topic dans le terminal il me dit que la commande Wget n'est pas reconnue

Pourquoi?

merci pour votre aide

Slystone · Le 07/09/2008, à 20:57

Ta réponse est dans ta question. Tu es sous OSX (Apple), et pas sous Gnu/Linux (tu t'es trompé de forum), donc il est normal que les commandes ne soient pas les mêmes. Essaye de trouver les commandes de la console pour Mac Os avec une recherche google.

fcontacte · Le 09/09/2008, à 09:35

bonjour

je ne sais pas pourquoi ça marche pas chez moi

--08:34:07-- http://www.apple.com/
=> `www.apple.com/index.html'
Résolution de www.apple.com... 17.112.152.32
Connexion vers www.apple.com|17.112.152.32|:80... échec: Aucun chemin d'accès pour atteindre l'hôte cible.

Terminé --08:34:10--
Téléchargement: 0 octets dans 0 fichiers

MEME sur d'autre sites la meme chose !!!!:(

fcontacte · Le 11/09/2008, à 06:57

sa marche at home pacontre au taf non c peut etre le proxy non !

le site a accessible en navigation alors de quoi sagit 'il

help me please

Slystone · Le 11/09/2008, à 13:30

Je ne pense pas que tu puisses télécharger le site apple (ni aucun grand site), pour des raisons évidentes de risques de faire sauter le serveur. D'ailleurs il est dit dans la charte du forum que toute tentative d'aspiration du site entraînera un bannissement de l'adresse IP.

topazz · Le 29/09/2008, à 11:09

Pour info, j'ai fais ce script :
http://doc.ubuntu-fr.org/sauvegarder_un_site

fcontacte · Le 30/09/2008, à 11:46

bonjour
comment faire pour resoudre mon blem de port
fcontacte@ubuntu:~$ wget -r -l5 -k -E http://www.nticweb.com/
Erreur d'analyse syntaxique du URL proxy http://10.100.2.183:no_port/: Mauvais numéro de port

merci

breizh de laz · Le 08/10/2008, à 18:57

bonjour
cela marche t il pour le forum ??
car j'ai un forum chez forumactif et je voulais le rapatrier pour montrer lors d'une reunion du club de judo .

merci

papalolo · Le 04/11/2008, à 19:41

Très bien ce sujet, et merci/bravo Benoît, alias Pabix, de l'avoir lancé !

J'avais découvert Wget sur la doc, et j'avais trouvé ça essentiel, pour sauvegarder, gober pour lire hors ligne, et voir des exemples de xhtml et css même hors connexion.

Je me permettrai de rajouter le lien de cette discution sur le billet qui paraitra sur mon petit blog d'un novice dans les logiciels libres, histoire de montrer les limites technique et déontologiques de la méthode.

Bien sûr je parlerai de l'extension scrapbook aussi.

Nifux · Le 07/12/2008, à 04:13

Bonjour, j'ai lu le sujet et je crois pas l'avoir vu (désolé si c'est pas le cas)

en fait, j'essaye de récupérer un site mais les images sont placées ailleurs dans la structure plus près de la racine et le dossier dans lequel les images sont est protégés. Je voudrais savoir s'il y a une option wget pour récupérer même les images qui ne sont pas placés au niveau de la page que l'on rapatrie.

Grunt · Le 07/12/2008, à 05:03

Si ce n'est pas indiscret, on peut avoir un lien vers le site en question? Parce que là c'est assez flou. (T'inquiète, même si c'est du pr0n on va pas t'engueuler )

Ubuntu-fr

Navigation

Liens de recherche

Annonce

#101 Le 01/08/2008, à 12:38

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#102 Le 03/08/2008, à 11:00

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#103 Le 04/08/2008, à 07:51

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#104 Le 06/08/2008, à 10:21

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#105 Le 06/08/2008, à 10:30

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#106 Le 06/08/2008, à 11:09

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#107 Le 06/08/2008, à 17:15

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#108 Le 13/08/2008, à 20:20

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#109 Le 13/08/2008, à 20:43

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#110 Le 19/08/2008, à 22:55

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#111 Le 27/08/2008, à 11:24

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#112 Le 27/08/2008, à 11:50

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#113 Le 30/08/2008, à 04:52

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#114 Le 30/08/2008, à 08:59

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#115 Le 05/09/2008, à 18:40

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#116 Le 07/09/2008, à 20:57

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#117 Le 09/09/2008, à 09:35

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#118 Le 11/09/2008, à 06:57

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#119 Le 11/09/2008, à 13:30

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#120 Le 29/09/2008, à 11:09

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#121 Le 30/09/2008, à 11:46

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#122 Le 08/10/2008, à 18:57

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#123 Le 04/11/2008, à 19:41

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#124 Le 07/12/2008, à 04:13

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

#125 Le 07/12/2008, à 05:03

Re : [Tuto] Rapatrier un site web entier en UNE ligne de commande

Pied de page des forums