TVDownloader: télécharger les médias du net ! [2]

11gjm · Le 25/04/2013, à 17:40

Bonjour ,

Test de :
http://videos.tf1.fr/les-experts-las-ve … 29865.html
---
avec la version 0.9.4 (#148) ; le fichier est incomplet (80.000ko)

episode-7-saison-12-le-cerveau-de-la-bande-7929865-10460973.tmp.mp4
Erreur: le sous-process s'est terminé avec (le code d'erreur est 1 ou 2)
---
avec la version 0.9.3 (#133) ; le fichier est complet (730.000ko)
aucune erreur

episode-7-saison-12-le-cerveau-de-la-bande-7929865-10460973.mp4
---

Cordialement .

bibichouchou · Le 25/04/2013, à 19:23

à tous,
lors d'essais, il me semble que j'avais déjà essayé l'option de rtmpdump pour calculer les hashs en passant l'adresse du lecteur. cependant, ça n'avait pas marché. soit je m'étais planté de lecteur (très probable), soit ça n'est pas fiable (peu probable mais bon, on ne sait jamais)... au final, j'avais abandonné puisque j'avais les chaines toutes prêtes

Dernière modification par bibichouchou (Le 25/04/2013, à 19:25)

pacome · Le 25/04/2013, à 20:18

Ah ben zut

Je dois avouer que je n'ai fait que quelques essais sur des vidéos assez courtes (bandes annonces) parce que j'ai une bande passante de misère... et je n'ai pas eu de problème. Je viens d'essayer avec les deux players sur un épisode des experts et je rencontre les mêmes erreurs que vous.

Je reprend ma copie et je vous tiens au courant.

À+

Dernière modification par pacome (Le 25/04/2013, à 20:19)

k3c · Le 26/04/2013, à 06:58

Si on ajoute
-x 352043
à la commande rtmpdump, ça marche, il faut le nom ET le hash du player je suppose

patrice.vallade · Le 26/04/2013, à 18:25

Est ce que ce genre de lien peut être pris en compte par pluzzdl http://www.france4.fr/emission/viens-di … e/79363823, malgré le fait qu'il ne dirige pas sur une page avec une extension en .html ? Chaque morceau de vidéo est de ce type http://ftvodhdsecz-f.akamaihd.net//z/st … core=2.8.0
Il m'est également impossible d'installer pluzzdl sur mon Ubuntu 12.04 depuis le dépot ppa.

k3c · Le 26/04/2013, à 19:04

@ patrice valade

Visiblement si on passe une url commençant par pluzz et pas france4, pas de problème

gg@gg-SATELLITE-L755:~$ pluzzdl -v http://www.france4.fr/emission/viens-diner-dans-ma-cite/79363823
[DEBUG   ]  main.py             pluzzdl 0.9.4 avec Python 2.7.3 (i686)
[DEBUG   ]  main.py             OS : Linux #64-Ubuntu SMP Mon Mar 25 21:44:41 UTC 2013
[ERROR   ]  main.py             L'URL "http://www.france4.fr/emission/viens-diner-dans-ma-cite/79363823" n'est pas valide
gg@gg-SATELLITE-L755:~$ pluzzdl -v http://pluzz.francetv.fr/videos/viens_diner_dans_ma_cite.html
[DEBUG   ]  main.py             pluzzdl 0.9.4 avec Python 2.7.3 (i686)
[DEBUG   ]  main.py             OS : Linux #64-Ubuntu SMP Mon Mar 25 21:44:41 UTC 2013
[DEBUG   ]  Navigateur.py       GET http://pluzz.francetv.fr/videos/viens_diner_dans_ma_cite.html
[DEBUG   ]  PluzzDL.py          ID de l'émission : 80903387
[DEBUG   ]  Navigateur.py       GET http://www.pluzz.fr/appftv/webservices/video/getInfosOeuvre.php?mode=zeri&id-diffusion=80903387
[DEBUG   ]  PluzzDL.py          Lien MMS : None
[DEBUG   ]  PluzzDL.py          Lien RTMP : None
[DEBUG   ]  PluzzDL.py          URL manifest : http://ftvodhdsecz-f.akamaihd.net/z/streaming-adaptatif_france-dom-tom/2013/S17/J4/80903387-20130425-,398,632,934,k.mp4.csmil/manifest.f4m
[DEBUG   ]  PluzzDL.py          URL m3u8 : http://medias2.francetv.fr//catchup-mobile/france-dom-tom/non-token/non-drm/m3u8/2013/S17/J4/80903387-20130425.m3u8
[DEBUG   ]  PluzzDL.py          Utilisation de DRM : non
[DEBUG   ]  PluzzDL.py          Chaine : France 4
[DEBUG   ]  Historique.py       Historique chargé
[DEBUG   ]  Navigateur.py       GET http://medias2.francetv.fr//catchup-mobile/france-dom-tom/non-token/non-drm/m3u8/2013/S17/J4/80903387-20130425.m3u8
[DEBUG   ]  Navigateur.py       GET http://medias2.francetv.fr//catchup-mobile/france-dom-tom/non-token/non-drm/m3u8/2013/S17/J4/80903387-20130425-840k.m3u8
[DEBUG   ]  PluzzDL.py          Nombre de fragments : 379
[INFO    ]  PluzzDL.py          Début du téléchargement des fragments
[DEBUG   ]  Navigateur.py       GET http://medias2.francetv.fr//catchup-mobile/france-dom-tom/non-token/non-drm/m3u8/2013/S17/J4/80903387-20130425-840k/80903387-20130425-0.ts
[DEBUG   ]  Navigateur.py       GET http://medias2.francetv.fr//catchup-mobile/france-dom-tom/non-token/non-drm/m3u8/2013/S17/J4/80903387-20130425-840k/80903387-20130425-1.ts
[DEBUG   ]  Navigateur.py       GET http://medias2.francetv.fr//catchup-mobile/france-dom-tom/non-token/non-drm/m3u8/2013/S17/J4/80903387-20130425-840k/80903387-20130425-2.ts
[DEBUG   ]  Navigateur.py       GET http://medias2.francetv.fr//catchup-mobile/france-dom-tom/non-token/non-drm/m3u8/2013/S17/J4/80903387-20130425-840k/80903387-20130425-3.ts
[DEBUG   ]  Navigateur.py       GET http://medias2.francetv.fr//catchup-mobile/france-dom-tom/non-token/non-drm/m3u8/2013/S17/J4/80903387-20130425-840k/80903387-20130425-4.ts
[DEBUG   ]  Navigateur.py       GET http://medias2.francetv.fr//catchup-mobile/france-dom-tom/non-token/non-drm/m3u8/2013/S17/J4/80903387-20130425-840k/80903387-20130425-5.ts
[DEBUG   ]  Navigateur.py       GET http://medias2.francetv.fr//catchup-mobile/france-dom-tom/non-token/non-drm/m3u8/2013/S17/J4/80903387-20130425-840k/80903387-20130425-6.ts
[DEBUG   ]  Navigateur.py       GET http://medias2.francetv.fr//catchup-mobile/france-dom-tom/non-token/non-drm/m3u8/2013/S17/J4/80903387-20130425-840k/80903387-20130425-7.ts
[DEBUG   ]  Navigateur.py       GET http://medias2.francetv.fr//catchup-mobile/france-dom-tom/non-token/non-drm/m3u8/2013/S17/J4/80903387-20130425-840k/80903387-20130425-8.ts
^C[INFO    ]  PluzzDL.py          Interruption clavier
[DEBUG   ]  Historique.py       Historique sauvé
gg@gg-SATELLITE-L755:~$

thom83 · Le 26/04/2013, à 19:42

@patrice.vallade
Avec HDS Link Detector et AdobeHDL.php, le téléchargement de cette émission fonctionne très bien. Le fichier fait 396 Mio.
propriété selon ffmpeg -i

Duration: 01:06:00.91, start: 0.000000, bitrate: 782 kb/s
    Stream #0.0: Video: h264, yuv420p, 704x400 [PAR 100:99 DAR 16:9], 782 kb/s, 25 tbr, 1k tbn, 50 tbc
    Stream #0.1: Audio: aac, 48000 Hz, stereo, s16

Dernière modification par thom83 (Le 26/04/2013, à 19:45)

patrice.vallade · Le 26/04/2013, à 19:58

Je n'ai pas consulté le fil de la discussion depuis logntemps et je ne sais pas ce que sont les scripts. Est ce qu'il y a un tuto quelque par ?
@k3c les deux émissions sont différentes. Celle avec Smain est plus ancienne que celle avec Tibault Baka qui est un ami.

Dernière modification par patrice.vallade (Le 26/04/2013, à 20:11)

patrice.vallade · Le 26/04/2013, à 20:57

Et bien j"ai il me semble réussi à attraper le fichier avec les scripts et modules. 660 fragments de vidéo et quelques centaines de Mo.
Merci.

k3c · Le 26/04/2013, à 20:58

Alors pour cette émission précisément il faudra utiliser
https://github.com/K-S-V/Scripts/wiki

k3c · Le 02/05/2013, à 07:33

J'ai fait une variante en Python du script php de KSV
AdobeHDS.php
pour M6

C'est plus pour le fun qu'autre chose, car pratiquement toutes les vidéos sont maintenant chiffrées.
http://forum.ubuntu-fr.org/viewtopic.ph … #p13409121

ynad · Le 02/05/2013, à 13:18

bonjour,

et pour lcp je ne trouve pas, cet url par exemple

http://www.lcp.fr/emissions/docs-ad-hoc … merveilles

(DownloadHelper, tourne mais n'enregistre rien, ni vlc, ni mplayer)

k3c · Le 02/05/2013, à 18:01

@ ynad

lcp maintenant c'est géré par dailymotion. Plus rien à voir avec avant, mon ancien script ne marche plus du tout.
Faut que je regarde pour faire un script ?

11gjm · Le 02/05/2013, à 18:04

Bonjour ,

@ynad :

Essai avec captvty :

http://www.lcp.fr/emissions/docs-ad-hoc/vod/141539-la-crise-au-pays-des-merveilles
=> Docs ad Hoc : La crise au pays des merveilles_512x384.mp4
176 Mo
durée : 53mn38s

Essai avec un fichier batch ( pour windows )

@echo on
"ffmpeg.exe" -re -i "http://www.dailymotion.com/cdn/H264-512x384/video/xvf3pc.mp4?auth=1367683659-07250bc1468feea50ca2971e40050a55" -acodec copy -vcodec copy "La_crise.mp4"
"ffmpeg.exe" -re -i "http://www.dailymotion.com/cdn/H264-512x384/video/xvf3pc.mp4?auth=1367683659-07250bc1468feea50ca2971e40050a55" -acodec copy -vcodec copy "La_crise.mp4"
"ffmpeg.exe" -re -i "http://www.dailymotion.com/cdn/H264-512x384/video/xvf3pc.mp4?auth=1367683659-07250bc1468feea50ca2971e40050a55" -acodec copy -vcodec copy "La_crise.mp4"
"ffmpeg.exe" -re -i "http://www.dailymotion.com/cdn/H264-512x384/video/xvf3pc.mp4?auth=1367683659-07250bc1468feea50ca2971e40050a55" -acodec copy -vcodec copy "La_crise.mp4"
pause
:fin

Je fais l'essai avec 4 lignes identiques ( ayant eu un arrêt avec une seule ligne ) .
Le téléchargement est lent , dû au serveur Daylimotion ( faiblard ) .

A+ .

Édit à 20h25 : ça a fonctionné en 1 seule fois .

Dernière modification par 11gjm (Le 02/05/2013, à 19:25)

k3c · Le 02/05/2013, à 19:28

@ 11gjm

Le ?auth a une durée de vie faible, ça ne marche déjà plus.

Et dans ma version, ffmpeg est remplacé par avconv :-)

Merci quand même

11gjm · Le 02/05/2013, à 20:40

Re-... ,

@k3c et ynad : Process dans Firefox .

Outils => Supprimer l'historique récent => Effacer maintenant

Lancer la vidéo :
http://www.lcp.fr/emissions/docs-ad-hoc … merveilles
Attendre que la vidéo de l'émission ait démarré . Puis mettre en pause .

Outils => Développeur Web => Examiner l'élément => Clic sur la vidéo

Il apparaît des écritures ( en rouge ) dans la zone inférieure .
Aller en-dessous de <div id="out"></div>
Il faut cliquer sur +<script> .

Se rendre au niveau de la 3ième ligne "var info =" , on peut y lire :
H264-512x384 pour du .mp4
H264-320x240 pour du .mp4
et du .m3u8

Nous disposons de toutes les données sur cette ligne .
La difficulté résidant dans la copie de la ligne !!!

Exemple : "stream_h264_ld_url"

"http:\/\/www.dailymotion.com\/cdn\/H264-320x240\/video\/xvf3pc.mp4?auth=1367683659-6d450edc1ab9f6a784e7db043d41f337"
...

J'ai refait un essai de téléchargement avec le lien fourni , 1H après .
Cela fonctionne .

A+ .

ynad · Le 02/05/2013, à 21:00

bonsoir, et merci beaucoup à tous les deux

Xun · Le 07/05/2013, à 19:05

Bonsoir,

Je ne suis plus le sujet depuis longtemps ... Depuis quels sites est-il possible actuellement de télécharger des émissions ?
Où peut-on être sûr de trouver la dernière version du script ?
Les liens sont-ils générés de manière "logique" ? (On peut toujours espérer héhé, je voulais savoir au final s'il était possible d'automatiser les téléchargements)

Utilise-t-il flvstreamer ? Celui ci n'existe(ait ?) pas sous arm, du moins il y a encore peu, empêchant le script pour les quotidiennes de canal de marcher sur un RPI...

Merci du temps pris pour votre réponse

bibichouchou · Le 08/05/2013, à 08:09

@Xun
salut,
scripts fonctionnels pour : pluzz, tf1 & co (hd1, tmc, nt1), d8+d17 (? à vérifier)
tf1 & co, d8+d17 nécessitent rtmpdump/flvstreamer pour (certaines) vidéos
par contre, faudra faire un peu d'archéologie sur ce fil et le précédent pour trouver les scripts

Frédéric Stemmelin · Le 11/05/2013, à 14:41

EDIT: problème réglé, c'était l'url pour le téléchargement du script qui était erronée, je l'ai mis à jour dans ce post et tout fonctionne parfaitement.

Bonjour,

j'ai installé les paquets "php5-cli" et "php5-curl" en plus du plugin "HDS Link Detector" https://addons.mozilla.org/addon/hds-link-detector/ pour Firefox sous Linux Mint 13.
J'ai téléchargé la dernière version du script "AdobeHDS.php" de K-S-V sur github "https://raw.github.com/K-S-V/Scripts/ma … obeHDS.php".

Après avoir redémarré Firefox j'ai récupéré la commande que me propose le plugin HDS Link Detector en rejouant la vidéo de l'émission "Maison France 5" depuis le site de pluzz:

"http://pluzz.francetv.fr/videos/la_maison_france_5.html"

Voici à quoi ressemble la ligne de commande (avec des retours chariots pour la clarté):

php AdobeHDS.php --manifest "http://ftvodhdsecz-f.akamaihd.net/z/streaming-adaptatif/2013/S19/J3/81446656-20130508-,398,632,934,
k.mp4.csmil/manifest.f4m?hdnea=exp=1368279682~acl=%2fz%2fstreaming-adaptatif%2f2013%2fS19%2fJ3%2f81446656-20130508-
*~hmac=44669b0843437b01575cd3a97e4946f7a09d78e6405a9255be2b63021882ce9b&hdcore=2.8.0&g=YKHSSINKTSBA" 
--delete 
--auth "hdntl=exp=1368365482~acl=%2fz%2fstreaming-adaptatif%2f2013%2fS19%2fJ3%2f81446656-20130508-
*~data=hdntl~hmac=e6d4bd80bea278091c4582b7645ce54044e91d6a6752089a62358ac0861b34ec
&als=0,0.1,0,0,0,NaN,0,0,0,65,f,0,2690.64,f,s,YKHSSINKTSBA,2.8.0,65&hdcore=2.8.0" 
--useragent "Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:20.0) Gecko/20100101 Firefox/20.0"

En lançant cette commande dans un terminal je vois défiler plein de lignes, mais ensuite plus rien ne se passe, pas de téléchargement.
Avec l'option "--play" et vlc je ne vois pas non plus de vidéo, bref ou est le soucis ?

Quelqu'un qui a un plus d'expérience avec cet outil pourrait-il avoir la gentillesse de tester de télécharger cette émission et me dire si ça fonctionne ?
Ceci m'aiderait grandement à comprendre si le problème vient de mon PC, ma distribution Linux ou si simplement le script (qui semble avoir été modifié il y 6 jours) ne fonctionne plus.

Merci.

La ligne me semble cohérente, avec les paramètres auth et useragent qui sont bien présents ...
Je ne vois pas ou ça coince et pas moyen d'avoir des logs d'erreur.

Dernière modification par Frédéric Stemmelin (Le 12/05/2013, à 11:06)

bibichouchou · Le 11/05/2013, à 16:21

Coucou,

@ Frédéric Stemmelin
Essaye ça

php AdobeHDS.php --manifest "http://ftvodhdsecz-f.akamaihd.net/z/streaming-adaptatif/2013/S19/J3/81446656-20130508-,398,632,934,k.mp4.csmil/manifest.f4m?hdnea=exp=1368286014~acl=%2fz%2fstreaming-adaptatif%2f2013%2fS19%2fJ3%2f81446656-20130508-*~hmac=1928441696344b41ca2b38092b61d653b074baa8fbafd3c0f5ecbf27349f5a4e" --delete

j'ai commencé le téléchargement mais ne suis pas allé au bout. Le fichier flv créé est bien lisible. J'utilise une version du script que j'ai récupérée il y a bien 1 mois de ça.

Dernière modification par bibichouchou (Le 11/05/2013, à 16:25)

11gjm · Le 11/05/2013, à 16:46

Bonjour ,

Vous serait-il possible d'effectuer un retour chariot en fin du lien , et d'ajouter 3 points (à la ligne) ,
ceci afin de nous faciliter la copie du lien indiqué .
Sinon , c'est la galère !!!

MERCI .

Cordialement .

inbox · Le 11/05/2013, à 16:52

Pour copier une texte de cette longueur facilement et sans souris, il suffit de se positionner en début de ligne, puis en déplaçant le curseur avec "Shift+Ctrl+Flèche droite", de sélectionner le texte par blocs jusqu'en fin de ligne.

Avec la souris et sous Firefox (pour les autre navigateurs, je ne sais pas), il suffit de faire un triple clic gauche sur la ligne pour la sélectionner en entier.

thom83 · Le 11/05/2013, à 16:58

Bonjour,

Avec la dernière version du script de KSV (vieux de 6 jours), j'obtiens la commande :

php AdobeHDS.php --manifest "http://ftvodhdsecz-f.akamaihd.net/z/streaming-adaptatif/2013/S19/J3/81446656-20130508-,398,632,934,k.mp4.csmil/manifest.f4m?hdnea=exp=1368287870~acl=%2fz%2fstreaming-adaptatif%2f2013%2fS19%2fJ3%2f81446656-20130508-*~hmac=a266dcda8231d32e3fbbe9aeb33778927924d08a1a7700cf363f290ba6bfff8b&hdcore=2.8.0&g=JHLEVDGMPTED" --delete --auth "hdntl=exp=1368373672~acl=%2fz%2fstreaming-adaptatif%2f2013%2fS19%2fJ3%2f81446656-20130508-*~data=hdntl~hmac=93df79b7e59791bd2e6527c29f94e0a2ddf2bee4fca3999599a092326b961016&als=0,0.1,0,0,0,NaN,0,0,0,37,f,0,2690.64,f,s,JHLEVDGMPTED,2.8.0,37&hdcore=2.8.0" --useragent "Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:20.0) Gecko/20100101 Firefox/20.0"

qui fonctionne très bien. Les 448 fragments ont été chargés en quelques minutes. À noter que le fichier obtenu a besoin d'être renommé.

k3c · Le 11/05/2013, à 17:12

Frederic Stemmelin a écrit :

En lançant cette commande dans un terminal je vois défiler plein de lignes,

Comme peu d'entre nous sommes devins, nous pouvons rarement savoir ce qui s'affiche sur ton écran.
Peux-tu les insérer dans les balises code (la 10 ème balise sur le dessus quand tu rentres un message) ?

Ubuntu-fr

Navigation

Liens de recherche

Annonce

#151 Le 25/04/2013, à 17:40

Re : TVDownloader: télécharger les médias du net ! [2]

#152 Le 25/04/2013, à 19:23

Re : TVDownloader: télécharger les médias du net ! [2]

#153 Le 25/04/2013, à 20:18

Re : TVDownloader: télécharger les médias du net ! [2]

#154 Le 26/04/2013, à 06:58

Re : TVDownloader: télécharger les médias du net ! [2]

#155 Le 26/04/2013, à 18:25

Re : TVDownloader: télécharger les médias du net ! [2]

#156 Le 26/04/2013, à 19:04

Re : TVDownloader: télécharger les médias du net ! [2]

#157 Le 26/04/2013, à 19:42

Re : TVDownloader: télécharger les médias du net ! [2]

#158 Le 26/04/2013, à 19:58

Re : TVDownloader: télécharger les médias du net ! [2]

#159 Le 26/04/2013, à 20:57

Re : TVDownloader: télécharger les médias du net ! [2]

#160 Le 26/04/2013, à 20:58

Re : TVDownloader: télécharger les médias du net ! [2]

#161 Le 02/05/2013, à 07:33

Re : TVDownloader: télécharger les médias du net ! [2]

#162 Le 02/05/2013, à 13:18

Re : TVDownloader: télécharger les médias du net ! [2]

#163 Le 02/05/2013, à 18:01

Re : TVDownloader: télécharger les médias du net ! [2]

#164 Le 02/05/2013, à 18:04

Re : TVDownloader: télécharger les médias du net ! [2]

#165 Le 02/05/2013, à 19:28

Re : TVDownloader: télécharger les médias du net ! [2]

#166 Le 02/05/2013, à 20:40

Re : TVDownloader: télécharger les médias du net ! [2]

#167 Le 02/05/2013, à 21:00

Re : TVDownloader: télécharger les médias du net ! [2]

#168 Le 07/05/2013, à 19:05

Re : TVDownloader: télécharger les médias du net ! [2]

#169 Le 08/05/2013, à 08:09

Re : TVDownloader: télécharger les médias du net ! [2]

#170 Le 11/05/2013, à 14:41

Re : TVDownloader: télécharger les médias du net ! [2]

#171 Le 11/05/2013, à 16:21

Re : TVDownloader: télécharger les médias du net ! [2]

#172 Le 11/05/2013, à 16:46

Re : TVDownloader: télécharger les médias du net ! [2]

#173 Le 11/05/2013, à 16:52

Re : TVDownloader: télécharger les médias du net ! [2]

#174 Le 11/05/2013, à 16:58

Re : TVDownloader: télécharger les médias du net ! [2]

#175 Le 11/05/2013, à 17:12

Re : TVDownloader: télécharger les médias du net ! [2]

Pied de page des forums