Ubuntu-fr

mydjey

Re : TVDownloader: télécharger les médias du net !

du coup je me demande quel est le role de ce mp4 tout flou...

N'est ce pas un flux « dégradé » réservé aux Dom Tom ? c'est l'url qui me fait dire ça : […]/france-dom-tom/[…]

Dernière modification par mydjey (Le 17/11/2012, à 06:54)

---

Mon site : http://mydjey.eu/

cavi

Re : TVDownloader: télécharger les médias du net !

Bonjour ,
Un process qui fonctionne avec captvty .
=====
En essayant d'enregistrer une émission , on a d'abord le message "attente serveur"
puis le message d'erreur :
" Demandant de lancer la lecture et d'essayer de nouveau l'enregistrement " .
Ce qu'il faut faire immédiatement , lancer le lecteur embarqué ,
attendre que l'image soit de bonne qualité .
Cliquer de nouveau sur l'émission avec le bouton droit pour télécharger.
Le message "attente serveur" réapparaît et le téléchargement se lance.
Fermer le lecteur embarqué .
=====
qui peut aider à comprendre les modifs à effectuer dans Pluzzdl .
A+ .

Un grand merci à toi 11gjm !
Ça a marché pour une vidéo de France 2 vieille de plus d'un mois! : http://www.france2.fr/videos/70697790

J'en profite pour vous raconter un peu mon parcours et mes trouvailles qui pourraient peut-être vous intéresser :

J'avais d'abord essayé la technique du "getInfosOeuvre.php" avec l'url :
http://www.france2.fr/appftv/webservice … n=70697790
(En passant, remplacer www.france2.fr par www.pluzz.fr semble ne rien changer)
Pour mon cas, le fameux "id-diffusion" étant présent directement dans l'url de la vidéo, donc rien de plus simple!
Si ce n'est pas le cas, chercher le terme "id-video" dans le code source de la page pour trouver celui-ci.

Mais, pour ma vidéo il n'y avait que le format "smil-mp4" (parfois il y a aussi le WMV) et je ne suis rien arrivé à faire avec celui-ci", son "manifest.f4m", ses segments f4f, etc...
J'avais pourtant des choses intéressantes du côté du forum : http://forum.videohelp.com/threads/3424 … converting
et du script PHP "AdobeHDS.php" : https://github.com/K-S-V/Scripts & https://github.com/K-S-V/Scripts/wiki
Mais je suis resté bloqué devant des "Access denied !" dûs à leur système sécurisé... (avec leur hash, token, user-agent et tout le taintsoin!)

Alors, je suis parti à la recherche du lien WMV avec la technique du "getInfosVideo.php" :
http://www.pluzz.fr/appftv/webservices/ … sVideo.php qui permet d'afficher les dernières vidéos (40 maxi à la fois) ajoutées sur pluzz.fr.

<APARTÉ OUVERTE>
Pour rappel :
Cette technique permet de trouver l'id-externe d'une vidéo pour ensuite aller sur :
http://www.pluzz.fr/appftv/webservices/ … d-externe= <id-externe>
Repérer <chemin> et <nom> puis entrer l'URL suivante dans votre nagivateur ou dans VLC :
http://a988.v101995.c10199.e.vm.akamais … blication/ <chemin> / <nom>

Par exemple pour le 1er épisode de la saison 5 de "Fais pas ci, fais pas ça" :
http://www.pluzz.fr/appftv/webservices/ … 2150113_F2
...
<nom>478726_fpcfpc_episode1_integral_20121107.wmv</nom>
<chemin>/geoloc/france-dom-tom/Autre/Autre/2012/S44/J3/</chemin>
...
http://a988.v101995.c10199.e.vm.akamais … 121107.wmv
<APARTÉ FERMÉE>

Avec "getInfosVideo.php", on peut aussi jouer avec les paramètres "chaine" et "debut" pour rechercher des vidéos plus vieilles.
Par exemple : http://www.pluzz.fr/appftv/webservices/ … &debut=100 affiche de la 100 ème à la 140ème vidéo la plus récente du replay france 2.
En tâtonnant un peu, j'ai vu qu'on pouvait aussi faire une recherche sur le code du programme :
http://www.pluzz.fr/appftv/webservices/ … e_sa_place
Mais il n'y avait que les vidéos de moins d'une semaine.

J'ai ensuite trouvé une technique intéressante (et toute simple!) pour afficher la liste des vidéos qui sont "offline" et donc normalement non accessibles! :
http://www.pluzz.fr/appftv/webservices/ … ut=offline
Mais ça ne remontait toujours pas assez loin...
(Mais technique bien pratique pour retrouver des vidéos qui ne sont plus dispo en replay sur pluzz.fr!)

À ce moment là, j'ai failli abandonner (j'avais pourtant trouvé pas mal de trucs intéressants) quand je suis tombé sur ton post 11gjm.
J'ai alors rebooté sur Windows, installé Captvty 1.9 (http://captvty.fr/), cliqué sur le 1er élément du menu de Captvty qui permet de rentrer manuellement un adresse, et là, en entrant le lien de ma vidéo, Captvty a trouvé comme par magie la vidéo en .flv !

Par contre, pour moi, ça n'a pas marché du 1er coup et j'ai du fermer puis redémarrer le logiciel (cf. Annonce du 15/11/2012 sur le site http://captvty.fr/ ).
Mais en lancant rapidement le player dans mon navigateur après avoir lancé le téléchargement sur Captvty, ça a marché !
Merci bien! ;-)

J'espère que ce long post pourra en aider quelques-uns!

Bonne journée à vous!

Dernière modification par cavi (Le 17/11/2012, à 13:20)

11gjm

Re : TVDownloader: télécharger les médias du net !

Bonjour à tous ,

---
@cavi : tant mieux , si cela a pu t'aider !!!

Dans la partie "Apparté" , tu indiques avoir trouvé
"http://a988...20121107.wmv" .

Il te fallait remplacer :
"http://a988...20121107.wmv" par "mms://a988...20121107.wmv" .

Le tour était joué !!!
---

Autres infos (???) :

http://static.francetv.fr/players/Flash.H264/init.xml
http://livepassdl.conviva.com/ver/2.59.0.63924/LivePassModuleMain.swf
retour inutile !!!

Cordialement .

bibichouchou

Re : TVDownloader: télécharger les médias du net !

Salut tout le monde,

est-ce que quelqu'un a regardé du côté de m6/w9 ?
ça fait un moment qu'on n'en a pas parlé et ça pourrait nous changer les idées

tiεuM

Re : TVDownloader: télécharger les médias du net !

Bon pour ajouter mon grain de sel à l'histoire, effectivement ça ne marche toujours pas (perso j'ai essayé avec cette adresse : http://pluzz.francetv.fr/videos/infraro … 90974.html
Mais comme disait 11gjm dans le post #2372, avec capTVty ça marche avec une bidouille (lancer l'enregistrement captvty puis la vidéo sur un navigateur). N'est-il pas possible que quelqu'un qui s'y connaisse (donc malheureusement pas moi) puisse lui demander comment il gère son truc qui a l'air de mieux fonctionner (même si ça n'est pas optimum) ? j'dis ça j'dis rien ...

Bonne soirée, et bon arrachage de cheveux pour les développeurs !

---

Mieux vaut être belle et rebelle
    que moche et re-moche

thom83

Re : TVDownloader: télécharger les médias du net !

Bonsoir,

@ tiεuM
La version 1.9.1 du logiciel que vous mentionnez fonctionne sans bidouille pour Castle ... du moins c'était le cas ce matin.
Dommage qu'il faille passer par les fenêtres.

Dernière modification par thom83 (Le 18/11/2012, à 18:59)

duocore

Re : TVDownloader: télécharger les médias du net !

j'ai utiliser:
pluzzdl http://www.pluzz.fr/les-heritiers-paste … 20h40.html

j'ai ces differentes lignes qui apparaissent:

[?[1;32mINFO?[0m    ]  ?[1mPluzzDL.py          ?[0mReprise du téléchargement de la vidéo au fragment 1
[?[1;32mINFO?[0m    ]  ?[1mPluzzDL.py          ?[0mDébut du téléchargement des fragments
[?[1;32mINFO?[0m    ]  ?[1mPluzzDL.py          ?[0mLe hash du player semble invalide ; calcul du nouveau hash
[?[1;32mINFO?[0m    ]  ?[1mPluzzDL.py          ?[0mUn nouveau hash a été trouvé ; essayez de relancer l'application

j'ai essayé de relancer mais exactement la meme chose.

et sur le site de pluzz
Flash ne semble pas à jour (version 11.3 attendue) ( je sais que la derniere version de flash pour linux est la 11.2)

pouvez vous m'aider a utiliser pluzzdl.

merci de votre aide.

hangarter

Re : TVDownloader: télécharger les médias du net !

j'ai utiliser:
pluzzdl http://www.pluzz.fr/les-heritiers-paste … 20h40.html

j'ai ces differentes lignes qui apparaissent:

[?[1;32mINFO?[0m    ]  ?[1mPluzzDL.py          ?[0mReprise du téléchargement de la vidéo au fragment 1
[?[1;32mINFO?[0m    ]  ?[1mPluzzDL.py          ?[0mDébut du téléchargement des fragments
[?[1;32mINFO?[0m    ]  ?[1mPluzzDL.py          ?[0mLe hash du player semble invalide ; calcul du nouveau hash
[?[1;32mINFO?[0m    ]  ?[1mPluzzDL.py          ?[0mUn nouveau hash a été trouvé ; essayez de relancer l'application

j'ai essayé de relancer mais exactement la meme chose.

et sur le site de pluzz
Flash ne semble pas à jour (version 11.3 attendue) ( je sais que la derniere version de flash pour linux est la 11.2)

pouvez vous m'aider a utiliser pluzzdl.

merci de votre aide.

Pareil pour moi !

---

Debian Sid
Xfce

rimram31

Re : TVDownloader: télécharger les médias du net !

C'est pas des plus simple, mais en installant firefox + flash player, en créant un profil dédié avec définition d'un proxy...

Je m'autocite, j'ai réussi a le faire marcher sur ce principe, mais comme je le disais, un peu plus compliqué a configurer.

J'ai repris le code d'un proxy en python, modifié pour récupérer pvtoken, hdntl et user agent, aussi PluzzDL.py et Navigateur.py pour prendre ces éléments en paramètre, finalement créé un "launcher" qui lance ff sur un profil dédié définissant les paramètres du  proxy et le download fonctionne bien.

Ca demande d'avoir un firefox avec flash player (+adblock pour éviter la pub) et de lancer le download dans un environnement graphique (requis par ff). J'ai bien essayé avec xvfb mais plus compliqué ensuite de killer le process et c'est spécifique linux.

A l'utilisation, un firefox s'ouvre sur la vidéo demandée, au premier fragment, les données sont capturées, proxy et ff killés, le download se poursuit ensuite "comme avant". Si le principe intéresse, indiquez moi ou/comment fournir les sources.

ynad

Re : TVDownloader: télécharger les médias du net !

Le bonjour à tous,

si PluzzDl dans la version 0.9.2 ne charge plus les vidéos, il continue de charger les sous titres...

bonne journée

duocore

Re : TVDownloader: télécharger les médias du net !

C'est pas des plus simple, mais en installant firefox + flash player, en créant un profil dédié avec définition d'un proxy...

Je m'autocite, j'ai réussi a le faire marcher sur ce principe, mais comme je le disais, un peu plus compliqué a configurer.

J'ai repris le code d'un proxy en python, modifié pour récupérer pvtoken, hdntl et user agent, aussi PluzzDL.py et Navigateur.py pour prendre ces éléments en paramètre, finalement créé un "launcher" qui lance ff sur un profil dédié définissant les paramètres du  proxy et le download fonctionne bien.

Ca demande d'avoir un firefox avec flash player (+adblock pour éviter la pub) et de lancer le download dans un environnement graphique (requis par ff). J'ai bien essayé avec xvfb mais plus compliqué ensuite de killer le process et c'est spécifique linux.

A l'utilisation, un firefox s'ouvre sur la vidéo demandée, au premier fragment, les données sont capturées, proxy et ff killés, le download se poursuit ensuite "comme avant". Si le principe intéresse, indiquez moi ou/comment fournir les sources.

oui je serais interessé,

j'ai firefox, flash player et adblock

rimram31

Re : TVDownloader: télécharger les médias du net !

J'ai déposé le code là: http://neo-net.fr/forum/viewtopic.php?f … 1&start=10, browser.tgz qui contient les sources modifiés et celui ajouté a pluzz. Idéalement, il faudrait pouvoir paramétrer la ligne de lancement de ff (d'ou mon correctif ensuite dans le thread). J'ai pris le principe de créer un profil ff dédié (dans lequel il te faut réinstaller ad block) mais tu n'es pas obligé, main.py contient la ligne de commande a lancer.

L'intérêt d'adblock s'est de ne pas attendre la pub avant que le premier fragment soit lancé.

magestik

Re : TVDownloader: télécharger les médias du net !

Première fois que je poste dans ce sujet et c'est parce que pluzzdl ne marche plus. Je l'ai très peu utilisé, juste pour lire les vidéos de pluzz (je n'installe plus le flash player), mais je dois dire que ça a toujours très bien marché. Malheureusement j'ai encore raté ma série et je comptais sur pluzzdl ... pas de chance ça marche pas.

J'ai donc décidé de vous aider. J'ai entendu parler de clé HMAC ? Et la trouver ferait avancer les choses ?

chaoswizard

Re : TVDownloader: télécharger les médias du net !

Première fois que je poste dans ce sujet et c'est parce que pluzzdl ne marche plus

Malheureusement, beaucoup de monde fait cela...

J'ai entendu parler de clé HMAC ? Et la trouver ferait avancer les choses ?

Ben j'aurai tendance à dire qu'en remplaçant la vieille du fichier de conf par la nouvelle, ça devrait remarcher (enfin, je suis peut être un peu trop optimise là...).

Plus d'infos ICI (par le grand KSV) :

i have finally solved the mystery of token generation. analyzing a VM (Adobe Alchemy) within another AVM (ActionScript Virtual Machine) isn't an easy thing to do. PVToken (Player Verification Token) generation was easy stuff but the hardest part was to generate the hmac value to sign the player verification response.

Yeah they have blocked the old key. they have also moved the token generation function inside Alchemy VM (same as in Akamai DRM scheme) which makes it very hard to recover new encryption key.

---

Ubuntu ==> Debian ==> Archlinux

magestik

Re : TVDownloader: télécharger les médias du net !

Première fois que je poste dans ce sujet et c'est parce que pluzzdl ne marche plus

Malheureusement, beaucoup de monde fait cela...

J'avais prévu de passer dire un petit merci un de ces 4 ... Dommage que ce soit dans ces conditions.

J'ai regardé (un peu) et je suis même pas sur d'être parti sur le bon player : je crois que j'ai pris le player pour la publicité ^^' Et là je suis super fatigué donc je vais pas détailler ce que j'ai "découvert" (qui a peut-être déjà été dit en plus) parce que je risque de dire des grosses conneries !

11gjm

Re : TVDownloader: télécharger les médias du net !

Bonjour ,

@chaoswiard :

> ...qu'en remplaçant la vieille du fichier de conf par la nouvelle ...
Je n'ai pas compris !
Merci , pour ta réponse .

Cordialement .

NB : j'ai lu les explications de KSV , c'est clair ; mais pas gagné !!!

Dernière modification par 11gjm (Le 21/11/2012, à 00:29)

magestik

Re : TVDownloader: télécharger les médias du net !

Effectivement je suis très fatigué. J'étais pas sur le bon truc ... mais cette fois c'est bon et je pense que j'ai une vraie piste

Juste pour pas faire quelque chose d'inutile : est-ce que c'est la clé HMAC qui a changé ou le calcul du pvToken ? En gros est-ce que je dois chercher la clé HMAC ou je dois savoir recréer un pvToken ?

Dernière modification par magestik (Le 21/11/2012, à 01:36)

bibichouchou

Re : TVDownloader: télécharger les médias du net !

Salut,
A magestik :
merci de ton aide !
tout d'abord je ne suis pas sur que l'on pense tous à la même chose quand on parle de cle HMAC. je ne sais même pas si cela est la bonne dénomination. pour moi, il s'agit de la clé qui permet de signer la requête. à ne pas confondre avec la somme sha256 du lecteur flash. a l'époque où il fallait créer le jeton d'authentification (vers la version 0.8 de pluzzdl), il fallait trois choses la clé pv (dans le manifest), la somme de contrôle sha256 du lecteur, et la clé hmac. les trois étaient ensuite hashés... Pour répondre à ta question, oui tu peux vérifier que la méthode de calcul du hash final n'a pas changé...

En espérant que tu résolves notre problème à tous...

Amicalement.

11gjm

Re : TVDownloader: télécharger les médias du net !

Bonjour ,

@magestik :

Lis ce que chaoswizard a écrit :
> Plus d'infos ICI (par le grand KSV) ( NB: 2 pages en anglais )
http://stream-recorder.com/forum/record … 11408.html

Cordialement .

magestik

Re : TVDownloader: télécharger les médias du net !

11gjm: j'ai lu le lien mais ça n'apporte rien à l'enquête x)

bibichouchou: D'après ce que j'ai vu ce soir il me parait très improbable qu'il y ait (encore) du sha256 donc plus de HMAC non plus (il me reste encore quelques petits trucs à vérifier).
D'après ce que j'ai vu pluzzdl n'envoie pas le pvToken (la ligne est commentée) ? Et si j'ai pas dis pas de bêtise il était mal calculé (déjà à cause du HMAC qui n'existe plus) !

C'est dommage j'avais écrit un message ou j'expliquais brièvement ce que je pense être la nouvelle méthode ... mais j'ai cru que je disais n'importe quoi alors j'ai effacé !

Je ferai mieux d'y aller, le réveil va être difficile demain matin, bonne nuit x)

bibichouchou

Re : TVDownloader: télécharger les médias du net !

@magestik
je t'assure que les lignes de codes pour générer le jeton ont fonctionné un jour
Pour la petite histoire : on était bloqué depuis un moment car il fallait générer le jeton et c'est KSV qui nous a filé la soluce (dans les pages citées dans les autres messages). Ensuite la clé ou la méthode a changé, on était de nouveau bloqué. chaoswizard a commenté les lignes et lui et d'autres se sont penchés sur les flux m3u8 en remplacement des flux f4f. puis la version m3u8 des videos a disparu et pascal92 nous a alors révélé que l'authentification n'était plus nécessaire. Retour aux flux f4f. Ça a bien fonctionné pdt un petit moment. Puis retour de l'authentification et pluzzdl est de nouveau hs. Voili, voilou

oui pour moi aussi le réveil sera dur (c'est dans 4h).
++

Dernière modification par bibichouchou (Le 21/11/2012, à 02:12)

magestik

Re : TVDownloader: télécharger les médias du net !

Je ne doute pas du fait que ca ait déjà marché, au contraire ca a pas beaucoup changé.

Je me replongerai dedans en rentrant chez moi si j'ai le temps.

J'ai quand même dit une ou deux bêtises cette nuit mais je suis quand même plutôt optimiste pour la suite.

grandtoubab

Re : TVDownloader: télécharger les médias du net !

Salut,
Y a même plus de lien mms ou rtmp

pluzzdl -v http://www.pluzz.fr/detroit-la-faillite-d-un-symbole.html
[DEBUG   ]  main.py             pluzzdl 0.9.3 avec Python 2.7.3
[DEBUG   ]  Navigateur.py       GET http://www.pluzz.fr/detroit-la-faillite-d-un-symbole.html
[DEBUG   ]  PluzzDL.py          ID de l'émission : 72777665
[DEBUG   ]  Navigateur.py       GET http://www.pluzz.fr/appftv/webservices/video/getInfosOeuvre.php?mode=zeri&id-diffusion=72777665
[DEBUG   ]  PluzzDL.py          Lien MMS : None
[DEBUG   ]  PluzzDL.py          Lien RTMP : None
[DEBUG   ]  PluzzDL.py          URL manifest : http://ftvodhdsecz-f.akamaihd.net/z/streaming-adaptatif_france-dom-tom/2012/S47/J2/72777665-20121120-,398,632,934,k.mp4.csmil/manifest.f4m
[DEBUG   ]  PluzzDL.py          URL m3u8 : None
[DEBUG   ]  PluzzDL.py          Utilisation de DRM : non
[DEBUG   ]  PluzzDL.py          Chaine : France 5
[DEBUG   ]  Historique.py       Historique chargé
[DEBUG   ]  Navigateur.py       GET http://hdfauth.francetv.fr/esi/urltokengen2.html?url=/z/streaming-adaptatif_france-dom-tom/2012/S47/J2/72777665-20121120-,398,632,934,k.mp4.csmil/manifest.f4m
[DEBUG   ]  Navigateur.py       GET http://ftvodhdsecz-f.akamaihd.net//z/streaming-adaptatif_france-dom-tom/2012/S47/J2/72777665-20121120-,398,632,934,k.mp4.csmil/manifest.f4m?hdnea=exp=1353515610~acl=%2fz%2fstreaming-adaptatif_france-dom-tom%2f2012%2fS47%2fJ2%2f72777665-20121120-*~hmac=6ad4b0f99f65ae858ffac342948457d6e89aed62d898f1d2fec966eee163ce32
[DEBUG   ]  PluzzDL.py          Estimation du nombre de fragments : 521
[INFO    ]  PluzzDL.py          Début du téléchargement des fragments
[DEBUG   ]  Navigateur.py       GET http://ftvodhdsecz-f.akamaihd.net//z/streaming-adaptatif_france-dom-tom/2012/S47/J2/72777665-20121120-,398,632,934,k.mp4.csmil/2_ee8b5f6c472833a3_Seg1-Frag1
[DEBUG   ]  Navigateur.py       Forbidden
[INFO    ]  PluzzDL.py          Le hash du player semble invalide ; calcul du nouveau hash
[DEBUG   ]  Navigateur.py       GET http://static.francetv.fr/players/Flash.H264/player.swf
[INFO    ]  PluzzDL.py          Un nouveau hash a été trouvé ; essayez de relancer l'application
[DEBUG   ]  Historique.py       Historique sauvé

---

Linux tout seul sur HP Pavilion DV7 et Acer Aspire T650, Canon MG3650 en wifi
Debian 11 Bullseye Gnome/Xorg, Gnome/Wayland avec SDDM
https://bidouilledebian.wordpress.com/
ON M'A VU DANS LE VERCORS, SAUTER A L'ELASTIQUE..... J'AI DANS LES BOTTES DES MONTAGNES DE QUESTIONS....

chaoswizard

Re : TVDownloader: télécharger les médias du net !

> ...qu'en remplaçant la vieille du fichier de conf par la nouvelle ...
Je n'ai pas compris !
Merci , pour ta réponse .

Pour pouvoir la changer facilement, j'avais mis la clef HMAC dans le fichier de configuration pluzzdl.cfg

est-ce que c'est la clé HMAC qui a changé ou le calcul du pvToken ?

Bonne question.
D'après KSV, il y a au moins la clef :

Yeah they have blocked the old key

tout d'abord je ne suis pas sur que l'on pense tous à la même chose quand on parle de cle HMAC. je ne sais même pas si cela est la bonne dénomination

Euh, pour moi, si, c'est bien la clef HMAC (appelée "secret key").

Cf le résumé de bibichouchou en #2396 : c'est commenté parce que l'on utilisé une méthode qui permettait de contourner le mécanisme en utilisant un referer d'un autre player flash.

Y a même plus de lien mms ou rtmp

Je ne sais pas trop ce qu'ils font...

Dernière modification par chaoswizard (Le 21/11/2012, à 18:08)

---

Ubuntu ==> Debian ==> Archlinux

magestik

Re : TVDownloader: télécharger les médias du net !

Bon allez je me remet dedans, c'est parti.

Première étape : vérifier que la clé HMAC a changé (c'est pas que je fait pas confiance mais je préfère vérifier et ça me permettra de ma familiariser un peu avec les différents trucs bizarre de pluzz).

Y'aurait pas moyen de se rejoindre sur un chan IRC ? Ça permettrait de partager nos découvertes rapidement.

Dernière modification par magestik (Le 21/11/2012, à 20:41)