IPB

Bienvenue invité ( Connexion | Inscription )

 
Reply to this topicStart new topic
> Télécharger automatiquement 2000 PDFs d'une bibli en ligne, script téléchargement automatique
Options
Aladindindin
posté 10 Feb 2017, 14:17
Message #1


Nouveau Membre


Groupe : Membres
Messages : 17
Inscrit : 8 Dec 2016
Membre no 200 504



Bonjour,,
je dois télécharger 2000 PDF sur une bibliothèque en ligne pour mon travail. Tout est léga et gratuit, je précise=). Si je le fais manuellement, je vais y mettre 10 jours. Or la méthode à la main est très répétitive, ce qui me fait penser qu'on peut l'automatiser:
Je fais ça:
Citation
-> passe page
- clique lien 'document x"
> nouvelle page
> descends
> clique sur le nom de fichier en bas
> retourne (ou ferme l'onglet plutôt)
recommence avec le lien "document x+1"


Le site est, m'a-t-on dit, fait d'une façon bizarre. Normalement il y a que 40 liens par pages, mais j'ai pu mettre rpp=2072 pour tous les avoir sur une seule page.

Néanmoins, n'ayant aucune compétence, je suis incapable de créer un script pour télécharger automatiquement les documents. Est-ce que vous pourriez m'aider ?
On m'a parlé de code bash 0_0 et de wget O_O'


Je vous mets en document ici le lien de la bibliothèque (je le fais pas ici pour raisons de privacy de l'institution): http://www.cjoint.com/c/GBiwEEFqryY

merci smile.gif

Ce message a été modifié par Aladindindin - 10 Feb 2017, 14:20.
Go to the top of the page
 
+Quote Post
yponomeute
posté 10 Feb 2017, 15:25
Message #2


Macbidouilleur d'Or !
*****

Groupe : Membres
Messages : 4 969
Inscrit : 26 Jan 2011
Lieu : Pollachius virens
Membre no 164 083



Salut,

Ça devrait fonctionner avec un aspirateur de site comme http://ricks-apps.com/osx/sitesucker/index.html

Tu peux en principe filtrer les documents que tu récupères pour ne télécharger que les pdf du site.


--------------------
MBP 2017 15" avec clavier pourri et touchbar inutile
Go to the top of the page
 
+Quote Post
Aladindindin
posté 10 Feb 2017, 16:18
Message #3


Nouveau Membre


Groupe : Membres
Messages : 17
Inscrit : 8 Dec 2016
Membre no 200 504



Effectivement, je viens de lancer le download...C'est tellement plus simple !!!
merci!:)
(je vous dis demain si ça a marché)
Go to the top of the page
 
+Quote Post
hellomorld
posté 10 Feb 2017, 16:20
Message #4


Macbidouilleur d'Or !
*****

Groupe : Membres
Messages : 6 144
Inscrit : 31 Oct 2003
Membre no 11 118



Surveille quand même qu'il ne te récupère pas la totalité du site !


--------------------
Go to the top of the page
 
+Quote Post
Aladindindin
posté 10 Feb 2017, 17:04
Message #5


Nouveau Membre


Groupe : Membres
Messages : 17
Inscrit : 8 Dec 2016
Membre no 200 504



c'est bon
après 48h de téléchargement, j'ai tout smile.gif

Ce message a été modifié par Aladindindin - 13 Feb 2017, 15:30.
Fichier(s) joint(s)
Fichier joint  Capture_d___e__cran_2017_02_10_a___19.25.14.png ( 404.55 Ko ) Nombre de téléchargements : 4
 
Go to the top of the page
 
+Quote Post

Reply to this topicStart new topic
1 utilisateur(s) sur ce sujet (1 invité(s) et 0 utilisateur(s) anonyme(s))
0 membre(s) :

 



Nous sommes le : 19th March 2024 - 06:07