Cum downloadam un numar mare de fisiere de pe un site?

Ma intereseaza niste reviste vechi scanate in format pdf de pe Biblioteca Digitala Transsilvanica. Este greoi sa fac click pe fiecare revista in parte, apoi pe anul publicarii si din nou pe fiecare numar de revista, cum fac sa downloadez toate revistele dintr-o anumita sectiune de pilda?

http://documente.bcu.../periodice.html

Edited by GigiZmeu, 04 October 2017 - 20:07.

Extensie Firefox

Internet Donwload Manager - costa bani
FlashGet - versiunea mai veche mi se pare mult mai usor de folosit, optiunea F4 - Site Explorer
jDownloader 2
Vreun plugin pentru Firefox (poate si chrome) gen: DOWNLOAD ALL

wget -t0 -nc -c -r -l0 -k -p -L -np -o file.log http://documente.bcucluj.ro/periodice.html

http://www.softpedia...ated/WGET.shtml

Daca nu te descurci cu linia de comanda, atunci poti incerca si aceasta varianta cu interfata grafica (eu nu am testat-o): http://www.softpedia...-Portable.shtml

Mass Downloader este programul cel mai ok: http://www.softpedia...ownloader.shtml

Edited by xmanyacs77, 04 October 2017 - 20:32.

Adm, on 04 octombrie 2017 - 20:16, said:

Am instalat extensia aceea si merge pentru Biblioteca Cluj, dar m-am blocat la Biblioteca Digitala a Bucurestilor, fiecare link catre un fisier pdf e ceva de genul:

http://www.digibuc.ro/proxy/?px=aHR0cDovL2RpZ2l0b29sLmRjLmJtbXMucm86MTgwMS93ZWJjbGllbnQvRGVsaXZlcnl
NYW5hZ2VyP3BpZD0xMDA4NDkzJmFtcDtjdXN0b21fYXR0XzI9ZGlyZWN0

...acesta iti deschide o fereastra separata si abia de acolo se incarca apoi pdf-ul.
Ceva sugestii despre cum sa incarc de acolo mai multe fisiere deodata?
http://www.digibuc.r...periodice-c1574

Edited by GigiZmeu, 04 October 2017 - 20:38.

Nu este mai rapid sa descarci wget, sa accesezi Command Prompt si in directorul unde se afla executabilul sa dai Paste la comanda pe care am scris-o mai sus?

Nu are ce sa faca nici cu wget, site-ul ala foloseste javascript si cookies la greu, probabil pentru a impiedica downloadurile automate.

N-avem net si pe telefon 24/7? Accesam ce dorim cand avem nevoie, nu mai descarcam tot ce prindem.

Am testat comanda. Nu o puneam fara sa o testez. Deci descarca pdf-urile.
Iata si dovada:

 wget_test.png   205.64K   46 downloads

modoran, on 04 octombrie 2017 - 20:46, said:

GigiZmeu, on 04 octombrie 2017 - 20:34, said:

Pe linga faptul ca este linkul mult mai complicat, mai trebuie sa deschizi si vreo 4-5-6 pagini pina ajuni la acel link final.
Poti sa incerci programe de download in masa:
Teleport Pro - costa bani
HTTrack - gratis
Dar trebuie sa faci ceva probe, sa nu te trezesti ca descarci tot netul (cum ziceam, trebuie sa deschizi vreo 4-5-6 linkuri pentru a ajune la cel final, deci se complica treaba).

_-_, on 04 octombrie 2017 - 20:56, said:

CRed ca se refera la acest site: http://www.digibuc.r...periodice-c1574

buyonevideo, on 04 octombrie 2017 - 21:00, said:

Imi raspunsese mie care in mod evident m-am referit la site-ul (link-ul adaugat de initiator). Apare link-ul si la sfarsitul comenzii.

Cu acea extensie nu stiu daca va rezolva ceva.

Combo httrack+tor sau firefox+downloadall. Ar merge si windows explorer-ul pentru ftp dar este limitat la 500 de fisiere.
Daca site-ul foloseste javascript e mai greu (httrack are suport foarte limitat la acesta asa ca e ca la ruleta) dar cred ca se poate folosi o extensie pentru automatizare in browser gen "clic aici in locul acesta pe ecran" apoi "clic acolo" folosind comenzile browser-ului, ceva de genul acesta si specific acelui site. Daca este site popular exista un program de automatizare ceea ce nu ar fi cazul aici. Mass downloader nu e free.
La link-ul prezentat cred ca se poate face automatizarea prin "invatarea" click-urilor de mouse pe ecran, orbeste, si repetarea lor plus ca trebuie instalat si adobe acrobat sa se activeze butonul de download de la pdf. Atentie ca aplicatia de vizualizare pdf are doua locuri unde exista butonul de dld, in functie de deschiderea in aceeasi pagina sau in pagini diferite. Google "mouse click automation"
PS: 10x pentru link-uri, pe mine partea de tehnica ma intereseaza chiar daca fac "automatizare manuala cu click pe mouse cu deshtu" la fiecare fisier.
PS1: daca incerc sa schimb de pe desktop pe mobil la userstring nu se schimba nimic la al doilea site, nu face diferenta.

Edited by The Stressmaker, 04 October 2017 - 21:18.

Ala din Bucuresti foloseste un sistem conceput pentru a impiedica mass download.
E un trend sa se faca asta chiar daca nu exista motive sa se faca asa ceva.