download volledige website die achter een login-pagina zit

ygeffens
Elite Poster
Elite Poster
Berichten: 922
Lid geworden op: 08 Sep 2011
Locatie: Arendonk
Bedankt: 49 keer
Uitgedeelde bedankjes: 61 keer

download volledige website die achter een login-pagina zit

Berichtdoor ygeffens » 1 week 6 dagen 2 uur geleden (19 Nov 2020, 10:57)

Hi

Ik zoek een manier om een volledige website te downloaden, dus niet een enkele pagina.
De tool moet dus recursief tewerk gaan.

Bij voorkeur een extensie van een browser, want je moet inloggen op de website.

De Chrome extensies die ik al heb bekeken kunnen enkel maar elementen van een webpagina, of slechts 1 pagina.

murdock447
Pro Member
Pro Member
Berichten: 243
Lid geworden op: 28 Sep 2008
Bedankt: 15 keer
Uitgedeelde bedankjes: 18 keer

Re: download volledige website die achter een login-pagina zit

Berichtdoor murdock447 » 1 week 6 dagen 20 minuten geleden (19 Nov 2020, 12:52)

met Httrack kun je een site volledig gaan downloaden voor offline gebruik

http://www.httrack.com/

ygeffens
Elite Poster
Elite Poster
Berichten: 922
Lid geworden op: 08 Sep 2011
Locatie: Arendonk
Bedankt: 49 keer
Uitgedeelde bedankjes: 61 keer

Re: download volledige website die achter een login-pagina zit

Berichtdoor ygeffens » 1 week 5 dagen 22 uur geleden (19 Nov 2020, 15:11)

Bedankt

Ondertussen Xcode en MacPorts geïnstalleerd

daarna ./configure gedaan en dit eindigt met

Code: Selecteer alles

...
checking zlib.h presence... yes
checking for zlib.h... yes
checking for inflateEnd in -lz... (cached) yes
checking zlib in /usr... ok
checking whether to enable https support... yes
checking for EVP_get_digestbyname in -lcrypto... no
checking for SSL_CTX_new in -lssl... no
configure: error: not available


En daar eindigt mijn kennis om dat op te lossen...

Hierna lukt 'make' niet bij gebrek aan make-file.

bdeblier
Member
Member
Berichten: 94
Lid geworden op: 29 Jul 2016
Bedankt: 7 keer
Recent bedankt: 1 keer
Uitgedeelde bedankjes: 7 keer

Re: download volledige website die achter een login-pagina zit

Berichtdoor bdeblier » 1 week 5 dagen 21 uur geleden (19 Nov 2020, 15:51)

Ontbrekende "libssl" library, ofwel een te oude versie. Caveat: het is al veel te lang geleden dat ik nog op Mac ontwikkeld heb.

Stroper
Elite Poster
Elite Poster
Berichten: 1280
Lid geworden op: 24 Aug 2011
Bedankt: 123 keer
Recent bedankt: 2 keer
Uitgedeelde bedankjes: 75 keer

Re: download volledige website die achter een login-pagina zit

Berichtdoor Stroper » 1 week 5 dagen 20 uur geleden (19 Nov 2020, 16:36)

ygeffens schreef:Bedankt

Ondertussen Xcode en MacPorts geïnstalleerd

En daar eindigt mijn kennis om dat op te lossen...

Hierna lukt 'make' niet bij gebrek aan make-file.

Is het dan niet eenvoudiger om het via homebrew te installeren.

Al is het niet aan te raden beiden tezelfdertijd te gebruiken.

ygeffens
Elite Poster
Elite Poster
Berichten: 922
Lid geworden op: 08 Sep 2011
Locatie: Arendonk
Bedankt: 49 keer
Uitgedeelde bedankjes: 61 keer

Re: download volledige website die achter een login-pagina zit

Berichtdoor ygeffens » 1 week 5 dagen 14 uur geleden (19 Nov 2020, 22:28)

Ondertussen via homebrew aan 't proberen, maar ik zie niet hoe mij dat gaat helpen.

Ik moet eerst kunnen inloggen op een website, voor ik de pagina's kan zien die ik wil downloaden.

Dus ik heb nog een tip nodig om in te kunnen loggen binnen httrack zelf.

user:[email protected] is niet de oplossing, ik moet inloggen via Onelogin

GuntherDW
Elite Poster
Elite Poster
Berichten: 1012
Lid geworden op: 11 Mei 2007
Locatie: zwijndrecht
Bedankt: 65 keer
Recent bedankt: 1 keer
Uitgedeelde bedankjes: 10 keer
Contact:

Re: download volledige website die achter een login-pagina zit

Berichtdoor GuntherDW » 1 week 5 dagen 14 uur geleden (19 Nov 2020, 23:00)

Als de pagina niet achter een cloudflare zit kan je een ouderwetse "wget -m" gebruiken. Of inderdaad httrack. (of eenders welke andere spider eigenlijk)
Je neemt dan gewoon de cookies over welke in je browser zitten en gaan maar.

Als het achter cloudflare zit werkt het een klein beetje anders maar kost het iets meer moeite.

ygeffens
Elite Poster
Elite Poster
Berichten: 922
Lid geworden op: 08 Sep 2011
Locatie: Arendonk
Bedankt: 49 keer
Uitgedeelde bedankjes: 61 keer

Re: download volledige website die achter een login-pagina zit

Berichtdoor ygeffens » 1 week 5 dagen 4 uur geleden (20 Nov 2020, 08:59)

Ik gebruik Chrome op mijn mac, daarbij blijken de cookies in een sql-database te zitten. En in safari het het 1 binary-file voor allemaal.

Hoe krijg ik "die ene die ik nodig heb" naar httrack ?


Terug naar “Non-Windows”

Wie is er online

Gebruikers op dit forum: Geen geregistreerde gebruikers en 1 gast