Teil einer Webseite kopieren, webspider teleport, HTTrack und WebCopier

Gast #5286550
Lesenswert?
• ▲
▼
Servus,

ich will Webseite auf mein Rechner kopieren , aber nur ein Teil oder 
Bereich Zb.:

von: /index.php?route=product/product&product_id=1
bis: /index.php?route=product/product&product_id=1000

Ich will nicht komplette Webseite kopieren!

Und suche dazu ein passendes Programm, habe jetzt 3 getestet:

teleport, HTTrack und WebCopier,
mit den kann man komplett Webseite wunderbar kopieren, aber keine 
Teilbereiche wie oben erwähnt.

Kennt jemand zufällig ein Programm (Webspider) mit dem ich nur 
Teilbereiche kopieren kann?!

Gruß
Gast #5286753
Lesenswert?
• ▲
▼
Ich hab versucht, hat leider mit Bash und wget nicht funktioniert.

1
wget --page-requisites --span-hosts --convert-links --adjust-extension http://www.www.xxxxx.xx/productdetails.php?product_id={37560..37570}


Cannot write to ‘www.xxxxx.xx/productdetails.php?product_id=37565.html’ 
(Success).
--2018-01-21 00:15:25-- 
http://www.xxxxx.xx/productdetails.php?product_id=37566
Connecting to www.xxxxx.xx (www.xxxxx.xx)|xxx.xx.xxx.xx|:80... 
connected.
HTTP request sent, awaiting response... 200 OK
Length: unspecified [text/html]
www.xxxxx.xx/productdetails.php?product_id=37566.html: No such file or 
directory

Cannot write to ‘www.xxxxx.xx/productdetails.php?product_id=37566.html’ 
(Success).
--2018-01-21 00:15:26-- 
http://www.xxxxx.xx/productdetails.php?product_id=37567
Connecting to www.xxxxx.xx (www.xxxxx.xx)|xxx.xx.xxx.xx|:80... 
connected.
HTTP request sent, awaiting response... 200 OK
Length: unspecified [text/html]
www.xxxxx.xx/productdetails.php?product_id=37567.html: No such file or 
directory
Gast #5287128
Lesenswert?
• ▲
▼
mit wget geht nicht, aber mit curl geht es:
1
start=37550; 
2
end=37560; 
3
for var_name in $(seq $start $end); do 
4
curl -o ordner/"$var_name"produkte.html http://www.xxxxx.xx/productdetails.php?product_id="$var_name"
5
done
Gast #5287913
Lesenswert?
• ▲
▼
und wer noch im login bereich was kopieren will Zb. seine Bestellungen, 
muss sich mit Firefox einlogen, dann die Cookies kopieren mit "als cURL 
Adresse kopieren" :
https://stackoverflow.com/questions/12399087/curl-to-access-a-page-that-requires-a-login-from-a-different-page

hier Beispiel, es werden 2 Bestellungen 855 und 856 kopiert:
1
start=855; 
2
end=856; 
3
for var_name in $(seq $start $end); do 
4
curl -o ordner/"$var_name"-bestellungen.html http://www.xxxx.xx/index.php/my-account/view-order/"$var_name"/ -H "Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8" --compressed -H "Accept-Language: de,en-US;q=0.7,en;q=0.3" -H "Connection: keep-alive" -H "Cookie: comment_author_xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx=S_Service; comment_author_email_xxxxxxxxxxxxxxxxxxxxxxxxx=xxx-xx"%"40xxxx.xxx; wordpress_test_cookie=WP+Cookie+check; wordpress_logged_in_xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx" -H "Host: www.xxxx.xx" -H "Referer: http://www.xxxxx.xx/index.php/my-account/" -H "Upgrade-Insecure-Requests: 1" -H "User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:59.0) Gecko/20100101 Firefox/59.0"
5
done

Antwort schreiben

Eine eigene Frage? Dieser Thread ist über 8 Jahre alt. Stell sie in einem eigenen Thread – dort lesen mehr Leute mit, und sie wird öfter und schneller beantwortet.

Neuen Thread starten

Eine Lösung, Ergänzung oder Rückmeldung zu diesem Thread? Dann antworte hier.

Formatierung
  • [c]C-Code[/c]
  • [code]Code in anderen Sprachen, ASCII-Zeichnungen[/code]
  • [math]Formel in LaTeX-Syntax[/math]
  • [[Titel]] – Link zu einem Artikel
  • Verweis auf einen anderen Beitrag: Rechtsklick auf dessen Beitrags-ID (#8078628), „Adresse kopieren“, in den Text einfügen

Mehr zur Formatierung

Längeren Sourcecode als Anhang, nicht in den Text. JPG nur für Fotos und Scans; Zeichnungen und Screenshots als PNG oder GIF. Siehe Bildformate.

Schon registriert? Anmelden

Wird nicht angezeigt. Wir schicken dir einen Link; sobald du damit bestätigst, erscheint dein Beitrag.

Mit dem Abschicken legst du einen kostenlosen Account an und erkennst die Nutzungsbedingungen und die Datenschutzerklärung an.