Ich benutze für so etwas normalerweise wget:
http://www.thegeekstuff.com/2009/09/...some-examples/
(Beispiel 10).
Falls der Webserver solche Crawl-Versuche abblockt, bringt der zusätzliche Parameter --wait=20 einen weiter (in dem Fall wartet wget 20 Sekunden, bis es zur nächsten Seite weiter"geht").
Es gibt wget auch für Windows: http://gnuwin32.sourceforge.net/packages/wget.htm

LinkBack URL
About LinkBacks
Zitieren
