Suchen Sie nach einem Web Spider / Download-Programm, das vorhandene Browser-Cookies verwenden und Javascript verarbeiten kann

906
Matt

Ich suche nach einem Programm, um eine Website zu spinnen * und den Inhalt auf die Festplatte herunterzuladen. Ich habe jedoch die folgenden Voraussetzungen, die die Programme, die ich ausprobiert habe, zu stürzen scheinen:

  1. Der Anmeldevorgang der Site ist auf mehrere Seiten verteilt. Daher muss ich die Sitzung manuell mit meinem Webbrowser starten, authentifizieren, den Spider starten und ihm Zugriff auf die Cookies gewähren.
  2. Viele der Links führen Javascript aus und geben dann den Inhalt zurück.
  3. Viele der Links geben PDF-Dokumente zurück (einige Spider unterstützen dies).

Bis jetzt kann ich keine Spinne finden, die mit # 1 und # 2 umgehen kann.

* Die Website ist ein Rechnungszahlungsservice und hat meine Rechnungshistorie. Ich möchte den Dienst nicht mehr nutzen, aber ich möchte die Historie beibehalten.

2

1 Antwort auf die Frage

2
Saxtus

Tennyson Maxwells Teleport Ultra erfüllt Ihre Anforderungen.

Verwandte Probleme