Wie kann ich alle Seiten von einer Website herunterladen?

Jede Plattform ist in Ordnung.

HTTRACK funktioniert wie ein Champion, um den Inhalt einer ganzen Site zu kopieren. Dieses Tool kann sogar die Teile erfassen, die benötigt werden, damit eine Website mit aktivem Code offline funktioniert. Ich bin erstaunt über das, was es offline replizieren kann.

Dieses Programm wird alles tun, was Sie dafür benötigen.

Fröhliches Jagen!

Wget ist ein klassisches Befehlszeilenprogramm für diese Art von Aufgaben. Es wird mit den meisten Unix / Linux-Systemen geliefert und ist auch für Windows erhältlich . Auf einem Mac ist Homebrew der einfachste Weg, es zu installieren ( brew install wget).

Sie würden etwas tun wie:

wget -r --no-parent http://site.com/songs/

Weitere Informationen finden Sie im Wget-Handbuch und seinen Beispielen oder zB in den folgenden Abschnitten:

• wget: Laden Sie einfach ganze Webseiten herunter

• Wget Beispiele und Skripte

Benutze wget:

wget -m -p -E -k www.example.com

Die Optionen erklärt:

-m, --mirror            Turns on recursion and time-stamping, sets infinite 
                          recursion depth, and keeps FTP directory listings.
-p, --page-requisites   Get all images, etc. needed to display HTML page.
-E, --adjust-extension  Save HTML/CSS files with .html/.css extensions.
-k, --convert-links     Make links in downloaded HTML point to local files.

Sie sollten sich ScrapBook , eine Firefox-Erweiterung, ansehen . Es verfügt über einen detaillierten Erfassungsmodus .

Der Internet Download Manager verfügt über ein Site Grabber-Dienstprogramm mit zahlreichen Optionen, mit denen Sie jede gewünschte Website ganz nach Ihren Wünschen herunterladen können.

1. Sie können das Limit für die Größe der herunterzuladenden Seiten / Dateien festlegen

2. Sie können die Anzahl der zu besuchenden Zweigstellen festlegen

3. Sie können das Verhalten von Skripten / Popups / Duplikaten ändern

4. Sie können eine Domain angeben. Nur unter dieser Domain werden alle Seiten / Dateien heruntergeladen, die die erforderlichen Einstellungen erfüllen

5. Die Links können zum Durchsuchen in Offline-Links konvertiert werden

6. Sie haben Vorlagen, mit denen Sie die obigen Einstellungen für Sie auswählen können

Die Software ist jedoch nicht kostenlos. Verwenden Sie die Testversion, um festzustellen, ob sie Ihren Anforderungen entspricht.

itsucks - so heißt das Programm!

Ich werde auf die Online-Pufferung eingehen, die Browser verwenden ...

In der Regel verwenden die meisten Browser einen Browser-Cache, um die Dateien, die Sie von einer Website herunterladen, für eine Weile zu speichern, damit Sie nicht immer wieder statische Bilder und Inhalte herunterladen müssen. Dies kann unter Umständen die Dinge erheblich beschleunigen. Im Allgemeinen sind die meisten Browser-Caches auf eine feste Größe beschränkt. Wenn diese Grenze erreicht wird, werden die ältesten Dateien im Cache gelöscht.

ISPs verfügen in der Regel über Caching-Server, auf denen Kopien von Websites gespeichert sind, auf die häufig zugegriffen wird, z. B. ESPN und CNN. Dies erspart ihnen die Mühe, diese Sites jedes Mal aufzurufen, wenn jemand in ihrem Netzwerk dorthin geht. Dies kann zu erheblichen Einsparungen bei der Anzahl der duplizierten Anfragen an externe Websites beim Internetdienstanbieter führen.

Ich mag den Offline Explorer .
Es ist eine Shareware, aber sehr gut und einfach zu bedienen.

Auch WebZip ist ein gutes Produkt.

Ich habe das seit vielen Jahren nicht mehr gemacht, aber es gibt immer noch ein paar Versorgungsunternehmen. Vielleicht möchten Sie es mit Web Snake versuchen . Ich glaube, ich habe es vor Jahren benutzt. Ich erinnerte mich sofort an den Namen, als ich Ihre Frage las.

Ich stimme Stecy zu. Bitte hämmern Sie nicht ihre Website. Sehr schlecht.

Probieren Sie den BackStreet Browser aus .

Es ist ein kostenloser, leistungsfähiger Offline-Browser. Ein Hochgeschwindigkeits-Programm zum Herunterladen und Anzeigen von Websites mit mehreren Threads. Durch die gleichzeitige Eingabe mehrerer Serveranforderungen kann BackStreet Browser schnell die gesamte Website oder Teile einer Website herunterladen, einschließlich HTML, Grafiken, Java-Applets, Sound und anderer benutzerdefinierbarer Dateien. Alle Dateien auf Ihrer Festplatte werden entweder im nativen Format gespeichert. oder als komprimierte ZIP-Datei und offline anzeigen.

Teleport Pro ist eine weitere kostenlose Lösung, mit der alle Dateien von jedem Ziel kopiert werden können (es gibt auch eine kostenpflichtige Version, mit der Sie mehr Seiten mit Inhalten abrufen können).

DownThemAll ist ein Firefox-Add-On, das den gesamten Inhalt (z. B. Audio- oder Videodateien) für eine bestimmte Webseite mit einem einzigen Klick herunterlädt. Dadurch wird nicht die gesamte Website heruntergeladen, aber möglicherweise wurde nach so etwas gesucht.

Für Linux und OS X: Ich habe eine Grab-Site für die Archivierung ganzer Websites in WARC- Dateien geschrieben. Diese WARC-Dateien können durchsucht oder extrahiert werden. Mit grab-site können Sie steuern, welche URLs mit regulären Ausdrücken übersprungen werden sollen. Diese können geändert werden, wenn der Crawl ausgeführt wird. Es enthält auch eine Reihe von Standardeinstellungen zum Ignorieren von Junk-URLs.

Es gibt ein Web-Dashboard zum Überwachen von Crawls sowie zusätzliche Optionen zum Überspringen von Videoinhalten oder Antworten über eine bestimmte Größe.

Macht wget

Obwohl wget bereits erwähnt wurde, war diese Ressource und Befehlszeile so nahtlos, dass ich dachte, es verdient Erwähnung: wget -P /path/to/destination/directory/ -mpck --user-agent="" -e robots=off --wait 1 -E https://www.example.com/

Sehen Sie sich diesen Code an, der auf der EXPLAIN-Shell erklärt wird

Der ehrwürdige FreeDownloadManager.org hat auch diese Funktion.

Free Download Manager hat es in zwei Formen in zwei Formen: Site Explorer und Site Spider :

Site Explorer Mit
Site Explorer können Sie die Ordnerstruktur einer Website anzeigen und auf einfache Weise die erforderlichen Dateien oder Ordner herunterladen.
HTML Spider Mit HTML Spider können
Sie ganze Webseiten oder sogar ganze Websites herunterladen. Das Tool kann so angepasst werden, dass nur Dateien mit den angegebenen Erweiterungen heruntergeladen werden.

Ich finde, dass der Site Explorer hilfreich ist, um festzustellen, welche Ordner eingeschlossen oder ausgeschlossen werden sollen, bevor Sie versuchen, die gesamte Site herunterzuladen. Dies gilt insbesondere dann, wenn sich auf der Site ein ganzes Forum versteckt, das Sie beispielsweise nicht herunterladen möchten.

Download von HTTracker Es werden sehr einfache Schritte zum Herunterladen von Websites ausgeführt.

Download-Link: http://www.httrack.com/page/2/

Ein Video, das Ihnen dabei helfen kann: https://www.youtube.com/watch?v=7IHIGf6lcL4

Firefox kann das nativ (mindestens FF 42). Verwenden Sie einfach "Seite speichern"

Ich glaube, Google Chrome kann dies auf Desktop-Geräten tun. Rufen Sie einfach das Browser-Menü auf und klicken Sie auf Webseite speichern.

Beachten Sie auch, dass Dienste wie pocket die Website möglicherweise nicht wirklich speichern und daher anfällig für Links sind.

Beachten Sie außerdem, dass das Kopieren der Inhalte einer Website möglicherweise das Urheberrecht verletzt, sofern dies zutrifft.