Ich lade Daten herunter, die auf mehrere Dateien verteilt sind, die sich nach der Veröffentlichung nicht ändern. Daher --timestampingist es nicht gut genug, weil ständig überprüft wird, welche Ressource geändert wird, was in meinem Fall völlig sinnlos ist. --no-clobberwürde perfekt passen. Leider...
Ich laufe wgetso: wget --mirror --adjust-extension --convert-links --no-cookies http://tshepang.net -o log-main Ich bekomme eine Reihe dieser Nachrichten: Last-modified header missing -- time-stamps turned off. Ich nehme an, das bedeutet, dass Seiten immer wieder heruntergeladen werden, obwohl ich...
Ich rufe eine URL mit wget an: /usr/bin/wget --read-timeout=7200 https://site_url/s Wget führt in diesem Fall alle 15 Minuten eine GET-Anforderung durch, obwohl das Zeitlimit festgelegt ist. Warum geschieht dies? Der Anruf sollte nur einmal getätigt werden. Wie kann ich wget auf NOT Retry setzen?...
Die wgetManpage gibt dies unter dem Abschnitt für den --random-waitParameter an: Some web sites may perform log analysis to identify retrieval programs such as Wget by looking for statistically significant similarities in the time between requests. [...] A 2001 article in a publication devoted to...
wget hat eine Option, die -npdas Abrufen von Dateien aus einem übergeordneten Verzeichnis deaktiviert. Ich brauche etwas Ähnliches, aber etwas flexibler. Erwägen: www.foo.com/bar1/bar2/bar3/index.html Ich möchte alles bekommen, aber nicht "höher" (in der Baumhierarchie) als bar2(!). Also bar2sollte...
Wenn ich eine durch getrennte Liste von URLs habe \n, gibt es Optionen, an die ich übergeben kann, wgetum alle URLs herunterzuladen und im aktuellen Verzeichnis zu speichern, aber nur, wenn die Dateien noch nicht vorhanden
wget ist ein sehr nützliches Tool zum schnellen Herunterladen von Inhalten im Internet. Kann ich es jedoch zum Herunterladen von Hosting-Sites wie FreakShare, IFile.it Depositfiles, Uploaded, Rapidshare verwenden? Wenn ja, wie kann ich das
Ich schreibe ein Bash-Skript, das häufig wget verwendet. Um alle gängigen Parameter an einem Ort zu definieren, speichere ich sie in Variablen. Hier ist ein Stück Code: useragent='--user-agent="Mozilla/5.0 (Windows NT 6.1; WOW64; rv:27.0) Gecko/20100101 Firefox/27.0"'
Ich mache wgetriesige Dateien (über 100 GB) und vergleiche dann meine md5sum mit der Summe, die im Repository veröffentlicht wurde. Ob Sie es glauben oder nicht, es md5sumdauert nicht unerheblich lange, bis eine Datei dieser Größe ausgeführt wird. Daher möchte ich die Summe parallel zum Download...
Ich möchte diesen Patch anwenden, also habe ich Code kopiert, der bei "Index: src / options.h" beginnt und mit "+ @ item" endet, und ihn in eine neue Datei eingefügt, die im wgetQuellcode-Ordner erstellt wurde. Dann habe ich: $ patch -p0 < name_of_patch (Patch is indented 1 space.) patching file...
Wir haben ein Skript, das Mod-Sicherheit von Github herunterlädt, das kürzlich fehlgeschlagen ist. Auf den Servern wird CentOS 6 ausgeführt, aber RHEL 6 hat wahrscheinlich das gleiche Problem. Die Ausgabe ist: # wget
Stellen Sie sich so etwas vor: $ curlsh http://www.example.org > GET /foo/bar/bam ...output here... > POST /thing/pool ... ... result here.... Gibt es ein Tool, mit dem ich das machen kann?
Ich versuche, eine Datei über HTTP von einer Website mit herunterzuladen wget. Wenn ich benutze: wget http://abc/geo/download/?acc=GSE48191&format=file Ich bekomme nur eine Datei namens index.html?acc=GSE48191. Wenn ich benutze: wget http://abc/geo/download/?acc=GSE48191&format=file -o...
Ich arbeite an Solaris und versuche, Git zu aktualisieren, indem ich Git und alle seine Abhängigkeiten von Quellen erstelle. Wget kann keine Abhängigkeit herunterladen, die sich unter befindet https://ftp.gnu.org/gnu/libunistring/libunistring-0.9.7.tar.gz. $ wget
Ich möchte https://example.commit dem wgetBefehl herunterladen , aber es steht "nicht unterstütztes / nicht erkanntes Protokoll". Ich habe versucht, das zu verwenden, --secure protocol=''aber das funktioniert nicht. Ich habe die TAR-Datei von GNU wget heruntergeladen und versucht, sie zu...
Ich lade die HTML-Quellseite einer Website mit dem cURLBefehl herunter . Das Problem ist, ich möchte nicht die meisten Inhalte auf der Seite. Ich brauche nur die ersten 100 Zeilen der Quellseite. Gibt es eine Möglichkeit, den Download der Seite nach den ersten Zeilen zu stoppen? Derzeit...
Ich bin ziemlich neu wget. Ich muss nur wissen, wie ich den Zielordner festlegen kann, in dem Downloads gespeichert werden. Ich glaube das ist --directory-prefix.
Ich benutze den wgetBefehl im Hintergrund so wget -bq und es druckt Fortsetzung im Hintergrund, S. 31754. Wenn ich den Befehl jobseingebe, wird mein Job nicht angezeigt (obwohl der Download noch nicht abgeschlossen
Ich möchte testen, wie sich meine Website beim Spinnen verhält. Ich möchte jedoch alle URLs ausschließen, die das Wort "Seite" enthalten. Ich habe es versucht: $ wget -r -R "*page*" --spider --no-check-certificate -w 1 http://mysite.com/ Das -RFlag soll ein URL-Muster ablehnen, das das Wort "Seite"...
Ich versuche, mit wget den Text einer Webseite zu speichern. Ich renne: wget "http://www.finance.yahoo.com/q/op?s=GOOG" > goog.txt um zu versuchen, die Webseite in goog.txt zu speichern, aber stattdessen sagt mir wget: Saving to: `op?s=GOOG' Warum verhält sich wget so und wie kann ich das...