wget: Unterschied zwischen den Versionen
Michi (Diskussion | Beiträge) |
Michi (Diskussion | Beiträge) |
||
Zeile 74: | Zeile 74: | ||
{{url|US|GNOME|eng|http://projects.gnome.org/gwget/|Gwget|Alte URL: http://gwget.sourceforge.net/}} | {{url|US|GNOME|eng|http://projects.gnome.org/gwget/|Gwget|Alte URL: http://gwget.sourceforge.net/}} | ||
{{url_dewikipedia|Wget|Wget}} | {{url_dewikipedia|Wget|Wget}} | ||
{{url|||eng|http://www.editcorp.com/Personal/Lars_Appel/wget/v1/wget_7.html | {{url|US|Lars Appel|eng|http://www.editcorp.com/Personal/Lars_Appel/wget/|GNU wget for MPE/iX| | ||
* [http://www.editcorp.com/Personal/Lars_Appel/wget/v1/wget_7.html Examples]}} | |||
{{Fuss}} | {{Fuss}} | ||
Version vom 16. August 2012, 09:13 Uhr
Der Shell-Befehl wget ist ein Downloadmanager, der über FTP, HTTP und HTTPS einzelne Dateien über ein Rechnernetz herunterlädt. Das Programm kann einen abgebrochenen Herunterladevorgang wieder aufnehmen, vollständige Webseiten mit Bildern sowie vollständige Websites herunterladen, etwa zur Archivierung. Zusätzlich kann über das Angeben einer IP-Adresse Multipath Routing genutzt, ein Webbrowser vorgetäuscht oder es können automatisch zufällig lange Pausen eingelegt werden.
gwget ist eine grafische Oberfläche für wget.
Konfiguration
Die systemweiten Voreinstellungen für wget werden in der Datei "/etc/wgetrc" vorgenommen.
Benutzerbezogene Voreinstellungen werden über die Datei "~/.wgetrc" vorgenommen.
Optionen
Option | Beschreibung |
---|---|
-A | (accept) Angabe einer Liste mit Endungen von herunterzuladenenden Dateien. |
-b | (background) wget läuft im Hintergrund, auch nach Abmeldung vom Rechner. |
-E | (extension) Heruntergeladene Dateien werden mit der Endung ".html" versehen, auch wenn die Dateien auf dem Originalrechner dynamisch erzeugt wurden und gar keine Endung besitzen. |
--http-passwd= | Mitgeben eines Passworts |
--http-user= | Mitgeben eines Benutzernamens |
-k | Nach dem Herunterladen werden links so umgewandelt, dass sie fürs lokale Ansehen passen. Verknüpfungen zu ebenfalls heruntergeladenen Dateien werden über einen relativen Pfad referenziert; nicht heruntergeladene Dateien behalten ihren vollständigen URL. |
-l 2 | (level) Rekursionstiefe (hier zwei Verzeichnisebenen). |
--limit-rate=20k | Festlegung, wie viele KByte pro Sekunde für das Herunterladen zur Verfügung stehen. |
-nH | (no Host) anstatt auf der eigenen Platte für jede URL ein eigenes Verzeichnis anzulegen, wird alles im aktuellen Verzeichnis gespeichert. |
-o logfile | Die Protokolldatei wird in die Datei "logfile" geschrieben. Ohne Angabe wird das Log standardmässig in die Datei "wget-log" im aktuellen Verzeichnis geschrieben. |
-p | Zusätzlich zu den heruntergeladenen Dateien werden auch die darin enthaltenen Bilder mit heruntergeladenen, auch wenn sie sich in in anderen Verzeichnisebenen befinden. |
-Q40m | Begrenzung der Gesamtgrösse des Download-Volumens auf 40 MB. |
-R | (reject) Angabe einer Liste mit Endungen von nicht herunterzuladenden Dateien. |
-r | (recursive) Verfolgen "lokaler" Links auf dem Server und rekursive Spiegelung. |
Verwendung
Herunterladen der Seite "index.html" sowie aller dort eingebetteten links mit einer Rekursionstiefe von 1.
$ wget -r -l 1 www.linux-user.de
Es werden nur Dateien mit den Endungen "jpg", "png" und "gif" heruntergeladen. Die zuerst ebenfalls heruntergeladene Datei "index.html" wird am Ende wieder gelöscht.
$ wget -r -l 1 -A jpg,png,gif www.linux-user.de
Dateien mit den Endungen "avi", "mpg" und "wmv" werden nicht heruntergeladen.
$ wget -r -l 1 -R avi,mpg,wmv www.linux-user.de
Herunterladen dynamisch erzeugter Inhalte als Datei "story?storyid=11629.html".
$ wget -E http://www.linux-community.de/Neues/story?storyid=11629
wget ist nicht interaktiv, erwartet also keine Eingaben des Benutzers. Das ist ein Vorteil, wenn es auf einem entfernten Rechner eingesetzt wird, der über eine SSH-Sitzung gesteuert wird:
- Aufbau der SSH-Verbindung
- Start des Programms screen: $ screen
- Start des Downloads mit dem passenden wget-Befehl
- Verlassen von Screen mit CTRL+A und einem abschliessenden D
- Abmelden (gestartete Prozesse laufen im Screen weiter)
- Beim nächsten Anmelden kann die screen-Sitzung wieder belebt werden: $ screen -r
Weblinks
Herausgeber | Sprache | Webseitentitel | Anmerkungen |
---|---|---|---|
GNOME | eng | Gwgetwbm | Alte URL: http://gwget.sourceforge.net/ |
Wikipedia | ger | Wgetwbm | Enzyklopädischer Artikel |
Lars Appel | eng | GNU wget for MPE/iXwbm |