{"id":4645,"date":"2020-03-24T17:41:47","date_gmt":"2020-03-24T17:41:47","guid":{"rendered":"https:\/\/profi-tutorials.de\/linux\/?p=4645"},"modified":"2020-09-18T13:28:41","modified_gmt":"2020-09-18T13:28:41","slug":"befehl-wget","status":"publish","type":"post","link":"https:\/\/profi-tutorials.de\/linux\/grundlagen\/befehl-wget\/","title":{"rendered":"Der Befehl wget"},"content":{"rendered":"

Der Befehl wget wird für das Herunterladen von Dateien aus dem Internet verwendet. Unterstützt werden die Protokolle HTTP, HTTPS und FTP<\/a>. Außerdem kann der Befehl auch Dateien über HTTP Proxys abrufen. Neben der einfachen Verwendung als Downloadmanager kann wget jedoch auch in vielen anderen Bereichen Anwendung finden. So kann er beispielsweise in Shell-Skripten verwendet- und ohne jegliche Benutzerinteraktion im Hintergrund ausgeführt werden.<\/p>\n

In diesem Beitrag lernen Sie die wichtigsten Grundlagen, sowie wichtige Funktionen und Optionen des Befehls kennen.<\/p>\n

Installation<\/h2>\n

Wget <\/strong>ist unter den meisten UNIX-\/Linux-Betriebssystemen<\/strong> standardmäßig vorinstalliert. Falls dies bei Ihnen jedoch nicht der Fall sein sollte, dann können Sie ihn auch mit dem gleichnamigen Paket nachinstallieren. Verwenden Sie dazu den folgenden Befehl:<\/p>\n

apt-get install wget<\/pre>\n
Wenn Sie näheres zur Paket- und Quellenverwaltung<\/strong> erfahren wollen, dann lesen Sie auch unseren Beitrag zum apt Paketmanager<\/strong><\/a>.<\/p>\n
Aufruf des Befehls<\/h2>\n
Standardmäßig lässt sich wget <\/strong>mit der folgenden Syntax<\/a> aufrufen:<\/p>\n
wget [Optionen] [URL(s)]<\/pre>\n
Ohne Angabe jeglicher Optionen können Sie wget <\/strong>eine oder mehrere URLs <\/strong>übergeben. Diese werden dann von dem Befehl heruntergeladen <\/strong>und im aktuellen Arbeitsverzeichnis <\/strong>abgespeichert.<\/p>\n
Beispiel: Wget ohne Optionen<\/h5>\n
In diesem Beispiel wird die “index.html<\/a>”<\/strong> dieser Website, welche unter “https:\/\/profi-tutorials.de”<\/strong> erreichbar ist, heruntergeladen und im aktuellen Arbeitsverzeichnis <\/strong>gespeichert.<\/p>\n
Eingabe:<\/h6>\n
wget https:\/\/profi-tutorials.de<\/p>\n
Ausgabe:<\/h6>\n
\"linux-wget-beispiel-1\"<\/span><\/p>\n
Wichtige Funktionen \/ Optionen<\/h2>\n
Sie haben bei der Verwendung von wget <\/strong>eine Vielzahl von Funktionen und Optionen zur Auswahl, welche wir in diesem Beitrag jedoch nicht alle im Detail behandeln können. Aus diesem Grund werden hier nur die für die alltägliche Arbeit wichtigsten Funktionen einmal aufgeführt.<\/p>\n
-t – Anzahl Versuche festlegen<\/h3>\n
Wenn Sie einen URL Download<\/strong> über eine langsame Verbindung starten, dann kann es vor Abschluss des Downloads zu Verbindungsabbrüchen <\/strong>kommen. Wget <\/strong>versucht in diesen Fällen, den Download möglichst wieder fortzuführen. Wenn die voreingestellte Anzahl Versuche<\/strong>, welche 20 <\/strong>beträgt, jedoch verbraucht sind, dann wird wget <\/strong>den Download abbrechen. Wenn Sie eine andere Anzahl Versuche<\/strong> verwenden möchten, dann können Sie mit der Option -t<\/strong> (t<\/strong>ries) leicht Ihren eigenen Wert festlegen:<\/p>\n
wget -t [Versuche] [URL(s)]<\/pre>\n
-c – Download fortsetzen<\/h3>\n
​Ist ein Download <\/strong>​nun aus jeglichen Gründen abgebrochen worden, beispielsweise manuell, dann können Sie Ihn auch zu einem späteren Zeitpunkt noch fortsetzen<\/strong>. Verwenden Sie dazu die Option -c<\/strong> (c<\/strong>ontinue):<\/p>\n
wget -c [URL(s)]<\/pre>\n
Voraussetzung hierbei ist jedoch, dass die lokalen <\/strong>Dateien <\/strong>des ersten Downloads noch auf dem Dateisystem<\/a> vorhanden sind. Wenn Sie versuchen, einen abgebrochenen <\/strong>Download ohne Verwendung der -c Option<\/strong> fortzuführen, dann wird wget <\/strong>die vorhandenen Dateien ignorieren und von vorne<\/strong> beginnen.<\/p>\n
Beispiel: Wget Download fortsetzen<\/h5>\n
Hier wurde der Download einer größeren Datei nach kurzer Zeit abgebrochen. Er soll zu einem späteren Zeitpunkt jedoch fortgesetzt werden.<\/p>\n
Vorher (Download abgebrochen):<\/h6>\n
Ein zuvor gestarteter Download <\/strong>wurde manuell mit der Tastenkombination [Strg+C]<\/strong> abgebrochen. Der Download war zu diesem Zeitpunkt zu 11%<\/strong> abgeschlossen.<\/p>\n
\"linux-wget-continue-1\"<\/span><\/p>\n
Eingabe:<\/h6>\n
Durch Eingabe des Befehls zum Download <\/strong>derselben Datei und zusätzliches Anfügen der Option -c<\/strong> kann der Download dort fortgesetzt werden, wo er abgebrochen wurde. (Link für dieses Beispiel gekürzt)<\/p>\n
wget -c https:\/\/cdimage.debian.org\/[…]\/debian-10.3.0-amd64-xfce-CD-1.iso<\/a><\/p>\n
Ausgabe (Download wird fortgesetzt):<\/h6>\n
An der Ausgabe <\/strong>des Befehls <\/strong>sehen Sie, dass wget <\/strong>die bereits heruntergeladenen Teile der Datei gefunden hat und den Download entsprechend mit einem Offset <\/strong>fortführt. Die Fortschrittsanzeige <\/strong>zeigt mithilfe von dem Plus ‘+’ Symbol<\/strong> den bereits vorhandenen Fortschritt <\/strong>an.<\/p>\n
\"linux-wget-continue-2\"<\/span><\/p>\n
-i – URLs aus einer Datei auslesen<\/h3>\n
Mit der Option -i<\/strong> (i<\/strong>nput file) haben Sie die Möglichkeit, URLs <\/strong>aus einer lokalen oder auch externen Datei auszulesen<\/strong> und für den Download zu verwenden:<\/p>\n
wget -i [Dateipfad] [URL(s)]<\/pre>\n
Die angegebene Datei sollte die gewünschten URLs <\/strong>untereinander auflisten, sodass für jede URL <\/strong>eine Zeile verwendet wird. Alternativ haben Sie auch die Möglichkeit, anstelle eines Dateipfads <\/strong>den Parameter ‘-‘<\/strong> zu übergeben: Hierbei werden die URLs <\/strong>aus dem Standard-Input<\/strong> (stdin) gelesen.<\/p>\n
Wenn Sie mehr über den Standard-Input<\/strong>, sowie den Standard-Output<\/strong> erfahren wollen, dann lesen Sie auch unseren Beitrag zu diesem Thema<\/a>.<\/p>\n
Bei Verwendung der Option <\/strong>ist es nicht notwendig, URLs <\/strong>auf der Befehlszeile <\/strong>bzw. direkt im Befehl <\/strong>anzugeben. Wenn Sie dennoch ​beide Quellen verwenden, dann wird wget <\/strong>zunächst die URLs <\/strong>der Befehlszeile <\/strong>herunterladen <\/strong>und anschließend mit den URLs <\/strong>aus der angegebenen Datei <\/strong>fortfahren.<\/p>\n
Beispiel: Wget URLs aus einer Datei auslesen<\/h5>\n
Hierbei werden einige URLs <\/strong>in einer Textdatei mit dem Namen “urls.txt”<\/strong> abgespeichert. Diese sollen im Anschluss durch wget <\/strong>heruntergeladen und im aktiven <\/strong>Arbeitsverzeichnis <\/strong>gespeichert werden.<\/p>\n
Inhalt Textdatei (“urls.txt”):<\/h6>\n
\"linux-wget-i-urls\"<\/span><\/p>\n
Eingabe:<\/h6>\n
wget -i urls.txt<\/p>\n
Ausgabe:<\/h6>\n
Im Terminal<\/a> wird nun der Fortschritt der einzelnen URL-Downloads<\/strong> aufgelistet.<\/p>\n
\"linux-wget-i-ausgabe\"<\/span><\/p>\n
Inhalt Zielverzeichnis bzw. Arbeitsverzeichnis (ls -l):<\/h6>\n
Im Arbeitsverzeichnis <\/strong>befinden sich nun die heruntergeladenen Dokumente. Die einheitliche Benennung der Dateien resultiert daraus, dass die Bezeichnungen der heruntergeladenen Dokumente <\/strong>mit “index.html”<\/strong> alle gleich sind – der Inhalt ist jedoch unterschiedlich!<\/p>\n
\"linux-wget-i-ls\"<\/span><\/p>\n
​-O – Ausgabedatei festlegen<\/h3>\n
Durch Festlegen der Ausgabedatei<\/strong> mit der Option -O<\/strong> (o<\/strong>utput document) werden die heruntergeladenen Dokumente <\/strong>nicht mehr in Ihre jeweiligen Dateien geschrieben. Stattdessen werden sie miteinander konkateniert<\/a> <\/strong>und in eine gemeinsame Datei<\/strong> mit dem von Ihnen festgelegten Namen\/Pfad<\/strong> geschrieben:<\/p>\n
wget -O [Dateipfad] [URL(s)]<\/pre>\n
Auch hier haben Sie wieder die Möglichkeit, den Parameter ‘-‘<\/strong> zu übergeben – Dieser führt zur Ausgabe <\/strong>der heruntergeladenen Inhalte im Standard-Output<\/strong>.<\/p>\n
Beispiel: Wget Ausgabedatei festlegen<\/h5>\n
In diesem Beispiel sollen alle heruntergeladenen Dokumente <\/strong>in eine Zieldatei <\/strong>mit dem Namen “profi-tutorials-beitraege.txt”<\/strong> geschrieben werden. Wir verwenden wieder die bereits bekannte Textdatei “urls.txt”<\/strong> als Quelle für unsere URLs<\/strong>.<\/p>\n
Inhalt Textdatei (“urls.txt”):<\/h6>\n
\"linux-wget-i-urls\"<\/span><\/p>\n
Eingabe:<\/h6>\n
wget -i urls.txt -O profi-tutorials-beitraege.txt<\/p>\n
Inhalt Zielverzeichnis bzw. Arbeitsverzeichnis (ls -l):<\/h6>\n
Im Arbeitsverzeichnis <\/strong>befindet sich nun die gewünschte Datei “profi-tutorials-beitraege.txt”<\/strong>, welche den gesamten Inhalt der Dokumente <\/strong>enthält, die unter den obigen URLs <\/strong>erreichbar sind.<\/p>\n
\"linux-wget-o\"<\/span><\/p>\n
-P – Ausgabeverzeichnis festlegen<\/h3>\n
Die Option -P<\/strong> (P<\/strong>refix) legt das Verzeichnis-Präfix<\/strong> auf den angegebenen Pfad <\/strong>fest, sodass alle heruntergeladenen Dateien und Unterverzeichnisse unter diesem gespeichert werden.<\/p>\n
wget -P [Verzeichnis-Präfix] [URL(s)]<\/pre>\n
Der Standardwert <\/strong>ist hierbei ‘.’<\/strong> und gibt das aktive Arbeitsverzeichnis<\/strong> an.<\/p>\n
Beispiel: Wget Ausgabeverzeichnis festlegen<\/h5>\n
In diesem Beispiel soll das heruntergeladene Dokument <\/strong>in dem Verzeichnis \/home\/hellberg\/Downloads\/<\/strong> abgelegt werden.<\/p>\n
Eingabe:<\/h6>\n
wget -P \/home\/hellberg\/Downloads\/ https:\/\/profi-tutorials.de\/linux\/netzwerke\/befehl-ssh\/<\/p>\n
Ausgabe:<\/h6>\n
Im Terminal wird wieder der Fortschritt des URL-Downloads<\/strong> gezeigt. Hier ist auch zu sehen, dass das heruntergeladene Dokument <\/strong>in unserem zuvor angegebenen Zielverzeichnis <\/strong>gespeichert wird.<\/p>\n
\"linux-wget-prefix-ausgabe\"<\/span><\/p>\n
Inhalt Zielverzeichnis (ls -l \/home\/hellberg\/Downloads\/):<\/h6>\n
Im Zielverzeichnis<\/strong>, welches wir mit der Option -P<\/strong> angegeben haben, befindet sich nun das heruntergeladene Dokument<\/strong>.<\/p>\n
\"linux-wget-prefix-ls\"<\/span><\/p>\n
-r – Rekursiver Download<\/h3>\n
Wget <\/strong>ist dazu in der Lage, heruntergeladene HTML Dokumente<\/strong> zu parsen, um schließlich auch den Inhalt referenzierter <\/strong>Dokumente <\/strong>\/<\/strong>Dateien <\/strong>herunterzuladen. Auf diese Weise ist es möglich, rekursiv<\/a> <\/strong>ganze Webseiten herunterzuladen. Die Syntax lautet folgendermaßen:<\/p>\n
wget -r [URL(s)]<\/pre>\n
​Bei der Verwendung der Option sollten Sie jedoch beachten, dass nicht nur Remote Server<\/strong> durch Ihren Download <\/strong>überladen <\/strong>werden können – Auch auf Ihrem eigenen System <\/strong>kann es durch das rekursive <\/strong>Herunterladen <\/strong>schnell zu einer Überlastung <\/strong>der Netzwerk-Bandbreite<\/strong> oder auch des Arbeitsspeichers <\/strong>bzw. der CPU <\/strong>kommen.<\/p>\n
Es stehen noch viele weitere Optionen bereit, die den Funktionsumfang des rekursiven <\/strong>Downloads <\/strong>um ein Vielfaches erweitern <\/strong>und Ihnen mehr Kontrolle <\/strong>über den Ablauf verleihen. Einige dieser Optionen werden im Folgenden vorgestellt.<\/p>\n
-l Rekursionstiefe festlegen<\/h4>\n
Mit der Option -l<\/strong> (l<\/strong>evel) können Sie die Rekursionstiefe<\/strong>, also die maximale Tiefe, bis zu der die Suche ‘abtauchen’ darf, festlegen. Der Standardwert <\/strong>für die Rekursionstiefe ist 5<\/strong>.<\/p>\n
wget -r -l [Tiefe] [URL(s)]<\/pre>\n
Beispiel: Wget Rekursionstiefe<\/h5>\n
In diesem Beispiel sollen von der URL<\/strong>“https:\/\/profi-tutorials.de”<\/strong>rekursiv <\/strong>alle referenzierten <\/strong>Dokumente <\/strong>ebenfalls heruntergeladen werden. Die Rekursion soll jedoch nicht tiefer als bis auf 2 Level \/ Ebenen<\/strong> fortschreiten.<\/p>\n
Eingabe:<\/h6>\n
wget -r -l 2 https:\/\/profi-tutorials.de<\/p>\n
Ausgabe:<\/h6>\n
Im Terminal wird wieder der Fortschritt des URL-Downloads<\/strong> gezeigt. Nach Abschluss des Herunterladens <\/strong>wird eine kurze Zusammenfassung <\/strong>zu der Anzahl heruntergeladener Dateien<\/strong>, der Kapazität<\/strong>, verstrichenen Zeit <\/strong>etc. ausgegeben.<\/p>\n
\"linux-wget-recursive-level\"<\/span><\/p>\n
Inhalt Zielverzeichnis (ls -l \/home\/hellberg\/Downloads\/):<\/h6>\n
Im Zielverzeichnis bzw. dem aktiven Arbeitsverzeichnis<\/strong> befindet sich nun ein neues Verzeichnis mit dem Namen “profi-tutorials.de”<\/strong>, welches sowohl das erste heruntergeladene Dokument<\/strong>, als auch alle Referenzen <\/strong>enthält. Die gesamte Linkstruktur <\/strong>wird dabei durch Unterverzeichnisse <\/strong>abgebildet.<\/p>\n
\"linux-wget-recursive-ls\"<\/span><\/p>\n
-k – Externe Links umwandeln<\/h4>\n
Wandeln Sie mit -k<\/strong>externe- <\/strong>zu internen <\/strong>Links <\/strong>um: Auf diese Weise können Sie ganz natürlich und lokal <\/strong>über die ursprüngliche Linkstruktur <\/strong>zwischen den heruntergeladenen Dokumenten <\/strong>navigieren<\/strong>. Von der Konvertierung betroffen sind neben sichtbaren Navigationslinks <\/strong>jedoch auch Referenzen <\/strong>auf andere Inhalte, wie eingebettete Bilder, CSS-Dateien<\/strong> und weitere.<\/p>\n
wget -r -k [URL(s)]<\/pre>\n
-A und -R – Datei-Erweiterungen erlauben und ignorieren<\/h4>\n
Mit den beiden Optionen -A<\/strong> (A<\/strong>CCLIST) und -R<\/strong> (R<\/strong>EJLIST) können Sie jeweils eine mit Kommata getrennte Liste<\/strong> an Datei-Erweiterungen<\/strong> übergeben, die heruntergeladen oder nicht heruntergeladen werden sollen.<\/p>\n
Die Option -A<\/strong> wird dabei verwendet, um eine spezielle Liste von Dateitypen <\/strong>zu erlauben<\/strong>, während -R<\/strong> verwendet wird, um eine bestimmte Liste von Dateitypen <\/strong>auszuschließen <\/strong>und alle anderen zu erlauben<\/strong>.<\/p>\n
[wget -r [-R \/ -A] [​Datei-Erweiterungen] [URLs]<\/pre>\n
-b – Im Hintergrund ausführen<\/h3>\n
Zuletzt sei auch noch einmal die Option -b<\/strong> (b<\/strong>ackground) genannt, welche die Ausführung von Downloads <\/strong>mit wget <\/strong>im Hintergrund <\/strong>ermöglicht.<\/p>\n
wget -b [URL(s)]<\/pre>\n
Nach Ausführung werden Sie sofort zurück auf die Befehlszeile <\/strong>geleitet und haben die Möglichkeit, andere Aufgaben zu erledigen. Alle Terminal-Ausgaben<\/strong> werden in die sogenannte wget-log<\/strong> umgeleitet.<\/p>\n
Lade Dir JETZT die Linux Befehle PDF herunter!<\/p>\n
Erhalte einen Überblick <\/strong>zu den wichtigsten<\/strong>Linux <\/strong>und UNIX<\/strong>Befehlen<\/strong>!<\/p>\n","protected":false},"excerpt":{"rendered":"
Der Befehl wget wird f\u00fcr das Herunterladen von Dateien aus dem Internet verwendet. Unterst\u00fctzt werden die Protokolle HTTP, HTTPS und FTP. Au\u00dferdem kann der Befehl auch Dateien \u00fcber HTTP Proxys abrufen. Neben der einfachen Verwendung als Downloadmanager kann wget jedoch auch in vielen anderen Bereichen Anwendung finden. So kann er beispielsweise in Shell-Skripten verwendet- und […]<\/p>\n","protected":false},"author":2,"featured_media":4809,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"_seopress_robots_primary_cat":"none","_seopress_titles_title":" %%post_title%% %%sep%% %%sitetitle%%","_seopress_titles_desc":"wget wird unter Linux\/UNIX zum Herunterladen von Dateien von FTP oder HTTP Servern verwendet. Lernen Sie die wichtigsten Funktionen\/Optionen des Befehls kennen!","_seopress_robots_index":"","_seopress_analysis_target_kw":"Linux,UNIX,wget,Befehl,Herunterladen,Download,Server,FTP,HTTP,Optionen,Option,Funktion,Funktionen","footnotes":""},"categories":[7,10],"tags":[],"class_list":["post-4645","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-grundlagen","category-netzwerke"],"_links":{"self":[{"href":"https:\/\/profi-tutorials.de\/linux\/wp-json\/wp\/v2\/posts\/4645","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/profi-tutorials.de\/linux\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/profi-tutorials.de\/linux\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/profi-tutorials.de\/linux\/wp-json\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"https:\/\/profi-tutorials.de\/linux\/wp-json\/wp\/v2\/comments?post=4645"}],"version-history":[{"count":149,"href":"https:\/\/profi-tutorials.de\/linux\/wp-json\/wp\/v2\/posts\/4645\/revisions"}],"predecessor-version":[{"id":6932,"href":"https:\/\/profi-tutorials.de\/linux\/wp-json\/wp\/v2\/posts\/4645\/revisions\/6932"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/profi-tutorials.de\/linux\/wp-json\/wp\/v2\/media\/4809"}],"wp:attachment":[{"href":"https:\/\/profi-tutorials.de\/linux\/wp-json\/wp\/v2\/media?parent=4645"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/profi-tutorials.de\/linux\/wp-json\/wp\/v2\/categories?post=4645"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/profi-tutorials.de\/linux\/wp-json\/wp\/v2\/tags?post=4645"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}