Wget, kilka przykładów tego, co można zrobić za pomocą tego narzędzia

W następnym artykule przyjrzymy się Wgetowi. Trzeba powiedzieć, że GNU Wget to plik darmowe narzędzie który umożliwia pobieranie treści z serwerów internetowych w prosty i szybki sposób. Jego nazwa pochodzi od World Wide Web (w) i słowo get (w języku angielskim otrzymać). Ta nazwa oznacza: pobrać z WWW.

Obecnie istnieją dziesiątki aplikacji do bardzo wydajnego pobierania plików. Większość z nich jest oparta na interfejsach WWW i komputerowych i jest tworzona dla wszystkich systemów operacyjnych. Jednak w Gnu / Linux (istnieje również wersja dla systemu Windows) jest plik potężny menedżer pobierania plików wget. Jest uważany za najpotężniejszy istniejący program do pobierania. Obsługuje protokoły, takie jak http, https i ftp.

Pobierz pliki za pomocą wget

Pobierz plik

Najprostszym sposobem użycia tego narzędzia jest pobranie wskazując plik Czego chcemy:

wget http://sitioweb.com/programa.tar.gz

Pobierz przy użyciu różnych protokołów

Jako dobry menedżer pobierania jest to możliwe żądać więcej niż jednego pobrania naraz. Możemy nawet używać różnych protokołów w tej samej kolejności:

wget http://sitioweb.com/programa.tar.gz ftp://otrositio.com/descargas/videos/archivo-video.mpg

Pobierz według rozszerzenia

Inny sposób na pobranie wielu plików pliki, które mają to samo rozszerzenie, będzie używać gwiazdki wieloznacznej:

wget<code class="language-bash" data-lang="bash">-r -A.pdf</code>http://sitioweb.com/*.pdf

To polecenie nie zawsze działa, ponieważ niektóre serwery mogą mieć zablokowany dostęp do wget.

Pobierz listę plików

Jeśli chcemy pobrać znalezione przez nas pliki, będziemy musieli tylko je zapisać URL w pliku. Stworzymy listę o nazwie files.txt i wskażemy nazwę listy do polecenia. Czy to jest to konieczne umieść tylko jeden adres URL w każdym wierszu wewnątrz files.txt.

Polecenie, którego użyjemy do pobrania utworzonej listy i zapisania w plikach .txt, będzie wyglądało następująco:

wget -i archivos.txt

Uruchom ponownie pobieranie

Jeśli z jakiegoś powodu pobieranie zostało przerwane, będziemy mogli kontynuować pobieranie od miejsca, w którym zostało przerwane używając opcja c za pomocą polecenia wget:

wget -i -c archivos.txt

Dodaj dziennik dotyczący pobierania

Jeśli chcemy uzyskać log o pobieraniu, aby kontrolować wszelkie incydenty na nim będziemy musieli dodać -o opcja jak pokazano poniżej:

wget -o reporte.txt http://ejemplo.com/programa.tar.gz

Ogranicz przepustowość pobierania

W przypadku bardzo długich pobrań możemy ograniczyć przepustowość pobierania. Dzięki temu zapobiegniemy pobieraniu całej przepustowości na czas pobierania:

wget -o /reporte.log --limit-rate=50k ftp://ftp.centos.org/download/centos5-dvd.iso

Pobierz, podając nazwę użytkownika i hasło

Jeśli będziemy chcieli pobrać z witryny, w której wymagana jest nazwa użytkownika / hasło, będziemy musieli skorzystać tylko z następujących opcji:

wget --http-user=admin --http-password=12345 http://ejemplo.com/archivo.mp3

Próby pobierania

Domyślna, program ten podejmuje 20 prób nawiązania połączenia i rozpocząć pobieranie, w bardzo nasyconych witrynach możliwe jest, że nawet przy 20 próbach zostało to osiągnięte. Dzięki opcja t wzrasta do większej liczby prób.

wget -t 50 http://ejemplo.com/pelicula.mpg

Pobierz stronę internetową za pomocą wget

Wget nie ogranicza się tylko do pobierania plikówBędziemy mogli pobrać pełną stronę. Będziemy musieli po prostu napisać coś takiego:

wget www.ejemplo.com

Pobierz stronę internetową i jej dodatkowe elementy

z opcja str pobierzemy również wszystkie pliki dodatkowe elementy potrzebne na stronie takie jak arkusze stylów, obrazy w wierszu itp.

Jeśli dodamy opcja r se będzie rekurencyjnie pobierać do 5 poziomów ze strony:

wget -r www.ejemplo.com -o reporte.log

Konwertuj linki na lokalne

Domyślnie linki w witrynie wskazują adres całej domeny. Jeśli pobierzemy witrynę rekurencyjnie, a następnie przeanalizujemy ją w trybie offline, możemy użyć opcja konwersji linków który zmieni je w linki lokalne:

wget --convert-links -r http://www.sitio.com/

Uzyskaj pełną kopię witryny

Będziemy mieli możliwość uzyskania pełnej kopii strony. Plik - opcja lustra jest taki sam, jak użycie opcje -r -l inf -N co wskazuje na rekurencję na nieskończonym poziomie i uzyskanie oryginalnego znacznika czasu każdego pobranego pliku.

wget --mirror http://www.sitio.com/

Przekształć rozszerzenia

Jeśli pobierzesz całą witrynę do przeglądania w trybie offline, kilka pobranych plików może się nie otworzyć z powodu rozszerzeń, takich jak .cgi, .asp lub .php. Następnie można wskazać za pomocą –Html-opcja rozszerzenia Wszystkie pliki są konwertowane na rozszerzenie .html.

wget --mirror --convert-links --html-extension http://www.ejemplo.com

To są tylko ogólne wskazówki niż możesz zrobić z Wgetem. Kto chce, może skonsultować się z instrukcja online aby zapoznać się ze wszystkimi możliwościami, które oferuje nam ten wspaniały menedżer pobierania.