Wget una gran herramienta de descarga

Como hemos visto en post anteriores hemos utilizado la herramienta Wget que según wikipedia es: “Una herramienta de libre que permite la descarga de contenidos desde servidores web de una forma simple. Su nombre deriva de World Wide Web (w), y de «obtener» (en inglés get), esto quiere decir: obtener desde la WWW.

Actualmente soporta descargas mediante los protocolos HTTP, HTTPS y FTP.
Entre las características más destacadas que ofrece wget está la posibilidad de fácil descarga de mirrors (espejos) complejos de forma recursiva, conversión de enlaces para la visualización de contenidos HTML localmente, soporte para proxies"

En este post vamos es explicar algunas de las caracteristicas de esta gran herramienta.

Para descargar un imagen de una distro utilizamos:

# wget http://paginaweb.com/carpeta/distrolinux.iso

Si por algun motivo la conexión a internet es interrumpida podemos continuar la descarga agregando la opcion-c

# wget -c http://paginaweb.com/carpeta/distrolinux.iso

También podemos especificar el número de reintentos que hará wget usando la opción --tries. Por si quisiéramos que se el número de intentos de descarga fueran 5 escribimos lo siguiente:

# wget -c -t 5 http://paginaweb.com/carpeta/distrolinux.iso

En ocaciones queremos limitar el ancho de banda que consume una descarga para eso utlizamos --limit-rate=

# wget -c --limit-rate=100k http://paginaweb.com/carpeta/distrolinux.iso

Tambien podemos usar autenticación http y ftp y de la siguiente manera:

# wget -c --user=usuario --password=contraseña http://paginaweb.com/carpeta/distrolinux.iso

Para descargar un archivo retomando la descarga después de una desconexion (-c), identificándose como un navegador web normal para evitar ser detectado por algunos servidores (-U "Mozilla") y no identificándose como un robot para tener acceso completo a las páginas (-erobots=off):

wget -c -U "Mozilla" -erobots=off http://paginaweb.com/carpeta/distrolinux.iso

Para descargar completamente una página (-r) y convertir los enlaces para verla localmente (-k):

wget -t 0 -c -U "Mozilla" -erobots=off -r -k http://paginaweb.com

Estas son algunas de las opciones que me parecen importantes, para mas informacion vista la pagina del manual de Wget

Fuente