Antes de nada, perdonar si esto no va aqui, pero no se muy bien donde ponerlo.
¿Alguien sabe como obtener la estructura de una web?
Es decir algo así como una especie de comando "dir".
Por ejemplo:
Si el sitio es paginaweb.com obtener:
paginaweb.com
paginaweb.com/imagenes
paginaweb.com/imagenes/iconos
paginaweb.com/imagenes/fotos
paginaweb.com/textos
paginaweb.com/html
etc....
Gracias de antemano.