Como saber todas las páginas de un sitio

Como saber todas las páginas de un sitio
Hay una herramienta en internet que escanea un sitio por completo, parecido a lo que hace un generador de xml, ignorando algunas ordenes del archivo robots, pero trayendo la mayoría de la información, con sólo poner la dirección del sitio que quieres saber, y un click, te generará ese plano xml para que conozcas todas las páginas, así como las imágenes, links salientes, y la info del header.

Si bien no estoy de acuerdo con este tipo de herramientas, las uso, ya que muchos sitios te la complican mucho para llegar a determinada información.

Una rápida interfaz te garantiza resultados en poco tiempo.

Otra de las utilidades que le puedes dar, es la exploración de tu sitio, para de esta forma saber a cuantas páginas linkeas, donde por ahi encuentres links rotos, o tal vez que te bajan tu pr, o que tienes páginas sin enlazar.

Link I URL Info