Pour ce qui est de l'aspirateur de site, ya de plus en plus de scripts en php ou html pour que ton site ou certaines pages ne peuvent être aspirés. Mais je connais un logiciel qui fait un arbre des répertoires et de tous les fichiers sur un nom de domaine ou un site en sous-domaine, mais je me rapelle plus du nom

Mais ça existe !
Le truc de .htaccess c'est génial, ça marche super bien avec Apache.