Ein neues Angebot von Google: Sitemap. Wenn man auf seinem Web eine xml Datei mit den Links zu all seinen Seiten erstellt, kann man diese an google melden und der spider geht ab.