Durch Zufall bin ich auf ein Plugin für Wordpress gestoßen, mit welchen man die Crawl Rate von Suchmaschinen-Crawlern aufzeichnen und analysieren kann. Crawl Rate Tracker [5] überwacht insgesamt drei Suchmaschinen, die exakte Crawl-Zeit sowie für die einzelnen Suchmaschinen die Crawl Rate.
Trackback URL for this post:
http://www.sublabs.com/trackback/116