Ein als User getarnter Robot mit IP-Adressen von Microsoft wie   65.55.165.124 bl2sch1082218.phx.gbl; mit der Benutzung der bis Dato nichtexistierenden Domain "phx-gbl" ist der Beweis einer besonderen Professionalität. Der Log-Eintrag, der als User angesehen wird, folgt dem regulären Such- und Indizierungs-Robot " msnbot" wenig später, ruft dieselben Seiten wie msnbot auf und hinterlässt einen entsprechenden Referrer-String in den Logfiles, genau so wie es auch normale Besucher tun würden. Dies ist eine Methode festzustellen ob die Seiten den Robots genauso ausgegeben werden, wie den Usern. Die Verwendung von Doorwaypages kann so von den Robots festgestellt werden.

Beispiel eines Logeintrags,in dem der Suchstring mitgeliefert wird:
http://search.live.com/results.aspx?q=suchmaschinenoptimierung&mrt=en-us&FORM=LIVSOP

Benutzerkommentare (0)

Fügen Sie Ihren Kommentar hinzu