Googlebot erstellt selbst Suchanfragen

Putzlowitsch · 23.01.2008, 15:29

Die meisten Blogs bieten ja eine Suchfunktion, aufgerufen wird dann eine URL, die ungefähr so aussieht:

Code:

http://example.org/?s=suchbegriff

Heute ist mir aufgefallen, das der Googlebot genau solche Suchanfragen einfach selber erzeugt. Hier mal ein Auszug aus der Logdatei:

Code:

66.249.72.38 - - [22/Jan/2008:05:14:06 +0100] "GET /?s=fertigblog HTTP/1.1" 200 5564 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.72.38 - - [22/Jan/2008:05:14:11 +0100] "GET /?s=eingetrudelt HTTP/1.1" 200 5577 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.72.38 - - [22/Jan/2008:05:14:13 +0100] "GET /?s=bewertungskriterium HTTP/1.1" 200 4516 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.72.38 - - [22/Jan/2008:05:14:19 +0100] "GET /?s=branchenriesen HTTP/1.1" 200 5469 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.72.38 - - [22/Jan/2008:05:14:42 +0100] "GET /?s=verdr%C3%A4ngte HTTP/1.1" 200 4556 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.72.38 - - [22/Jan/2008:05:16:09 +0100] "GET /?s=wettermacher HTTP/1.1" 200 5320 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.72.38 - - [22/Jan/2008:05:17:24 +0100] "GET /?s=bilderdieb HTTP/1.1" 200 6805 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.72.38 - - [22/Jan/2008:05:18:38 +0100] "GET /?s=abmahnenden HTTP/1.1" 200 5505 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"

Ich frage mich nun, was Google damit bezweckt. Hat jemand sowas auch schon mal beobachtet?

Gruß
Ingo

Arno Simon · 23.01.2008, 15:40

google scheint dein suchformular als solches zu erkennen und dann für benutzeranfragen zu benutzen.

es kommt häufig vor, das in google-suchergebnisses die ergebnisse von sites auftauchen, welche zuvor von google gespidert wurden.

wenn derjenige der bei google die suchanfrage gestellt hat, auf den link klickt gehen bei ihm direkt die suchergebnisse deiner seite auf.....

vG

Arno

Alphawolf · 23.01.2008, 15:56

Sind das Keywords aus deiner Website oder willkürliche, die der Googlebot da durchsucht? Ich könnte mir auch vorstellen, dass die Anfragen irgendwie für die Google Webmaster-Tools Statistiken genutzt werden. Oder sie nutzen die Daten irgendwie für Blogger, das Google ja unlängst gekauft hat.

Putzlowitsch · 23.01.2008, 16:54

Ja, das sind alles Wörter, die auch auf meiner Webseite vorkommen. Das Google da keine willkürlichen Sachen nimmt, habe ich an einem falsch geschrieben Wort gemerkt, was in der Form sonst in freier Wildbahn nicht auftritt.

Wenn Google mein Suchformular erkennt, dürfte das ja dann auf Millionen andere Blogs auch zutreffen. Vielleicht kann ja mal jemand im Serverlog nachsehen, ob er auch sowas drin hat. Bei mir traten diese Einträge erstmalig am 23. Oktober 2007 auf

Gruß
Ingo

Alphawolf · 23.01.2008, 17:20

Ja, ich habe sowas auch drin... bei mir aber bei jedem Durchlauf nur ein Suchwort, dafür aber regelmäßig alle paar Stunden.

Putzlowitsch · 23.01.2008, 17:32

Aha, danke.

Der Witz ist, das Google für mein Kunstwort "Posaunenpause" dann in der Trefferliste für "die Suche unter Einbeziehung der übersprungenen Ergebnisse wiederholen" einen Link mit /?s=unaufmerksamkeit ausgibt.
Gut, das Wort "Unaufmerksamkeit" kommt im selben Beitrag auch vor, nur warum wird nicht /?s=Posaunenpause verwendet, was doch viel näherliegend wäre. Irgendwie will sich mir der Sinn nicht so ganz erschließen.

Kann auch sein, daß das Ganze irgendwas noch nicht bekanntes aus dem Google-Labor in Testbetrieb ist.

Gruß
Ingo

Monika · 23.01.2008, 18:39

sperre dies per robots.txt aus, zumindest die Indexierung

das sind de facto keine Suchanfragen des google bots, sondern er sucht nach diesen Seiten weil die mal im Index gelandet sind und er sie wieder abgrasen mag...

Disallow: /?s*

lg

Putzlowitsch · 23.01.2008, 19:03

Die Frage ist halt, wie sind sie in den Index gekommen? Ich hatte bestimmt noch nie irgendwo einen Link mit so einer Suche auf meine eigenes Blog. Der Bot verfolgt ja normalerweise Links, die er irgendwo findet. Hier scheint er sie sich aber selbst ausgedacht zu haben. Das finde ich etwas merkwürdig.

Gruß
Ingo

Monika · 23.01.2008, 19:06

Zitat:

Zitat von Putzlowitsch

Die Frage ist halt, wie sind sie in den Index gekommen? Ich hatte bestimmt noch nie irgendwo einen Link mit so einer Suche auf meine eigenes Blog. Der Bot verfolgt ja normalerweise Links, die er irgendwo findet. Hier scheint er sie sich aber selbst ausgedacht zu haben. Das finde ich etwas merkwürdig.

Gruß
Ingo

link nicht aber im Index können sie ja auch so sein,

ist mir mit der Ajax Suche so passiert-- sonst tät ichs net wissen

lg

Putzlowitsch · 23.01.2008, 19:14

Zitat:

Zitat von Monika

link nicht aber im Index können sie ja auch so sein,

Das verstehe ich jetzt nicht. Wenn der Googlebot bei mir eine Adresse wie z.B. /?s=posaunenpause abruft, woher weiß er denn, das es diese gibt? Sie muß ja irgendwo mal aufgetaucht sein, oder er "denkt" sie sich halt alleine aus.
Er weiß ja, welche Wörter es überhaupt auf meiner Seite gibt und probiert diese als Suchparameter bei meiner Blogsuche durch. Es ist ja nicht nur ein Wort, es sind hunderte. Und eben auch Sachen, die es auf Grund von Schreibfehlern oder "Wortschöpfungen" sonst in den Weiten des Internet nicht gibt (außer eben bei mir).

Und was ist denn eine Ajax-Suche? Zumindest verwende ich sowas bei mir nicht.

Gruß
Ingo