Google+ Button ignoriert Crawler Anweisungen

Laut einer Untersuchung des Sistrix Blogs findet man derzeit auf 8,4% der Webseiten einen Google+ Button. Das ist zwar noch weit entfernt von den 12,8% die der Facebook Button vorweist, aber im Vergleich zu den 6,1% des Twitter Buttons, doch sehr beachtlich, besonders wenn man bedenkt in welcher kurzen Zeit sich der Google+ Button verbreitet hat.

In den Google Webmaster Help Forum ist nun eine sehr interessante Frage zum technischen Hintergrund des Google+ aufgetaucht. Dort stellt ein User die Frage wie Google mit Seiten umgeht, die zum Beispiel mittels Robotx.txt gesperrt sind oder über die Meta Anweisung noindex aus dem Google Index ausgeschlossen werden.

Google dazu:

The +1 Button interacts with robots.txt and other crawler directives in an interesting way. Since +1′s can only be applied to public pages, we may visit your page at the time the +1 Button is clicked to verify that it is indeed public. This check ignores crawler directives. This does not, however, impact the behavior of Google web search crawlers and how they interact with your robots.txt file.

via Google Plus One Button Does Not Follow Robots.txt Directive