Interessanter Diskussion zwischen Graywolf und Matt Cutts über Twitter zum Thema indexieren von Seiten und wie man Google verbietet bestimmte Seiten zu crawlen, denn der noindex meta tag verhindert nur das auftauchen im Google Index, gespidert wird die Seite so oder so. Kurze Zeit später hat dann Graywolf die Diskussion mit g1smd und Halfdeck fortgeführt.
Graywolf: umm @mattcutts care to offer an opinion on why a "diggbar" page is indexed despite the new noindex tag http://tinyurl.com/dku9nq
Matt Cutts: @graywolf, noindex *will* keep a url out of Google as long as we crawl the page to see the noindex tag. But can’t honor a tag we didn’t see.
Zum völlständigen Schlagabtausch – Graywolf, Matt Cutts, g1smd and Halfdeck discuss robots.txt disallow & meta noindex exclusion!
Tags: crawler, Graywolf, Matt Cutts, noindex, Robots.txt, twitter
Trackback- Matt Cutts warnt vor Robots.txt, Jumbo Sitelinks und weitere Google News
Da es in der letzten Zeit zum Thema Google einige kleine Neuerungen bzw. interessante News gegeben hat die meistens zu kurz waren um einen eigenen... - Matt Cutts zum PageRank von twitter Seiten
Twitter ist in aller Munde und inzwischen hat mich ebenfalls das twitter Fieber gepackt und erkenne täglich neue Möglichkeiten. Vor einigen Tagen habe ich den... - Matt Cutts zum Thema: Nutzt Google twitter & Co fürs Ranking
Nachdem Danny Sullivan Google und Bing befragt hatte wie sie Links und Profile aus Twitter und Facebook bewerten, antwortet nun Matt Cutts persönlich auf die... - Noindex Befehl in der Robots.txt
Ein spannender Artikel auf Search Engine Journal wie man den noindex Befehl auch in der Robots.txt benutzte kann. Bisher dachte ich immer das man er...
Hinterlasse ein Kommentar