Im neusten Google Webmaster Video geht Matt Cutts auf die Frage ein ob es hilfreich ist, die Robots.txt für kurze Zeit zu ändern um nur einen bestimmten Bereich einer Webseite zu pushen. Matt Cutts sagt dazu dass die Robots.txt am besten so selten wie möglich verändert werden soll. Ständige Veränderungen die kurz danach wieder rückgängig gemacht werden können sich negative auf das Verhalten des Googlebots auswirken. Um bestimmte Bereiche einer Webseite in den Fokus zu setzen ist es daher viel besser diesen von der Startseite prominent zu verlinken um den Linkjuice fließen zu lassen.

Can I use robots.txt to optimize Googlebot’s crawl?

 

via Matt Cutts über robots.txt-Optimierung – SEO.at


Tags: , , , ,
  • Ihren XING-Kontakten zeigen
Ähnliche Beiträge:


Eine Reaktion auf “Robots.txt kurzzeitig ändern”

    1. Google warnt vor zu großen Robots.txt

    Hinterlasse ein Kommentar