Quelle:
https://t3n.de/news/robotstxt-google-sc ... e-1175830/
Ab 01.09.2019 werden in der robots.txt folgende Anweisungen nicht mehr von Google befolgt:
- Noindex
- Nofollow
- Crawl-delay
Das wird für die meisten uninteressant sein, weil wir sowas normalerweise im Meta-Tab für einzelne Seiten regeln.
Dennoch eine wichtige Info - finde ich.
Google ändert Regeln für robots.txt
Re: Google ändert Regeln für robots.txt
Solche Infos sind immer wichtig.
Wobei ich zugeben muss, ich kannte alle 3 nicht im Zusammenhang mit robots.txt.
Wobei ich zugeben muss, ich kannte alle 3 nicht im Zusammenhang mit robots.txt.
Gruß Olaf, Plugins for CMSimple_XH
Ich habe schon lange den Verdacht, dass so viele so eifrig auf Gender, Trans und Queer machen:
Weil sie für das Fachliche ganz einfach zu doof sind.
Ich habe schon lange den Verdacht, dass so viele so eifrig auf Gender, Trans und Queer machen:
Weil sie für das Fachliche ganz einfach zu doof sind.
Re: Google ändert Regeln für robots.txt
Die Angabe noindex in der robots.txt hat (zumindest bei Google) noch nie funktioniert.frase, t3n zitierend, wrote:Ab 01.09.2019 werden in der robots.txt folgende Anweisungen nicht mehr von Google befolgt:
- Noindex
- Nofollow
- Crawl-delay
Ob die Angabe nofollow in der robots.txt jemals funktioniert hat, läßt sich kaum testen. Denn "nofollow" (auch im Meta-Element robots und im Attribut rel="nofollow" beim Element a) heißt für Google: ich folge dem Link genauso wie ohne nofollow, aber die verlinkte Zielseite hat davon keinen Vorteil.
Die Angabe crawl-delay (auch über die alte Google-"Search Console" möglich) käme ohnehin nur in Betracht für Seiten, die täglich mehrfach geändert werden, und die zugleich täglich massenhaft über Google aufgerufen werden (zB ADAC, Spiegel). Die Festlegung für andere Seiten ist überflüssig.