Erstellt am

robots.txt

Eine robots.txt ist eine Textdatei im Rootverzeichnis einer Webseite und wird verwendet um das Verhalten von Crawlbots auf Webseiten zu bestimmen und somit auch das Crawlbudget von Suchmaschinen für die jeweilige Seite zu steuern.

Letzte Aktualisierung: März 17, 2019  

März 17, 2019   7   Redaktion    Suchmaschinenoptimierung  
Insgesamt 0 Stimmen:
0

Wie können wir den Beitrag für Sie verbessern?

+ = Mensch oder Maschine?

Fügen Sie eine Idee für einen neuen Lexikon-Eintrag hinzu!

+ = Mensch oder Maschine?