Schlagwort: robots.txt

Immer mal wieder wird uns die Frage gestellt, ob es eine robots.txt braucht, was die bringt, wie wichtig dass die robots.txt ist, etc. Klar ist: …