Potencjalnie tylko jedna linijka w pliku tekstowym potrafi odciąć od Google całą witrynę internetową. Plik robots.txt to najprostszy dokument techniczny na stronie i jednocześnie taki, w którym drobny błąd może mieć bardzo poważne konsekwencje. Pokażę Ci, jak go napisać, jakich błędów unikać i jak sprawdzić, czy działa tak, jak powinien.
Maciej Sala
Founder StriveLab