robots.txt – co to jest?
Definicja
robots.txt to plik z instrukcjami dla robotów wyszukiwarek: które części strony mogą przeglądać, a których nie. Nie służy do ukrywania treści – blokuje odwiedzanie, ale nie gwarantuje, że adres nie pojawi się w wynikach.
A po ludzku?
To tabliczka przy wejściu: zaplecze tylko dla personelu. Uczciwi goście jej posłuchają, ale nie jest to zamek w drzwiach.
Powiązane hasła