Teraz utwórz plik „robots.txt” w katalogu głównym. Skopiuj powyższy tekst i wklej do pliku tekstowego.
Generator pliku robots.txt . Określ które treści mają być niedostępne dla robotów indeksujących witryny.