plik robots.txt

Na etapie tworzenia strony internetowej możesz zetknąć się z pojęciem „pliku robots.txt”. Jest on doskonale znany wszystkim webmasterom. To właśnie za jego pomocą możliwe staje się zarządzanie ruchem robotów indeksujących na stronie. Jeśli zlecasz tworzenie witryny profesjonalnej firmie, nie musisz wprawdzie zaprzątać sobie nim głowy. Mimo to warto wiedzieć, za co odpowiada ten rodzaj pliku. […]