Hej wszystkim Wam!
Ma ktoś jakieś pojęcie, na jakiej zasadzie funkcjonują roboty wyszukiwarki  ? Zaciekawił mnie jeden wątek z https://www.eseo.pl/pozycjonowanie-stron/, a mianowicie że twórcy strony mogą w jakiś sposób "zabronić" im dostępu do pewnych obszarów - i czemu to niby miałoby służyć? Jaki jest cel takiej blokady, przecież właścicielom witryn powinno zależeć, żeby zaindeksowało im jak najwięcej podstron???