WordPress i plik robots.txt
Tak ostatnio trochę eksperymentuje z moim blogiem, zainstalowałem kilka ciekawych wtyczek. Jedna między innymi tworzy mapę strony(sitemap) bloga oraz aktualizuje ją na bieżąco. Przy okazji tworzy plik robots.txt na serwerze. I właśnie tutaj troszkę zgłupiałem, bo standardowo plik robots pozwala robotom internetowym wchodzić w każde zakamarki mojego bloga. Powiem szczerze, że nie do końca mi się to spodobało i postanowiłem coś z tym zrobić. Poszperałem trochę w internecie i w końcu stworzyłem swój własny plik robots.txt. A wygląda on tak:
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-content/upgrade
Allow: /wp-content/uploads
User-agent: Googlebot-Image
Disallow:
Allow: /*
Może komuś się też przyda, zapraszam do eksperymentów
Ps. Plikowi trzeba nadać prawa chmod 644



Najnowsze komentarze