Hej.
Jeg er ved at lave en 404.php side og ønsker ikke at søgerobotter skal indeksere den mappe hvor mine 404 filer ligger. 404 mappen ligger i "/bl/mail-404"
Jeg vil gerne lave en robots.txt fil i stedet for at lave meta name="robots" i head på filerne.
I .htaccess filen skriver jeg:
ErrorDocument 404 /bl/mail-404/404.php
For at komme til 404 siden når en forkert adresse skrives.
I robots.txt filen som jeg ligger i roden skriver jeg:
User-agent: *
Disallow: /mail-404/
For at søgermaskiner ikke indeksere den. Er usikker på om det skal hedde Disallow: /bl/mail-404/ Men på nettet ser det ud som om det kun er mappen der er skrevet.
Er det den rigtige måde at gøre det på og er det
kun mappen mail-404 som søgemaskiner går uden om? Bange for at udelukke hele siden
Ha en god dag
Kim