Robots.txt - Robots mogen het admin paneel niet 'crawlen'.

[TimVN]

Hallo,

Ik heb zelf een admin paneeltje gemaakt voor iemand. Nu wil ik graag dat robots uit het admin paneel blijven.
Is het zo dat als ik robots.txt in de submap 'admin' gooi, en m alles laat blokkeren, dit alleen geldt voor die map en hoger?

Dus;

http://www.website.nl/admin - Wordt niet geindexeerd door robots
http://www.website.nl - Wordt wel geindexeerd door robots

Met vriendelijke groet,

Tim

 

[kabourterplop]

Het volgende moet je doen om het beoogde resultaat te bereiken.

Plaats in de root van je website een tekstbestand robots.txt en plak daarin de volgende inhoud:

User-agent: *
Disallow: /admin

Succes.

 

[TimVN]

Kijk eens aan, super! Thanks plop!