robots.txt
. Pokud by si takový parametr každý definoval po svém (každý by měl své pojmenování a svou syntaxi), nadělalo by to víc škody než užitku. Já vím, zní to jako samozřejmost, ale zrovna vývoj webu ukazuje, že to bohužel tak úplně samozřejmé není.