29. 9. 2021 22:12
V robots.txt zablokovat noybot a automat dojel.
29. 9. 2021 23:00
To nemusí pomoct. Robots.txt obsahuje informace kterými se roboti řídí dobrovolně. Museli by blokovat IP adresy pokud vědí jaké.
5. 10. 2021 8:25
Nemyslím si, že by taková organizace dobrovolně ignorovala robots.txt, to by jí zničilo renomé. Robots.txt ignorují většinou bad boti.