Robots.txt patří mezi nejdůležitější soubory na webu a podléhá mnoha pravidlům. Jedno z nich je jeho umístění v URL. Jak to je správně? Soubor robots.txt musí v URL vždy následovat po prvním lomítku hned za top level doménou (třeba .cz). Tedy takzvaně v rootu. Například takto: https://domena.cz/robots.txt. ⚠️ Soubor umístěný v rámci URL v nějakém […]