Priority и changefreq, которые Google игнорирует. Disallow как «запрет индексации». robots.txt в роли замка для чувствительных данных. Разбираем семь живучих ритуалов вокруг двух старейших файлов технического SEO — и что эти файлы делают на самом деле.
Читать далее