Не обновляется robots.txt

Чтобы принудительно обновить файл robots.txt:

зайдите в «Настройки сайта» → Главное → добавьте к субдомену любую букву, нажмите «Сохранить» в правом верхнем углу (т.е. вам нужно сменить субдомен сайта),
вернитесь и удалите этот лишний символ → нажмите «Сохранить» в правом верхнем углу.

Теперь можно проверить файл robots.txt снова.