Директива host в robots txt больше не нужна...
"директива host в robots txt" - с 2018 года не актуальна!
Яндекс впервые сообщил об этом в 2018 году...(а мужики-то не знают... )
Подробно о директиве host в robots txt
Об отказе Яндекса от директивы host в robots txt
Цитата из интернета:
До недавнего времени для демонстрации Яндексу главного зеркала требовалось указать host в robots.txt. Эта директива, бесполезная для Google, была обязательной для российского поисковика.
Весной 2018 года все изменилось – спустя много лет Яндекс отменил директиву host. Решение связано со стремлением разработчиков облегчить участь вебмастерам.
Теперь сменить зеркало сайта при переходе на защищенный протокол или переезде на другой домен проще.
"
Теги:
директива host в robots txt