Как правильно настроить robots.txt для wordpress
Подробные видеоинструкции Wordpress на тему: "Как правильно настроить robots.txt для wordpress":

23.Настройка файла robots.txt в плагине Yoast SEO

Правильный и рабочий robots txt для CMS WordPress

Правильный файл robots.txt для WordPress

Как создать и настроить файл Robots.txt
