Без лишней воды, вот минимальное содержание robots.txt для начала работы:
User-agent: * Disallow: /cgi-bin Disallow: /? Disallow: /*?* Disallow: /wp- Disallow: *?s= Disallow: *&s= Disallow: /search/ Disallow: /author/ Disallow: /users/ Disallow: /tag Disallow: /trackback Disallow: */trackback Disallow: */*/trackback Disallow: */feed Disallow: */*/feed/*/ Disallow: */rss Disallow: */embed Disallow: */wlwmanifest.xml Disallow: /xmlrpc.php Disallow: *utm*= Disallow: *openstat= Disallow: /cart/ Disallow: /checkout/ Disallow: /*add-to-cart=* Clean-Param: utm_source&utm_medium&utm_campaign sitemap: site.ru/sitemap.xml
Блинов Роман недавно публиковал (посмотреть все)
- Правильный файл Robots.txt оптимизированный для WordPress - 06.05.2022
- Сообщение «Enter visit purpose» в YetiForce CRM - 24.11.2021
- Релиз WordPress 5.8.2. Что нового? - 11.11.2021