Правильный файл Robots.txt оптимизированный для WordPress

Без лишней воды, вот минимальное содержание robots.txt для начала работы:

User-agent: *
Disallow: /cgi-bin
Disallow: /?
Disallow: /*?*
Disallow: /wp-
Disallow: *?s=
Disallow: *&s=
Disallow: /search/
Disallow: /author/
Disallow: /users/
Disallow: /tag
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */feed
Disallow: */*/feed/*/
Disallow: */rss
Disallow: */embed
Disallow: */wlwmanifest.xml
Disallow: /xmlrpc.php
Disallow: *utm*=
Disallow: *openstat=
Disallow: /cart/
Disallow: /checkout/
Disallow: /*add-to-cart=*

Clean-Param: utm_source&utm_medium&utm_campaign
sitemap: site.ru/sitemap.xml

 

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *

двадцать − один =