Без лишней воды, вот минимальное содержание robots.txt для начала работы:
User-agent: * Disallow: /cgi-bin Disallow: /? Disallow: /*?* Disallow: /wp- Disallow: *?s= Disallow: *&s= Disallow: /search/ Disallow: /author/ Disallow: /users/ Disallow: /tag Disallow: /trackback Disallow: */trackback Disallow: */*/trackback Disallow: */feed Disallow: */*/feed/*/ Disallow: */rss Disallow: */embed Disallow: */wlwmanifest.xml Disallow: /xmlrpc.php Disallow: *utm*= Disallow: *openstat= Disallow: /cart/ Disallow: /checkout/ Disallow: /*add-to-cart=* Clean-Param: utm_source&utm_medium&utm_campaign sitemap: site.ru/sitemap.xml
Руководитель в Волсофт
Разработка и продвижение сайтов.
Поставка лицензионного программного обеспечения.
Поставка лицензионного программного обеспечения.
Блинов Роман недавно публиковал (посмотреть все)
- PhpRedis: Not loaded - 06.03.2024
- Список площадок РСЯ для запрета показа (обновлен октябрь2024) - 08.01.2024
- Добавить сразу много email ящиков в HestiaCP - 24.07.2023