Без лишней воды, вот минимальное содержание robots.txt для начала работы:
User-agent: * Disallow: /cgi-bin Disallow: /? Disallow: /*?* Disallow: /wp- Disallow: *?s= Disallow: *&s= Disallow: /search/ Disallow: /author/ Disallow: /users/ Disallow: /tag Disallow: /trackback Disallow: */trackback Disallow: */*/trackback Disallow: */feed Disallow: */*/feed/*/ Disallow: */rss Disallow: */embed Disallow: */wlwmanifest.xml Disallow: /xmlrpc.php Disallow: *utm*= Disallow: *openstat= Disallow: /cart/ Disallow: /checkout/ Disallow: /*add-to-cart=* Clean-Param: utm_source&utm_medium&utm_campaign sitemap: site.ru/sitemap.xml
Руководитель в Волсофт
Разработка и продвижение сайтов.
Поставка лицензионного программного обеспечения.
Поставка лицензионного программного обеспечения.
Блинов Роман недавно публиковал (посмотреть все)
- Открыть всплывающее Popup-окно Elementor по текстовой ссылке - 06.03.2025
- Мониторинг сайта с оповещением в Telegram - 17.01.2025
- Выгрузить лиды из Битрикс24 в Google таблицы - 23.12.2024