#1285979
Сопоставьте директивы robots.txt и их смысл:
Варианты ответа:
- User-agent
- Disallow
- Sitemap
- Clean-param
- позволяет прописать разные указания для разных поисковых машин
- запрещает роботам поисковика обход страниц или целых разделов сайта
- указывает путь к карте сайта
- дает указание роботам поисковика не учитывать выбранные параметры при индексации страниц
Курсы в категории:
Информационные технологии