Как настроить robots.txt?

Содержание:
1. Кому нужен robots.txt.
2. Как настроить robots.txt.
3. Как создать robots.txt.
4. Требования к файлу robots.txt.
5. Как проверить правильность Robots.txt.

✅ Для: #SEO.
🕐 Время: 10 минут.
🔗 Ссылка: https://soe.su/vp (Unisender)
#советы

via @ukradeno