Файл robots txt

Сегодня рассмотрим:

  • что такое robot txt;
  • как создать и
  • как настроить под свой сайт.

Читать далее