как правильно создать файл robots.txt

{% else-1 %}

Купить рекламу

Шины и диски для настоящих боссов дороги;

Weter

1.01

(23 янв 2015, 18:28) (0/0) [0]

DESURDE, вот тебе как пример роботс тхт
User-agent: *
Disallow: /files/
Disallow: /images/
Disallow: /theme/
Disallow: /users/
Crawl-delay: 10

User-agent: Yandex
Disallow: /files/
Disallow: /images/
Disallow: /theme/
Disallow: /users/
Crawl-delay: 10
Host: site.ru

Weter

1.01

(23 янв 2015, 18:26) (1/0) [1]

DESURDE, метатеги должны быть в шапке сайта а не в роботс тхт

В тему