Генератор файлов robots.txt - Инструменты - Инструменты для вебмастера и оптимизатора, анализ сайта, проверка ТиЦ и PR
RU EN

Генератор файлов robots.txt



  Проверить сайт на мошенничество можнно, посмотрев на дату регистрации сайта.(Если сайту больше года, относительно можно доверять, обычно сайты "дохотроны" и "клоны", за это время прекращают свое существование). Еще одной особенностью таких сайтов, является регистрация за рубежом. Чтобы проверить возраст сайта(домена), в результате анализа сайта в верхней строке, нажмите "(WHOIS IP, WHOIS DOMAIN)". А можно проверить прямо здесь, жмите на ссылку WHOIS владельца домена сайта

Данный инструмент поможет Вам сгенерировать файл robots.txt для Вашего сайта.
Адрес сайта (без http://, только домен)
User-agent:
Disallow:
Host:
SiteMap:
Результат, содержимое файла robots.txt  


    Анализ сайта