www.pageranker.ru/robots.txt:
User-agent: *
Disallow: /administrator/
Disallow: /bin/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /layouts/
Disallow: /libraries/
Disallow: /logs/
Disallow: /modules/
Disallow: /plugins/
Disallow: /tmp/
Disallow: /%D0%BA%D0%B0%D1%82%D0%B5%D0%B3%D0%BE%D1%80%D0%B8%D0%B8-%D0%B2%D0%BE%D0%BF%D1%80%D0%BE%D1%81%D0%BE%D0%B2/
User-agent: ia_archiver
Disallow: /
Host: https://pageranker.ru
Sitemap: https://pageranker.ru/component/osmap/?view=xml&id=1&format=xml
Sitemap: https://pageranker.ru/component/osmap/?view=xml&id=1&news=1&format=xml
Sitemap: https://pageranker.ru/component/osmap/?view=xml&id=1&images=1&format=xml
в яндексе
Прочее:
Ping/Trace,
История в Веб-архиве,
История владельцев,
Валидность HTML,
Валидность CSS,
Проверка на вирусы.
Запрашиваемая страница недоступна!
|