Сервис анализа сайтов YandeG:
Главная

SEO статьи
  1. Как сделать сплог в Word Press за 50 минут

  2. Размещение статей - как метод продвижения !

  3. Что такое тИЦ, PageRank, Яндекс.Каталог (ЯК) и Dmoz

  4. Разъясненный PageRank

  5. Продвижение сайтов с системой SAPE


SEO новости
  1. Китай первый и в интернете

  2. Непростые вопросы интернет-рекламы

  3. А вы – настоящий SEOшник? Проверьте!

  4. Yandex: "НЕТ" биржам ссылок!

  5. В народе говорят, готовь Sape с лета...

User agent поисковых роботов Яндекса, Google, Rambler, Yahoo, MSN, Alexa


( . crawler) - , , , . . , , , . .

- (User-agent) . User-agent , , , .

, , AdSense.

User-agent: *
Disallow: /
User-agent: Mediapartners-Google
Disallow:

.

(Yandex)

( )

User-agent : Yandex

- Yandex/1.01.001 (compatible; Win16; I) .
- Yandex/1.01.001 (compatible; Win16; P) .
- Yandex/1.01.001 (compatible; Win16; H) , .
- Yandex/1.02.000 (compatible; Win16; F) , (favicons)
- Yandex/1.03.003 (compatible; Win16; D) , URL
- Yandex/1.03.000 (compatible; Win16; M) ,
- YaDirectBot/1.0 (compatible; Win16; I) , ,
- YandexBlog/0.99.101 (compatible; DOS3.30,B) , xml- .
- YandexSomething/1.0 , -.
- Bond, James Bond (version 0.07) . . Referer . . , ..

IP-

IP-, , , . .

- ( ““) , , .

- Yandex/2.01.000 (compatible; Win16; Dyatel; C) .. , . , .
- Yandex/2.01.000 (compatible; Win16; Dyatel; Z) .. .
- Yandex/2.01.000 (compatible; Win16; Dyatel; D) .. . .
- Yandex/2.01.000 (compatible; Win16; Dyatel; N) .. -, , , .

Google ()

User-agent : Googlebot

- Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) - Google, HTTP 1.1.
- Mediapartners-Google - AdSens
- Googlebot-Image (Google) Googlebot-Image/1.0 -
- Google Search Appliance (Google) gsa-crawler - Search Appliance

Rambler ()

User-agent : StackRambler

, Ip- 81.19.64.0 - 81.19.66.255

- StackRambler/2.0 (MSIE incompatible)
- StackRambler/2.0

Yahoo

User-agent Yahoo: Slurp Yahoo! Slurp

- Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp) - .
- Mozilla/5.0 (compatible; Yahoo! Slurp/3.0; http://help.yahoo.com/help/us/ysearch/slurp) - Yahoo 3- , .

MSN

User-agent MSN: MSNBot

- msnbot/1.1 (+http://search.msn.com/msnbot.htm) - MSN.
- msnbot-media/1.0 (+http://search.msn.com/msnbot.htm) - .
- msnbot-media/1.1 (+http://search.msn.com/msnbot.htm) - .
- msnbot-news (+http://search.msn.com/msnbot.htm) - .

Alexa

User-agent Alexa: ia_archiver

- ia_archiver (+http://www.alexa.com/site/help/webmasters; [email protected]) - Alexa, web.archive.org



Все статьи



© 2008-2017 YandeG.ru
Контакты | Комментарии
SEO статьи SEO новости Кнопка для Браузера