Сео форум про методы раскрутки сайтов. Как раскрутить сайт и заработать в интернете.

Google Сео форум про методы раскрутки сайтов. Как раскрутить сайт и заработать в интернете.


Вернуться   Сео форум про методы раскрутки сайтов. Как раскрутить сайт и заработать в интернете. > Seo форум поисковых оптимизаторов > Поисковые системы > Google
Регистрация Справка Пользователи Календарь

 
 
Опции темы Оценить тему Опции просмотра
Prev Предыдущее сообщение   Следующее сообщение Next
Старый 27.07.2008, 01:54   #1
sva
Гость
 
Сообщений: n/a
По умолчанию Сеть недоступна

Какого чёрта бот гугля тупит? Он весь месяц не может прочитать роботс.тхт!! "Сеть недоступна: Невозможно получить доступ к файлу robots.txt". У других вебмастеров такие случаи тоже бываю. Атрибуты на чтение стоят. Яндекс читает файл - всё нормально. Я в браузере тоже. А гугль нифига. Заметил в логах, что гугль как-то хитро его читает. grep robots.txt:
ip - - [28/Jun/2008:19:22:13 -0500] "GET /robots.txt HTTP/1.0" 200 357
[...]
ip - - [30/Jun/2008:16:13:59 -0500] "GET /robots.txt HTTP/1.0" 200 357
[...]
ip - - [25/Jun/2008:13:24:52 -0500] "GET /robots.txt HTTP/1.0" 200 402
Все нормальные боты трансферят 357 байт (1е две вырезки), а гугль-бот - 402 байта. Мне что - снифить пакеты от гугля? Что он там передает такого лишнего? Как решить проблему?
  Ответить с цитированием
 


Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход


Часовой пояс GMT +3, время: 12:26.


Powered by vBulletin® Version 3.8.6
Copyright ©2000 - 2024, Jelsoft Enterprises Ltd. Перевод: zCarot
Seo форум про методы раскрутки сайтов. Раскрутка сайта. Заработок на сайтах.