Чей бот?

Новая тема Написать ответ    ГЛАВНАЯ ~ ТЕХНИЧЕСКИЕ ВОПРОСЫ

Yambik
Свой
Зарегистрирован: 24.05.2006
Сообщ.: 30
Обратиться по нику

# Добавлено:Чт Сен 21, 2006 11:31 pmОтветить с цитатой
MSIECrawler
хелп, чей это бот?

irvean
Гуру
Зарегистрирован: 07.10.2005
Сообщ.: 1900
Обратиться по нику

# Добавлено:Пт Сен 22, 2006 5:17 amОтветить с цитатой
А шо за паника ? Много кушает ? :lol:

Там рядом с юзерагентом должен быть и IPшник, забей его в адресную строку, если не откроется попробуй whois.

MicroSoftInternetExplorerCrawler типа так наверно :roll:
"...poor is the man whose pleasures depend
on the permission of another."

Petrovich
Свой
Зарегистрирован: 12.09.2006
Сообщ.: 17
Обратиться по нику

# Добавлено:Пт Сен 22, 2006 10:04 amОтветить с цитатой
Yambik писал(а):
MSIECrawler
хелп, чей это бот?

Ничей, это кто то с твоего сайта зеркало делает.

Код:

Owner  User dependant.
Country  User dependant.
Description  MSIECrawler is not a true web robot. It is usually to be found in site logs if someone bookmarks a page whilst offline. Internet Explorer will then download the page and all links related to it, including links, images, JavaScript and Style sheets, when the user is next online.
 
IP Addresses  Variable, as a one off of little use, but may be worth looking for a pattern.
HTTP User Agent  MSIECrawler
Exclusion  Th MSIECrawler robot supports the robots.txt exclusion standard, which is described at http://www.robotstxt.org/wc/exclusion.html#robotstxt. To stop the robot from visiting the /cgi-bin directory:

User-agent: MSIECrawler
Disallow: /cgi-bin/
 
Further Info.  msdn.microsoft.com/workshop/delivery/offline/linkrel.asp


irvean
Гуру
Зарегистрирован: 07.10.2005
Сообщ.: 1900
Обратиться по нику

# Добавлено:Пт Сен 22, 2006 5:54 pmОтветить с цитатой
Не знаю, даже, короче глубоко не читал ену статью, но по ходу ничего страшного.
Если я правильно понял этот бот сковыривает страничку и всю начинку и делает её доступной в оффлайне. Ну дык енто известная практика :wink:
"...poor is the man whose pleasures depend
on the permission of another."
Новая тема Написать ответ    ГЛАВНАЯ ~ ТЕХНИЧЕСКИЕ ВОПРОСЫ

Перейти:  

Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете голосовать в опросах




Генеральный спонсор




Rambler's Top100 Рейтинг@Mail.ru