Русское сообщество fluxbb

coordinator

Гость

BotDetect v1.5

Установил мод.
Но не очень понял настройки. С английским не разобрался.
Кто-нить пользует?

Кто знает Bot UserAgent String
Я бы хотел на яндекс и рамблер поставить.

SDTux

Гость

Re: BotDetect v1.5

дай скриншот или ссылку что ли

coordinator

Гость

Re: BotDetect v1.5

Вот проект на пунресе:
http://www.punres.org/desc.php?pid=147

Xbons

Гость

Re: BotDetect v1.5

Поставил, использую, все работает.

Там где:

User Agent String Settings
Bot Detection

Нужно поставить галочки.

Списки ботов:

Большой список:
http://www.robotstxt.org/wc/active/html/index.html
http://damagelab.org/index.php?s=902aeb … opic=11801

Популярные:

Yandex=Yandex Crawler Bot
StackRambler=Rambler Crawler Bot
msnbot=MSN Bot
googlebot=Google.com Bot
slurp@inktomi=Hot Bot
ask jeeves=Ask Jeeves Bot
lycos=Lycos.com Bot
whatuseek=What You Seek Bot
ia_archiver=Archive.org Bot
+
WebAlta=WebAlta Crawler/1.3.11

Хотел еще предупредить: много ботов( 100 штук например) не вписывайте, грузит сервер.

Редактировался Xbons (2006-10-09 04:33:57)

FedKoFF

Гость

Re: BotDetect v1.5

Yandex=Yandex Crawler Bot

Или тут инфа к черту устарела или я ничего не понимаю.
Взял с http://webmaster.yandex.ru/

У Яндекса есть несколько роботов, которые представляются по-разному.
Yandex/1.01.001 (compatible; Win16; I) — основной индексирующий робот
Yandex/1.01.001 (compatible; Win16; P) — индексатор картинок
Yandex/1.01.001 (compatible; Win16; H) — робот, определяющий зеркала сайтов
Yandex/1.02.000 (compatible; Win16; F) — робот, индексирующий пиктограммы сайтов (favicons)
Yandex/1.03.003 (compatible; Win16; D) — робот, обращающийся к странице при добавлении ее через форму «Добавить URL»
Yandex/1.03.000 (compatible; Win16; M) — робот, обращающийся при открытии страницы по ссылке «Найденные слова»
YaDirectBot/1.0 (compatible; Win16; I) — робот, индексирующий страницы сайтов, участвующих в Рекламной сети Яндекса

IP-адресов, с которых «ходит» робот Яндекса, много, и они могут меняться. Список адресов мы не разглашаем.

Кроме роботов у Яндекса есть несколько агентов-«простукивалок», которые определяют, доступен ли в данный момент сайт или документ, на который стоит ссылка в соответствующем сервисе.
Yandex/2.01.000 (compatible; Win16; Dyatel; C) — «простукивалка» Яндекс.Каталога. Если сайт недоступен в течение нескольких дней, он снимается с публикации. Как только сайт начинает отвечать, он автоматически появляется в Каталоге.
Yandex/2.01.000 (compatible; Win16; Dyatel; Z) — «простукивалка» Яндекс.Закладок. Ссылки на недоступные сайты помечаются серым цветом.
Yandex/2.01.000 (compatible; Win16; Dyatel; D) — «простукивалка» Яндекс.Директа. Она проверяет корректность ссылок из объявлений перед модерацией. Никаких автоматических действий не предпринимается.
Yandex/2.01.000 (compatible; Win16; Dyatel; N) — «простукивалка» Яндекс.Новостей. Она формирует отчет для контент-менеджера, который оценивает масштаб проблем и, при необходимости, связывается с партнером.

С гуглен таже песня...
И что добовлять?

TEXist

Гость

Re: BotDetect v1.5

FedKoFF
А у тебя вооще работает этот мод?
У меня на 1.2.14 вообще ноль реакции...
Хотя точно известо что Гугль ходит (его IP), но ничего не рулит. Такое ощущение, что мод уже устарел...

FedKoFF

Гость

Re: BotDetect v1.5

Работает это точно.
Дабовлял гугла и он виднелся в статистике.
Но машин то несколько от того же гугла или нет.
Кто просветит, то я невъезжаю.

TEXist

Гость

Re: BotDetect v1.5

Странно, у меня только юзеров всё равно показывает. Роботов не высвечивает.
Ладно, подожду, может ещё покажутся.
Если нет то снесу мод он особо не нужен, мучиться из-за него.

Добавлено  02.14.2007 19:02:41:
Ну наконец-то!
Появился Гугль.
Причём прописан был много разными вариантами, а сработал только на этом варианте "google", причём только с маленькой буквы.

TEXist

Гость

Re: BotDetect v1.5

Вобщем сегодня целый день изучал функциональность этого модуля и пришёл к выводу что он практически бесполезен.
Ловит только процентов так 10 разных ботов, остальных просто игнорирует.
Надо сносить...

maximum

Гость

Re: BotDetect v1.5

Но машин то несколько от того же гугла или нет.
Кто просветит, то я невъезжаю.

Серверов у их действительно больше, чем... чем... не с чем даже сравнивать.

Просто у ботов есть разные идентификаторы, в том числе бот может ходить и из под браузера. Всё это отлично отображается в серверной статистике.

Pminaeff

Гость

Re: BotDetect v1.5

За несколько часов я чё-то не заметил, чтобы отображался хоть один бот... Хотя гугл ходит... видно по ИП

FedKoFF

Гость

Re: BotDetect v1.5

Прошло время.
Вот кого и как я наловил.

[Bot] Yahoo!  ->   Yahoo!
[Bot] MSN  ->  msnbot
[Bot] Yandex   -> Yandex
[Bot] Google  ->  google
[Bot] Google  ->  Google

Добавлено спустя     11 минут   11 секунд:
Да забыл написать...
"Ловушку" для ботов, а именно строку:

require(PUN_ROOT.'botdetect.php');
    $botStatus = isBotOnline();

Надо запихать в header.php, чтоб она на каждой странице их вычисляла, на по реадми к моду её только на index.php надо добавлять и получается тогда, что они "ловятся" только на главной.

Редактировался FedKoFF (2008-05-27 17:43:01)

Armani

Гость

Re: BotDetect v1.5

Да забыл написать...
"Ловушку" для ботов, а именно строку:

Надо запихать в header.php, чтоб она на каждой странице их вычисляла, на по реадми к моду её только на index.php надо добавлять и получается тогда, что они "ловятся" только на главной

Куда конкретно?