[Расширение] (phpBB 3.2/3.3) BB3BotsManager: Расширенное управление поисковыми ботами

[PPK]

Через phpmyadmin посмотреть в таблице phpbb_bots поле bot_agent

[Sat]

Подскажите, а как лучше заводить ботов из логов посещений только по юзер-агенту или по юзер-агенту и ip? Заметил что все боты заведены только по юзер-агенту.

[PPK]

Проще по user agent, если нужна точность - то по IP, у известных ботов постоянные IP адреса и если кто-то попробует использовать user agent известного бота, то проверка по IP этого не допустит, но тогда IP нужно отслеживать, они могут меняться (особенно у новых или малоизвестных ботов). При отслеживании по user agent конечно может быть так, что кто-то будет использовать user agent какого-то бота, но это не проблема если цель снизить нагрузку, а не фиксировать то, что именно этот конкретный бот точно посещал форум

[Sat]

а как вот с этим бороться, у них у всех разные юзер-агенты и ip, в ручную - явно не вариант. Сутра уже под 1000 налетело.



И возможно ли как вариант использование этого расширения чтобы закрыть на время форум от наплыва гостей?

[PPK]

1. Если IP разные - то только занести этот user agent в боты (но возможно и рельных пользователей затронет), если там хотя бы диапазон IP адресов, а не вообще разные, то можно этот диапазон забанить даже на уровне сервера
2. На время конечно можно

[Sat]

то только занести этот user agent в боты

А если у них и юзер-агенты разные и их порядка 600:

Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/100.0.4688.843 Safari/537.36
Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/100.0.5371.115 Safari/537.36
Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/100.0.5373.508 Safari/537.36

Красным отметил отличия в юзер-агенте (а во всем остальном они идентичны), можно их как то в группу выделить по какому-нибудь признаку, чтобы в ручную не заводить каждый?

2. На время конечно можно

От ботов это решение тоже поможет?

[PPK]

От ботов это решение тоже поможет?

Именно от ботов (т.е. тех которые в форуме определяются как боты) - да

А если у них и юзер-агенты разные и их порядка 600

По-моему форум не умеет определять ботов по user agent с частичным совпадением строки, т.е. так не получится

Код: Выделить всё

Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/100.0.*.* Safari/537.36

тогда только по IP или диапазону IP адресов

[Sat]

доброго времени суток, никак не могу вытравить одного бота



Внес по юзер агенту в список ботов, сделал постоянный запрет, а он как ни в чем не бывало продолжает ползать по темам (видно как по просмотру "кто сейчас на конференции", так и по данным сессий (см. ниже)



Чистил сессии пользователей, он пропадает на несколько минут и потом снова появляется и шарится по форуму.
Можно его все такие как то запретить?

[PPK]

Бот добавлен по строке user-agent, без указания IP?, там не должно быть 4 сессии с одним user-agent и только одна из них сессия бота

[Sat]

без указания IP

он меняет ip каждый раз

там не должно быть 4 сессии с одним user-agent и только одна из них сессия бота

Так получилось потому что я отключал его в настройках - и сразу же хлынули гости под этим же юзер-агентом, как только включил под этим юзер-агентом остался только добавленный бот.
Вообще изначально под этим юзер агентом было множество гостей с разными ip, но юзер-агент был один и тот же. Я добавил бота по юзер-агенту (без указания ip) и закрыл ему доступ на постоянной основе. Поток гостей спал, но добавленный бот продолжал шарить несмотря на запрет.