[Расширение] (phpBB 3.2/3.3) BB3BotsManager: Расширенное управление поисковыми ботами

[SMERCH]

PPK, у вас на сайте кнопка благодарности не видна. Методом тыка нашел

[Sat]

В последнем обновлении (которое 1.6.5) стоит старая версия 1.6.4-8


при попытке обновления после установки выдает ошибку 500

[PPK]

Перезалил

[southklad]

Боты что-то достали последнее время, в расширении их блокирую, но они все равно показываются что заходят на форум и гуляют по темам.

[PPK]

Очистить кэш, очистить все сессии, установить расширение для браузера которое может подменять user agent, ввести user agent заблокированного бота и зайти на форум, посмотреть что там отображается

[Sat]

Подскажите пожалуйста поможет мне это расширение в моей приключившейся беде, которую постараюсь описать ниже:
В последние 3 дня увеличилось многократно кол-во гостей (счет идет на тысячи), в итоге форум замедлился, а потом и вовсе упал. Обратился к хостеру, тот выдал следующий вердикт:

Код: Выделить всё

Reading 2025-07-20...
Apache Access: Processing 431885 strings of Access Log...
PHP RUSAGE: No processing logs by reason: ##No data for this log##
 
Working...
Processed 431885 strings
Top 2 of 2 domains:
-------------------------------------------
 431884	100.00%	**********.beget.tech
 1	0.00%	www.**********.beget.tech
 
Top 5 of 370033 IPs:
-------------------------------------------
 5586	1.29%	95.37.58.234     - Russian Federation, Mulino
 3026	0.70%	95.26.65.33      - Russian Federation, Voskresensk
 972	0.23%	212.90.62.163    - Ukraine, Kiev
 449	0.10%	23.249.172.173   - United States, Los Angeles
 372	0.09%	151.0.53.165     - Ukraine
 
Top 5 of 726 User-Agents:
-------------------------------------------
 5624	1.30%	Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/134.0.0.0 Safari/537.36 OPR/119.0.0.0
 5610	1.30%	Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Safari/537.36
 3026	0.70%	Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/136.0.0.0 YaBrowser/25.6.0.0 Safari/537.36
 2318	0.54%	Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Safari/537.36
 2235	0.52%	Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Safari/537.36
 
Top 2 of 2 METHODs:
-------------------------------------------
 426510	98.76%	GET
 5375	1.24%	POST
 
Top 5 of 726 User-Agents:
-------------------------------------------
 5624	1.30%	Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/134.0.0.0 Safari/537.36 OPR/119.0.0.0
 5610	1.30%	Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Safari/537.36
 3026	0.70%	Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/136.0.0.0 YaBrowser/25.6.0.0 Safari/537.36
 2318	0.54%	Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Safari/537.36
 2235	0.52%	Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Safari/537.36
 
Top 2 of 2 METHODs:
-------------------------------------------
 426510	98.76%	GET
 5375	1.24%	POST
 
Top 2 of 2 Dates:
-------------------------------------------
 431879	100.00%	20 Jul 2025
 6	0.00%	19 Jul 2025
 
Top 5 of 408032 Requests:
-------------------------------------------
 4474	1.04%	GET	***********.beget.tech/app.php/bb3topics_ajax?page=0&forum_id=&block_ids=0&options=
 4142	0.96%	POST	*************.beget.tech/app.php/mchat/action/refresh
 1091	0.25%	POST	*************.beget.tech/app.php/mchat/action/whois
 222	0.05%	GET	**************.beget.tech/
 180	0.04%	GET	**************.beget.tech/app.php/cron/cron.task.text_reparser.poll_option
 
Top CPers: (1695.466 total)
-------------------------------------------
 848.539	**************.beget.tech/viewforum.php
 416.712	**************.beget.tech/viewtopic.php
 86.926	**************.beget.tech/memberlist.php
 84.438	**************.beget.tech/search.php
 80.732	**************.beget.tech/ucp.php

И пояснение от хостера: "Как видно из лога, наибольшая нагрузка создается двумя скриптами: viewforum php и viewtopic php. При этом основная нагрузка ложится на базу данных."

[PPK]

Поможет если это "известные" боты, но в последнее время агрессивные боты определяют себя как обычный браузер, не соблюдают правила файла robots.txt и используют разные IP, это расширение поможет "вдолгую", нужно заходить раз в день и добавлять ботов на форум которые отсутствуют в списке ботов (настройка расширений - BB3BotsManager - лог посещений - фильтр - есть совпадение: нет)
Можно ещё установить расширения:
[Расширение] (phpBB 3.2-3.3) Cache guests & bots pages (SE): Кэширование страниц для гостей и ботов - снизит нагрузку на сервер
[Расширение] (phpBB 3.2-3.3) BB3SessionManager(SE2): менеджер сессий пользователей на форуме - поможет в выявлении "неизвестных" ботов, зайти в раздел "данные сессий", сделать группировку по IP или агенту, если количество сгруппированных значений очень большое (сотни, тысячи), то скорее всего это бот, можно добавить отображаемый IP или агент в базу ботов или вообще заблокировать на уровне сервера

[Sat]

подскажите еще пожалуйста, пробовал добавлять ботов по ip и два раза повторил это действие, появилось предупреждение (выше на скрине), найти дубль не могу, как можно поправить?

[PPK]

Там перед цифрой в скобах должно отображаться название бота, например: Apple-PubSub (2), BOTW Spider (2), скорее всего в поле "Соответствие агенту" где-то ничего не указано

[Sat]

Там перед цифрой в скобах должно отображаться название бота, например: Apple-PubSub (2), BOTW Spider (2), скорее всего в поле "Соответствие агенту" где-то ничего не указано

все обыскал, нет ни пустой строки перед названием бота, ни даже намека на вновь заведенный бот, причем изначальное количество поисковых ботов осталось таким же как и было, а предупреждение болтается. Подскажите как его еще можно найти?