// в css-файле (именно в файле, а не inline css) создаем новый класс:
.bgimage {
    background-image: url('bg.gif');
    width: 1px;
    heigth: 1px;
}

// в html коде на любой видимый элемент в начале (лучше в шапке) сайта вешаем класс:
<div class="bgimage"></div>

// в nginx:
http {
    log_format ips_only '$remote_addr';
}

// создаем новый специальный location:
location = /bg.gif {
    empty_gif;
    if ($not_bot) {
        access_log /var/log/nginx/bgimage_access.log ips_only;
    }
}
    
// и добавляем логирование неботов
location / {
    if ($not_bot) {
        access_log /var/log/nginx/notbot_access.log ips_only;
    }
}
  
$not_bot - кастомная переменная, в которой вычислили, что текущий юзер не является хорошим ботом, т.е. это не google bot, не яндекс бот и тд, лучше это сделать через map {}

// в итоге получим 2 файла:
notbot_access.log - потенциальные хорошие юзеры с полноценными браузерами, которых еще раз хотим проверить, боты они или нет
bgimage_access.log - те же самые юзеры, но которые помимо загрузки html, еще загрузили картинку

те, которые есть в notbot_access.log, но нет в bgimage_access.log - боты
надо grep-ом сравнить 2 файла и разницу двух множеств записать в черный список IP. Делать это можно по крону каждые N минут.
При сравнении файлов учесть пограничные случаи, когда в один лог успел попасть IP, а в другой не успел. Поэтому из notbot_access.log лучше с конца убрезать последние N секунд.