Бан особо упоротых поисковых роботов дал позитивный результат - сайт просто летает. Эти твари бомбят сервер так что он аж трещит по швам, а толку от их набегов для этого сайта особо нет. Пока изучал вопрос, выявил самого мразотного бота - Slurp. У этого чудовища вообще пожизненный бан. Надо будет капитально ещё раз пройтись по всему коду и ещё больше оптимизировать всё что можно, может кого-то и прощу. Боты Google и Yandex тоже прочёсывают сайт только держись, но сервер от них не загибается. Так что умным роботам тут всегда рады, тупые - тупо идут в лес.