так слушай, если бот видит 301 редирект, он по идее по нему должен пройти и найти конечную цель как минимум, а уже потом его проверить, если не сразу проверяет.
А если как ты говоришь, то получается переобход какой-то немного другой бот делает, со своими заморочками