Необходимо пропатчить chromedriver.exe чтобы при использовании его с Python библиотекой Selenium браузер не определялся как бот на сайте https://driverpracticaltest.dvsa.gov.uk/application?execution=e2s31 на котором стоит система защиты от роботов Imperva.
Undetected chromedriver сайт блокирует. IP используем чистые, с физических ПК которые находятся в Великобритании (не прокси). Так же пробовали мобильные IP Великобритании (раздавали Интернет с телефона) - судя по всему IP тут не влияет на вероятность блокировки. Одно время срабатывала блокировка определенного запроса который идет с сайта, но спустя примерно сутки и этот способ перестал помогать. На сегодня в некоторых ситуациях помогает банальное обновление страницы, но судя по моему опыту это не самый лучший вариант.
По состоянию на ноябрь 2021 года проблема решилась путём определённых изменений в бинарном коде chromedriver.exe (причём всё отлично работало и не с IP Великобритании), но видимо на днях они обновили систему защиты и использованный ранее подход уже не работает.
Вот тут описан этот метод, но пост датирован декабрём 2020 года, и конкретно эти изменения в ноябре 2021 уже не помогали:
stackoverflow.com
Наша задача - не быть заблокированными (не получить страницу с "Error code 15", пример в приложении). Гугловская капча - не проблема, важно не словить блок от Imperva. Сейчас блок ловим после некоторых итераций (к примеру если несколько раз нажать на Car (manual and automatic)).
Undetected chromedriver сайт блокирует. IP используем чистые, с физических ПК которые находятся в Великобритании (не прокси). Так же пробовали мобильные IP Великобритании (раздавали Интернет с телефона) - судя по всему IP тут не влияет на вероятность блокировки. Одно время срабатывала блокировка определенного запроса который идет с сайта, но спустя примерно сутки и этот способ перестал помогать. На сегодня в некоторых ситуациях помогает банальное обновление страницы, но судя по моему опыту это не самый лучший вариант.
По состоянию на ноябрь 2021 года проблема решилась путём определённых изменений в бинарном коде chromedriver.exe (причём всё отлично работало и не с IP Великобритании), но видимо на днях они обновили систему защиты и использованный ранее подход уже не работает.
Вот тут описан этот метод, но пост датирован декабрём 2020 года, и конкретно эти изменения в ноябре 2021 уже не помогали:
Can a website detect when you are using Selenium with chromedriver?
I've been testing out Selenium with Chromedriver and I noticed that some pages can detect that you're using Selenium even though there's no automation at all. Even when I'm just browsing manually j...
