diff --git a/README.md b/README.md index 9b270aa..9d15930 100644 --- a/README.md +++ b/README.md @@ -5,13 +5,13 @@ ## Как устроен сайт и его защита -IAAI не использует Cloudflare или Akamai, но у них своя защита: +У IAAI стоит **Imperva Incapsula** — внешний WAF и anti-bot. -- **Детект автоматизации** — проверяют `navigator.webdriver`, `chrome.runtime`, WebGL-рендерер, `hardwareConcurrency` и прочие browser fingerprint параметры. Если видят Playwright/Puppeteer — блокируют. -- **Rate limiting** — после нескольких быстрых запросов подряд начинают отдавать пустые страницы или редиректить. Нет явного 429, просто перестают отдавать данные. -- **Geo-блокировка** — часть контента доступна только с US/CA IP. С европейских адресов листинг может быть пустым. -- **Динамическая подгрузка** — карточки машин подгружаются через XHR (`/Search`, `/VehicleDetail`), часть данных приходит в JSON, часть рендерится на сервере. Нельзя просто дёрнуть HTML нужен полноценный браузер с JS. -- **Cookie consent** — при первом заходе показывают баннер, без принятия кук часть функционала не работает. +- **Anti-bot** — headless Chromium без прокси часто режется. +- **Динамическая подгрузка** — часть данных приходит через XHR (`/Search`, `/VehicleDetail`), часть есть в HTML. +- **Cookie consent** — при первом заходе показывают баннер. + +Поэтому в проекте используется Playwright, паузы между действиями и прокси. ## Запуск