| cyberteczonesf | Дата: Вторник, Вчера, 02:23 | Сообщение # 1 |
 Подполковник
Группа: Проверенные
Репутация: 0
Статус: Offline
|
Во время проверки глубины индексации сайта краулер часто зависал на одних и тех же страницах. Это выглядело странно и мешало работе. Я решил проверить прокси онлайн https://proxyline.net/proxy-checker/ чтобы убедиться, что они не блокируются. Проверка показала несколько неподходящих вариантов. После замены краулер стал проходить сайт полностью. Это помогло выявить реальные проблемы индексации.
|
| |
| |
