scrappy_asp.net
Сортировка некоторых трудностей при отходе сайтов Devel на asp.net
Это пример использования сайта Scrappy On ASP.NET.
Я делюсь этим, потому что это выглядит тривиально, у меня были некоторые проблемы, пытаясь справиться с этим.
- Ссыпенный сайт не дает вам ссылок для изменения страницы, поэтому вы должны настроить полезную нагрузку для выполнения запроса формы.
- Вы найдете эти параметры в PAYLOAD.PY. Существует одна полезная нагрузка, чтобы отправить первую форму и загрузить таблицу, следующие предназначены для изменения страниц, когда выбранная страница не выходит за пределы.
- В папке Spiders есть Spider_1.py, который был подходящим для выполнения работы с использованием селена, но я думаю, что это не очень хорошая идея. Ищите SPIDER_2.PY для решения, которое я нашел, используя только скрапу.
