scrappy_asp.net
Ordenar algunas dificultades al desechar los sitios desarrollados en ASP.NET
Este es un ejemplo de uso de Scrappy en el sitio ASP.NET.
Estoy compartiendo esto porque parece trivial, tuve algunos problemas tratando de lograr esto.
- El sitio desechado no le da enlaces para cambiar la página, por lo que debe configurar la carga útil para hacer una solicitud de formulario.
- Encontrará esos parámetros en Payload.py. Hay una carga útil para enviar la primera forma y cargar la tabla, las siguientes son para cambiar las páginas cuando la página seleccionada está fuera de los límites.
- En la carpeta Spiders hay Spider_1.py que fue un apto para hacer el trabajo usando Selenium, pero creo que no es una buena idea. Busque Spider_2.py para la solución que encontré usando solo Scrapy.