scrappy_asp.net
Menyortir beberapa kesulitan saat scrapping situs dikecualikan di ASP.NET
Ini adalah contoh menggunakan scrappy di situs ASP.NET.
Saya berbagi ini karena itu terlihat sepele, saya punya beberapa masalah yang mencoba melakukan ini.
- Situs yang dihapus tidak memberi Anda tautan untuk mengubah halaman, jadi Anda harus mengkonfigurasi muatan untuk membuat permintaan formulir.
- Anda akan menemukan paramaters di payload.py. Ada satu muatan untuk mengirimkan Formulir DE pertama dan memuat tabel, yang berikutnya adalah untuk mengubah halaman ketika halaman yang dipilih di luar batas.
- Di folder Laba -laba ada spider_1.py yang merupakan aptempt untuk melakukan pekerjaan menggunakan selenium, tapi saya pikir bukan ide yang baik. Cari spider_2.py untuk solusi yang saya temukan hanya menggunakan scapy.
