scrappy_asp.net
การเรียงลำดับความยากลำบากบางอย่างเมื่อทิ้งไซต์ที่พัฒนาบน asp.net
นี่คือตัวอย่างของการใช้ scrappy บนไซต์ ASP.NET
ฉันกำลังแบ่งปันสิ่งนี้เพราะมันดูเล็กน้อยฉันมีปัญหาบางอย่างที่พยายามดึงสิ่งนี้ออก
- ไซต์ที่ถูกทิ้งไม่ได้ให้ลิงก์สำหรับการเปลี่ยนหน้าดังนั้นคุณต้องกำหนดค่า payload สำหรับการร้องขอฟอร์ม
- คุณจะพบ paramaters เหล่านั้นใน payload.py มีหนึ่งเพย์โหลดเพื่อส่งแบบฟอร์มแรกและโหลดตารางแบบถัดไปสำหรับการเปลี่ยนหน้าเมื่อหน้าเลือกนอกขอบเขต
- ในโฟลเดอร์สไปเดอร์มี Spider_1.py ซึ่งมีความเชี่ยวชาญในการทำงานโดยใช้ซีลีเนียม แต่ฉันคิดว่าไม่ใช่ความคิดที่ดี มองหา spider_2.py สำหรับการแก้ปัญหาที่ฉันพบโดยใช้เฉพาะการทำลาย
