scrappy_asp.net

scrappy_asp.net

廃棄されたサイトがASP.NETを廃止したときにいくつかの困難を整理します

これは、ASP.NETサイトでScrappyを使用する例です。

私はそれが些細なように見えるので、これを共有しています。

• このサイトは、ページを変更するためのリンクを提供しないため、フォームリクエストを作成するためにペイロードを構成する必要があります。
• Payload.pyにこれらのパラメーターがあります。最初のフォームを送信してテーブルをロードするためのペイロードが1つあります。次のページが範囲外のページを変更するための次のページのものです。
• Spidersフォルダーには、Seleniumを使用して作業を行うのが適切なSpider_1.pyがありますが、良い考えではないと思います。スクラップのみを使用して見つけたソリューションについては、Spider_2.pyを探してください。