Mortgage Scraper下載 - Mortgage Scraper源代碼下載

Mortgage Scraper

其他源碼

1.0.0

下載

moneysupermarket.com抵押刮擦

moneysupermarket.com抵押刮擦者用python編寫。該代碼從http://www.moneysupermarket.com抓取抵押，並將抵押詳細信息插入SQL數據庫中。

我創建了此代碼，因為我想買第一套房子。我想密切關注抵押貸款，以便我可以關注市場趨勢。然後，我可以輕鬆地進行一些查詢以比較抵押以找到最好的交易。

源文件

Mortgage.py - 以“保存”方法將數據插入到SQL數據庫中。
result.py - 將所有信息存儲在每個結果頁面上，並將其分解為特定抵押的鏈接，以及序列中更多結果頁面的鏈接（即：“顯示更多”鏈接）。
scrapemortgage.py - 當獲得抵押URL時，這會創建並填充抵押對象。
scraperesults.py - 當獲得抵押URL時，這會創建並填充結果對象。
scrapesequence.py - 這將瀏覽一系列抵押貸款，打電話給Scraperults和Scrapemortgage。

使用說明

這些是讓您入門的一些說明：

SQL數據庫

在您的SQL數據庫中運行以下查詢以創建表格

 CREATE TABLE ` mortgages ` (
  ` id ` int ( 11 ) NOT NULL AUTO_INCREMENT,
  ` rundate ` date NOT NULL ,
  ` url ` varchar ( 500 ) NOT NULL DEFAULT ' ' ,
  ` lender ` text NOT NULL ,
  ` typeOfMortgage ` text NOT NULL ,
  ` borrowAmount ` decimal ( 10 , 2 ) NOT NULL ,
  ` houseValue ` decimal ( 10 , 2 ) NOT NULL ,
  ` term ` int ( 2 ) NOT NULL ,
  ` initialRate ` text NOT NULL ,
  ` revertRate ` text NOT NULL ,
  ` maxLTV ` text NOT NULL ,
  ` initialPeriod ` text NOT NULL ,
  ` minMaxMortgageAmount ` text NOT NULL ,
  ` minimumAge ` text NOT NULL ,
  ` initialMonthlyRepayments ` text NOT NULL ,
  ` monthlyRepaymentsAfter ` text NOT NULL ,
  ` totalAmountToRepay ` decimal ( 10 , 2 ) NOT NULL ,
  ` TotalAmountOfInterest ` decimal ( 10 , 2 ) NOT NULL ,
  ` overpayments ` text NOT NULL ,
  ` paymentHolidays ` text NOT NULL ,
  ` portable ` text NOT NULL ,
  ` cashback ` text NOT NULL ,
  ` fees ` decimal ( 10 , 2 ) NOT NULL ,
  ` valuationReport ` text NOT NULL ,
  ` homebuyerSurvey ` text NOT NULL ,
  PRIMARY KEY ( ` id ` )
) ENGINE = MyISAM DEFAULT CHARSET = latin1;