被標題吸引進來的不要罵我。
只是一個簡單的實現,隨手寫了來下載一部喜歡的小說的。示例中的小說只是示例,不是我的菜。
使用了jsoup。挺好用的一個工具。
有需要的話,參考下自己改吧。挺簡單的,是吧。
代碼如下:
package com.zhyea.doggie;import java.io.File;import java.io.FileWriter;import java.io.IOException;import org.jsoup.Jsoup;import org.jsoup.nodes.Document; import org.jsoup.select.Elements;public class Doggie { public static void main(String[] args){ try{ File txtFile = new File("D:/無限崩壞.txt"); createTxtDoc(txtFile); addContent(txtFile); }catch(Exception e){ e.printStackTrace(); } } /** * 向小說文件中添加內容* @param txtFile * 小說文件* @throws IOException * @throws InterruptedException */ private static void addContent(File txtFile) throws IOException, InterruptedException{ appendTxt(txtFile, getBookInfo("無限崩壞", "啪啪啪狂魔")); String url = "http://www.83kxs.com/View/12/12653/{pattern}.html"; for(int i=5850686; i<=5945501; i++){ try{ String tmp = url.replace("{pattern}", i+""); appendTxt(txtFile, getPageContent(tmp)); }catch(Exception e){ e.printStackTrace(); continue; } } } /** * 設置書名和作者* @param bookName * 書名* @param author * 作者* @return */ private static String getBookInfo(String bookName, String author){ return COMMON.replace("{book}", bookName).replace("{author}", author); } /** * 讀取頁面內容* @param url * 訪問路徑* @return * @throws IOException */ private static String getPageContent(String url) throws IOException{ String rtn = null; Document doc = Jsoup.connect(url).get(); Elements content = doc.select(".text p"); Elements title = doc.select("#title"); System.out.println(title.text()); content.select("font").remove(); content.select("script").remove(); content.select("ins").remove(); content.select("a").remove(); rtn = title.text() + NEWLINE + content.html().replaceAll("<p>", "") .replaceAll("</p>", "") .replaceAll("//<!--(.+)--//>", "") .replaceAll("", "") .replaceAll("<br>", NEWLINE) + NEWLINE; return rtn; } /** * 創建新的txt文件* @param fullName * 文件全名* @return * @throws Exception */ private static boolean createTxtDoc(File txtFile) throws Exception{ try{ return txtFile.createNewFile(); }catch(Exception e){ throw e; } } /** * 向txt文件中追加內容* @param txtFile * 要操作的txt文件* @param content * 要追加的內容* @throws IOException */ private static void appendTxt(File txtFile, String content) throws IOException{ FileWriter writer = null; try{ writer = new FileWriter(txtFile, true); writer.append(content); }finally{ if(null!=writer)writer.close(); } } /** * 換行符*/ static final String NEWLINE = System.getProperty("line.separator"); /** * 書前的通用信息*/ static String COMMON = "------------------------------------------------------------------" + NEWLINE + "--------------- 書名:{book}" + NEWLINE + "--------------- 作者:{author}" + NEWLINE + "--------------- zhyea.com" + NEWLINE + "------------------------------------------------------------------" + NEWLINE; }以上就是小編為大家帶來的Java實現一個小說採集程序的簡單實例全部內容了,希望大家多多支持武林網~