java抓取網頁數據示例

下面舉例說明：

抓取百度首頁的內容：

複製代碼代碼如下:

URL url = new URL("http://www.baidu.com");

HttpURLConnection urlCon=(HttpURLConnection)url.openConnection();

urlCon.setConnectTimeout(50000);

urlCon.setReadTimeout(300000);

DataInputStream fIn;

byte[] content = new byte[MAX_FILE_SIZE];

fIn = new DataInputStream(urlCon.getInputStream());

int size = 0,f_size = 0;

while((size = fIn.read(content,f_size,2048))> 0){

f_size += size;

}

在代碼中我們將百度首頁的內容存儲到了一個byte數組中，當然我們有了IO流以後還可以存儲到文件中去了。