最近網上流行著一些採集程序,更多人拿著這些東西在網上叫賣,很多不太懂的人看著那些程序眼羨,其實如果你懂一些ASP,了解自動採集程序的原理後,你會感覺實現自動化也是那麼的簡單.
原理及優點:通過XML中的XMLHTTP組件調用其它網站上的網頁,然後批量截取或替換原有的信息使其轉化成變量後再一一儲存到數據庫中。其主要的優點便是無需再手工添加大量的信息了,可以指定對某一個站信息的截取進行批量錄入,達到省時省力的目的。與其單純的ASP小偷程序不同的是:它已經不再依賴其目標網站。
簡單事例:
<%
'聲明取得目標信息的函數,通過XML組件進行實現。
Geturl(/blog/url)
SetRetrieval=CreateObject("Microsoft.XMLHTTP")
WithRetrieval
Open"GET",url,False
Send
GetURL=bytes2bstr(.responsebody)
'對取得信息進行驗證,如果信息長度小於100則說明截取失敗
iflen(.responsebody)<100then
response.write"獲取遠程文件<ahref="/blog/"&url&"target=_blank>"&url&"</a>失敗。 "
response.end
endif
EndWith
SetRetrieval=Nothing
End
'二進制轉字符串,否則會出現亂碼的!
bytes2bstr(vin)
strreturn=""
fori=1tolenb(vin)
thischarcode=ascb(midb(vin,i,1))
ifthischarcode<&h80then
strreturn=strreturn&chr(thischarcode)
else
nextcharcode=ascb(midb(vin,i+1,1))
strreturn=strreturn&chr(clng(thischarcode)*&h100+cint(nextcharcode))
i=i+1
endif
next
bytes2bstr=strreturn
end
'聲明截取的格式,從Start開始截取,到Last為結束
GetKey(HTML,Start,Last)
filearray=split(HTML,Start)
filearray2=split(filearray(1),Last)
GetKey=filearray2(0)
End
DimSoftid,Url,Html,Title
'獲取要取頁面的ID
SoftId=Request("Id")
Url="http://www3.skycn.com/soft/"&SoftId&".html"
Html=Geturl(/blog/Url)
'以截取天空軟件的軟件名為例子
Title=GetKey(Html,"<fontcolor='#004FC6'size='3'>","</font></b></td></tr>")
'打開數據庫,準備入庫
dimconnstr,conn,rs,sql
connstr="DBQ="+server.mappath("db1.mdb")+";DefaultDir=;DRIVER={MicrosoftAccessDriver(*.mdb)};"
setconn=server.createobject("ADODB.CONNECTION")
conn.openconnstr
setrs=server.createobject("adodb.recordset")
sql="select[列名]from[表名]where[列名]='"&Title&"'"
rs.opensql,conn,3,3
ifrs.eofandrs.bofthen
rs("列名")=Title
rs.update
setrs=nothing
endif
setrs=nothing
Response.Write"採集完畢!"
%>