自动采集程序及入库教程
2008-04-18 10:53
337 查看
原理及优点:通过XML中的XMLHTTP组件调用其它网站上的网页,然后批量截取或替换原有的信息使其转化成变量后再一一储存到数据库中。其主要的优点便是无需再手工添加大量的信息了,可以指定对某一个站信息的截取进行批量录入,达到省时省力的目的。与其单纯的ASP小偷程序不同的是:它已经不再依赖其目标网站。
简单事例:
<%
声明取得目标信息的函数,通过xml组件进行实现。
function geturl(url)
set retrieval = createobject("microsoft.xmlhttp")
with retrieval
.open "get", url, false
.send
geturl = bytes2bstr(.responsebody)
对取得信息进行验证,如果信息长度小于100则说明截取失败
if len(.responsebody)<100 then
response.write "获取远程文件 <a href="&url&" target=_blank>"&url&"</a> 失败。"
response.end
end if
end with
set retrieval = nothing
end function
二进制转字符串,否则会出现乱码的!
function bytes2bstr(vin)
strreturn = ""
for i = 1 to lenb(vin)
thischarcode = ascb(midb(vin,i,1))
if thischarcode < &h80 then
strreturn = strreturn & chr(thischarcode)
else
nextcharcode = ascb(midb(vin,i+1,1))
strreturn = strreturn & chr(clng(thischarcode) * &h100 + cint(nextcharcode))
i = i + 1
end if
next
bytes2bstr = strreturn
end function
声明截取的格式,从start开始截取,到last为结束
function getkey(html,start,last)
filearray=split(html,start)
filearray2=split(filearray(1),last)
getkey=filearray2(0)
end function
dim softid,url,html,title
获取要取页面的id
softid=request("id")
url="http://www3.skycn.com/soft/"&softid&".html"
html = geturl(url)
以截取天空软件的软件名为例子
title = getkey(html,"<font color=#004fc6 size=3>","</font></b></td></tr>")
打开数据库,准备入库
dim connstr,conn,rs,sql
connstr="dbq="+server.mappath("db1.mdb")+";defaultdir=;driver={microsoft access driver (*.mdb)};"
set conn=server.createobject("adodb.connection")
conn.open connstr
set rs=server.createobject("adodb.recordset")
sql="select [列名] from [表名] where [列名]="&title&""
rs.open sql,conn,3,3
if rs.eof and rs.bof then
rs("列名")=title
rs.update
set rs=nothing
end if
set rs=nothing
response.write"采集完毕!"
%>
简单事例:
<%
声明取得目标信息的函数,通过xml组件进行实现。
function geturl(url)
set retrieval = createobject("microsoft.xmlhttp")
with retrieval
.open "get", url, false
.send
geturl = bytes2bstr(.responsebody)
对取得信息进行验证,如果信息长度小于100则说明截取失败
if len(.responsebody)<100 then
response.write "获取远程文件 <a href="&url&" target=_blank>"&url&"</a> 失败。"
response.end
end if
end with
set retrieval = nothing
end function
二进制转字符串,否则会出现乱码的!
function bytes2bstr(vin)
strreturn = ""
for i = 1 to lenb(vin)
thischarcode = ascb(midb(vin,i,1))
if thischarcode < &h80 then
strreturn = strreturn & chr(thischarcode)
else
nextcharcode = ascb(midb(vin,i+1,1))
strreturn = strreturn & chr(clng(thischarcode) * &h100 + cint(nextcharcode))
i = i + 1
end if
next
bytes2bstr = strreturn
end function
声明截取的格式,从start开始截取,到last为结束
function getkey(html,start,last)
filearray=split(html,start)
filearray2=split(filearray(1),last)
getkey=filearray2(0)
end function
dim softid,url,html,title
获取要取页面的id
softid=request("id")
url="http://www3.skycn.com/soft/"&softid&".html"
html = geturl(url)
以截取天空软件的软件名为例子
title = getkey(html,"<font color=#004fc6 size=3>","</font></b></td></tr>")
打开数据库,准备入库
dim connstr,conn,rs,sql
connstr="dbq="+server.mappath("db1.mdb")+";defaultdir=;driver={microsoft access driver (*.mdb)};"
set conn=server.createobject("adodb.connection")
conn.open connstr
set rs=server.createobject("adodb.recordset")
sql="select [列名] from [表名] where [列名]="&title&""
rs.open sql,conn,3,3
if rs.eof and rs.bof then
rs("列名")=title
rs.update
set rs=nothing
end if
set rs=nothing
response.write"采集完毕!"
%>
相关文章推荐
- 浅谈自动采集程序及入库
- 浅谈自动采集程序及入库
- 浅谈自动采集程序及入库
- ASP下实现自动采集程序及入库的代码
- 浅谈ASP程序实现自动采集程序及入库
- 天气小偷程序,自动采集信息入库
- 浅谈自动采集程序及入库
- 浅谈自动采集程序及入库
- 浅谈自动采集程序及入库
- 浅谈自动采集程序及入库
- 浅谈自动采集程序及入库
- 浅谈自动采集程序及入库
- ASP下实现自动采集程序及入库的代码
- 自动跟随机器人教程(七)软件部分 树莓派程序 多传感器综合
- 如何采集京东商城的商品 多图 自动分类 自动去水印 多属性自动入库
- PHP采集入库教程
- 完整版12306自动刷票教程,顺便学习了一下程序,受益匪浅
- 小偷程序和采集入库
- 南极SL菠菜新版程序完整源码-带源码、采集、教程和注册机
- 采集入库程序原理