PHP中使用snoopy采集类进行数据抓取
2017-03-18 16:30
585 查看
include "Snoopy.class.php"; $snoopy = new Snoopy; $snoopy->proxy_host = "http://www.url.net"; $snoopy->proxy_port = "80"; $snoopy->agent = "(compatible; MSIE 4.01; MSN 2.5; AOL 4.0; Windows 98)"; $snoopy->referer = "http://www.url.net"; $snoopy->cookies["SessionID"] = 238472834723489l; $snoopy->cookies["favoriteColor"] = "RED"; $snoopy->rawheaders["Pragma"] = "no-cache"; $snoopy->maxredirs = 2; $snoopy->offsiteok = false; $snoopy->expandlinks = false; $snoopy->user = "joe"; $snoopy->pass = "bloe"; if($snoopy->fetchtext("http://www.url.net")) { echo "<PRE>".htmlspecialchars($snoopy->results)."</PRE>\n"; } else echo "error fetching document: ".$snoopy->error."\n";
相关文章推荐
- 如何使用代理IP进行数据抓取,PHP爬虫抓取亚马逊商品数据
- php使用curl存取cookie进行登录抓取数据示例
- 使用PHP进行网页数据抓取小结
- 使用php laravel进行数据数据采集
- 大数据采集、清洗、处理:使用MapReduce进行离线数据分析完整案例
- PHP使用3种方法实现数据采集
- 使用matlab中的powergui对采集的数据进行谐波分析#实验日记#
- 使用PHP自带的filter函数进行数据校验
- php使用curl请求数据(采集数据)
- 使用HttpClient和Jsoup进行简单数据抓取、解析
- PHP使用三种方法实现数据采集
- 探索使用 PHP 进行实际的数据挖掘和解析
- 使用Python和地图api进行地图数据采集
- PHP 安全手册 第六条 表单 不希望变动的数据要设置为常量 使用session 进行跟踪
- PHP使用Snoopy类抓取页面以及使用方式
- PHP中使用GOOGCHART类进行饼状图、走势图数据统计
- php写爬虫进行采集 QueryList的使用
- 在Unity3D里使用JSON格式通过PHP进行数据交换
- [置顶] PHP之数据采集[抓取阿里巴巴上宁波企业的详细信息] - 非正则实现
- php+snoopy 数据采集