Php使用curl伪造百度蜘蛛抓取页面
作者:admin 日期:2012-04-23
Php使用curl伪造百度蜘蛛抓取页面
PHP代码
- function baiduSpider($url,$reffer){
- $ch = curl_init();
- $user_agent = “Baiduspider+(+http://www.baidu.com/search/spider.htm)”;//这里模拟的是百度蜘蛛
- curl_setopt($ch, CURLOPT_URL, $url);
- curl_setopt($ch, CURLOPT_HEADER, false);
- curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
- curl_setopt($ch, CURLOPT_REFERER, $reffer);//这里写一个来源地址，可以写要抓的页面的首页
- curl_setopt($ch, CURLOPT_USERAGENT, $user_agent);
- $temp=curl_exec($ch);
- return $temp;
- }
上一篇: 
下一篇: 
文章来自: 
引用通告: 
Tags: 
相关日志:
评论: 0 | 引用: 0 | 查看次数: 4260
发表评论
广告位
