您好,欢迎访问一九零五行业门户网

使用curl_setopt抓取百度,百度图片防盗有什么好的办法?该如何处理

使用curl_setopt抓取百度,百度图片防盗有什么好的办法?
$url = http://www.baidu.com/s?wd=csdn;
$header = array (
'user-agent: mozilla/5.0 (windows nt 5.1) applewebkit/537.36 (khtml, like gecko) chrome/33.0.1750.146 safari/537.36'
);
$ch = curl_init ();
$timeout = 10;
curl_setopt ( $ch, curlopt_url, $url );
curl_setopt ( $ch, curlopt_httpheader, $header );
curl_setopt ( $ch, curlopt_returntransfer, 1 );
curl_setopt ( $ch, curlopt_connecttimeout,$timeout);
$content = curl_exec ( $ch );
if ($content == false) {
echo error: . curl_error ( $ch );
}
curl_close ( $ch );
echo $content;
------解决思路----------------------
伪造referer url
------解决思路----------------------
1楼已经说的很清楚了。
------解决思路----------------------
你要明白,图片展示的时候,不是php的curl请求了,而是浏览器发的请求。浏览器发的请求,你当前url是什么域名比如www.devtest.com,那么图片的refer就是什么。所以肯定看不到图片。
有一种做法就是,所有百度的图片,你替换成访问自己写的一个php比如url/image.php?baidu_url=******,*****就是真实的图片地址,然后你的image.php在调用curl并加上refer去抓取。
------解决思路----------------------
http://i7.baidu.com/it/u=1366412274,1504179524&fm=96&s=e840f41219bfe0c844fc8dca0300f0b3
你是不能用代码直接访问到的(403错)
但你带上访问 http://www.baidu.com/s?wd=csdn 时得到的 cookie 就可以用代码访问到了
其它类似信息

推荐信息