1、伪造客户端IP地址,伪造访问referer:(一般情况下这就可以访问到数据了)curl_setopt($curl, CURLOPT_HTTPHEADER, ['X-FORWARDED-FOR:110.85.108.185', 'CLIENT-IP:110.85.108.185']);
curl_setopt($curl, CURLOPT_REFERER, 'http://4dn.net/test.php');2、如是上面的还是不行,可能是别人抓到了真实IP,这时候我们就使用代{过}{滤}理访问# 详细方式
curl_setopt($curl, CURLOPT_PROXY, 'x.x.x.x'); //代{过}{滤}理服务器地址
curl_setopt($curl, CURLOPT_PROXYPORT, 80); //代{过}{滤}理服务器端口
//curl_setopt($curl, CURLOPT_PROXYUSERPWD, ':''); //http代{过}{滤}理认证帐号,username:password的格式
curl_setopt($curl, CURLOPT_PROXYTYPE, CURLPROXY_HTTP); //使用http代{过}{滤}理模式
# 简写方式
curl_setopt($curl, CURLOPT_PROXY, 'http://x.x.x.x:80');3、还有一种就是用浏览器可以访问,用curl不行。(对方检查了useragent,如果没有就认为是非法来源等验证了)$useragent = 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 ';
$useragent.= '(KHTML, like Gecko) Chrome/70.0.3538.110 Safari/537.36';
curl_setopt($curl, CURLOPT_USERAGENT, $useragent);PHP完整Curl抓取数据函数:/**
* 请求接口
* [url=home.php?mod=space&uid=718080]@access[/url] public
* [url=home.php?mod=space&uid=952169]@Param[/url] string $url 请求地址
* @param array $data 提交参数 没有get 有post
* [url=home.php?mod=space&uid=155549]@Return[/url] bean|array
*/
public function send($url='')
{
set_time_limit(0);
$curl = curl_init();
curl_setopt($curl, CURLOPT_URL, $url);
curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($curl, CURLOPT_CONNECTTIMEOUT, 10);
curl_setopt($curl, CURLOPT_FOLLOWLOCATION, 1);
curl_setopt($curl, CURLOPT_HTTPHEADER, ['X-FORWARDED-FOR:127.0.1.1', 'CLIENT-IP:127.0.1.1']);
curl_setopt($curl, CURLOPT_REFERER, 'http://4dn.net/demo.php');
curl_setopt($curl, CURLOPT_PROXY, 'http://127.0.0.1:80');
$useragent = 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 ';
$useragent.= '(KHTML, like Gecko) Chrome/70.0.3538.110 Safari/537.36';
curl_setopt($curl, CURLOPT_USERAGENT, $useragent);
if(!empty($data) && is_array($data)){
curl_setopt($curl, CURLOPT_POST, true);
curl_setopt($curl, CURLOPT_POSTFIELDS, $data);
}
$html = curl_exec($curl);
if($error=curl_errno($curl)){
return false;
}
curl_close($curl);
return $html;
}
评论
33条评论qf123 Lv.1
Chrome 101.0.4951.54
Windows 回复
学习
江西省南昌市 南昌大学
a-昔日故友@ Lv.1
Chrome 86.0.4240.198
Windows 7 x64 Edition 回复
支持一下,黑蜘蛛博客有你更精彩
贵州省 联通
萌神橘子 Lv.1
Chrome 102.0.5005.124
Windows 回复
回复了a-昔日故友回复了:
支持一下,黑蜘蛛博客有你更精彩
福建省厦门市 联通
萌神橘子 Lv.1
Chrome 102.0.5005.124
Windows 回复
回复了萌神橘子:这评论功能不错 支持! 测试下....
福建省厦门市 联通
枫叶情缘 Lv.1
Chrome 102.0.5005.124
Windows 回复
回复了萌神橘子:资源很给力啊
福建省厦门市 联通
测试 Lv.1
Chrome 101.0.4951.54
Windows 回复
测试
北京市 移动
拾玖 Lv.1 回复
资源很给力啊
浙江省绍兴市 电信
Jason Lv.1 回复
浙江省绍兴市 电信
藍色雙子星 Lv.1
Sogou Explorer
Windows 7 x64 Edition 回复
是不是啊
河南省郑州市 联通
縵步ぎ澐端 Lv.1
Chrome 96.0.4664.110
Mac OS X 10.15.7 回复
nice啊
北京市 联通
yunyang0726 Lv.1
Chrome 87.0.4280.88
Windows 回复
assasdasadsaddsasad
中国 移动
来 Lv.1
Chrome 84.0.4147.105
Windows 回复
666啊
山东省烟台市 电信
流水飘离 Lv.1
Chrome 78.0.3904.108
Windows 回复
我来康康
重庆市 移动