为何我可以访问网页却不能抓取信息?(PHP)

[复制链接]
查看11 | 回复1 | 2011-4-15 10:15:08 | 显示全部楼层 |阅读模式
用filegetcontent,我怀疑是限制了我的IP,用VPN可以,但是过一段时间也不行了。如果是限制了IP那为什么我可以通过浏览器访问网页呢?怎么解决!急!

回复

使用道具 举报

千问 | 2011-4-15 10:15:08 | 显示全部楼层
浏览器访问和抓取网页对方服务器是可以识别的,因为流量明显不一样。你可以用代理的方式,抓取的时候控制一下流量。exec("curl -s -x 代理ip -A \"Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0)\"\"".对方网址."\"",$saveContent);
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

主题

0

回帖

4882万

积分

论坛元老

Rank: 8Rank: 8

积分
48824836
热门排行