首页  >  文章  >  后端开发  >  编程 - curl、file_get_contents等PHP获取网页内容函数的问题

编程 - curl、file_get_contents等PHP获取网页内容函数的问题

WBOY
WBOY原创
2016-06-06 20:50:231060浏览

该URL如果直接在浏览器输入访问能正确显示内容,但是用CURL或filegetcontents等函数或组件获取内容时会返回空字符串。 以前用PHP抓取百度词典的内容时会出现这种情况,前几天抓12306的数据时也发生了这种情况,请问他们是怎么识别的,有什么解决的办法吗?谢谢!

回复内容:

该URL如果直接在浏览器输入访问能正确显示内容,但是用CURL或filegetcontents等函数或组件获取内容时会返回空字符串。 以前用PHP抓取百度词典的内容时会出现这种情况,前几天抓12306的数据时也发生了这种情况,请问他们是怎么识别的,有什么解决的办法吗?谢谢!

1.user_agent 要设置成浏览器的 2.referrer 要设置正确 3.带上应该带上的cookie 4.其它附加东西

声明:
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn