首頁  >  文章  >  後端開發  >  编程 - curl、file_get_contents等PHP获取网页内容函数的问题

编程 - curl、file_get_contents等PHP获取网页内容函数的问题

WBOY
WBOY原創
2016-06-06 20:50:231060瀏覽

该URL如果直接在浏览器输入访问能正确显示内容,但是用CURL或filegetcontents等函数或组件获取内容时会返回空字符串。 以前用PHP抓取百度词典的内容时会出现这种情况,前几天抓12306的数据时也发生了这种情况,请问他们是怎么识别的,有什么解决的办法吗?谢谢!

回复内容:

该URL如果直接在浏览器输入访问能正确显示内容,但是用CURL或filegetcontents等函数或组件获取内容时会返回空字符串。 以前用PHP抓取百度词典的内容时会出现这种情况,前几天抓12306的数据时也发生了这种情况,请问他们是怎么识别的,有什么解决的办法吗?谢谢!

1.user_agent 要设置成浏览器的 2.referrer 要设置正确 3.带上应该带上的cookie 4.其它附加东西

陳述:
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn