Home > Q&A > body text
爬取图片信息,但是懒加载只能加载部分,怎么爬取全部的图片
天蓬老师2017-04-10 17:19:49
懒加载是你在往下滑动的时候网站会ajax再次请求一个接口,有点类似于分页。需要看他的ajax请求的链接,然后爬去对应的链接。
伊谢尔伦2017-04-10 17:19:49
这个抓取跟你的正则匹配是怎么写的有关系,curl只是模拟一个请求罢了
阿神2017-04-10 17:19:49
懒加载也有可能要抓取的图片地址在图片的别的属性里面存着呢,可以观察一下源代码中的图片元素的相关属性,如果没有的话,在考虑楼上说的ajax的情况
https://querylist.cc/
Home
Course
Q&A
My