首页  >  文章  >  后端开发  >  javascript - python写网页爬虫爬取 登录后可见 信息

javascript - python写网页爬虫爬取 登录后可见 信息

WBOY
WBOY原创
2016-12-01 00:25:481483浏览

  1. 一个网页上的源代码如图:javascript - python写网页爬虫爬取 登录后可见 信息

2.用 phantomJS selenium 获取后用BeautifulSoup 解析后的代码如图:
javascript - python写网页爬虫爬取 登录后可见 信息

3.曾尝试用session获取cookies:
在登录页面获得的cookies都不一样:
javascript - python写网页爬虫爬取 登录后可见 信息

请问各位神应该如何将在源代码里看到的信息爬下来?
谢谢!!!

回复内容:

  1. 一个网页上的源代码如图:javascript - python写网页爬虫爬取 登录后可见 信息

2.用 phantomJS selenium 获取后用BeautifulSoup 解析后的代码如图:
javascript - python写网页爬虫爬取 登录后可见 信息

3.曾尝试用session获取cookies:
在登录页面获得的cookies都不一样:
javascript - python写网页爬虫爬取 登录后可见 信息

请问各位神应该如何将在源代码里看到的信息爬下来?
谢谢!!!

已经解决啦~
是我的登录窗口没找到。。
初学爬虫,问题没什么价值,请大家见谅!

声明:
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn