Maison >développement back-end >tutoriel php >javascript - python写网页爬虫爬取 登录后可见 信息

javascript - python写网页爬虫爬取 登录后可见 信息

WBOY
WBOYoriginal
2016-12-01 00:25:481536parcourir

  1. 一个网页上的源代码如图:javascript - python写网页爬虫爬取 登录后可见 信息

2.用 phantomJS selenium 获取后用BeautifulSoup 解析后的代码如图:
javascript - python写网页爬虫爬取 登录后可见 信息

3.曾尝试用session获取cookies:
在登录页面获得的cookies都不一样:
javascript - python写网页爬虫爬取 登录后可见 信息

请问各位神应该如何将在源代码里看到的信息爬下来?
谢谢!!!

回复内容:

  1. 一个网页上的源代码如图:javascript - python写网页爬虫爬取 登录后可见 信息

2.用 phantomJS selenium 获取后用BeautifulSoup 解析后的代码如图:
javascript - python写网页爬虫爬取 登录后可见 信息

3.曾尝试用session获取cookies:
在登录页面获得的cookies都不一样:
javascript - python写网页爬虫爬取 登录后可见 信息

请问各位神应该如何将在源代码里看到的信息爬下来?
谢谢!!!

已经解决啦~
是我的登录窗口没找到。。
初学爬虫,问题没什么价值,请大家见谅!

Déclaration:
Le contenu de cet article est volontairement contribué par les internautes et les droits d'auteur appartiennent à l'auteur original. Ce site n'assume aucune responsabilité légale correspondante. Si vous trouvez un contenu suspecté de plagiat ou de contrefaçon, veuillez contacter admin@php.cn