Rumah >pembangunan bahagian belakang >tutorial php >javascript - python写网页爬虫爬取 登录后可见 信息

javascript - python写网页爬虫爬取 登录后可见 信息

WBOY
WBOYasal
2016-12-01 00:25:481539semak imbas

  1. 一个网页上的源代码如图:javascript - python写网页爬虫爬取 登录后可见 信息

2.用 phantomJS selenium 获取后用BeautifulSoup 解析后的代码如图:
javascript - python写网页爬虫爬取 登录后可见 信息

3.曾尝试用session获取cookies:
在登录页面获得的cookies都不一样:
javascript - python写网页爬虫爬取 登录后可见 信息

请问各位神应该如何将在源代码里看到的信息爬下来?
谢谢!!!

回复内容:

  1. 一个网页上的源代码如图:javascript - python写网页爬虫爬取 登录后可见 信息

2.用 phantomJS selenium 获取后用BeautifulSoup 解析后的代码如图:
javascript - python写网页爬虫爬取 登录后可见 信息

3.曾尝试用session获取cookies:
在登录页面获得的cookies都不一样:
javascript - python写网页爬虫爬取 登录后可见 信息

请问各位神应该如何将在源代码里看到的信息爬下来?
谢谢!!!

已经解决啦~
是我的登录窗口没找到。。
初学爬虫,问题没什么价值,请大家见谅!

Kenyataan:
Kandungan artikel ini disumbangkan secara sukarela oleh netizen, dan hak cipta adalah milik pengarang asal. Laman web ini tidak memikul tanggungjawab undang-undang yang sepadan. Jika anda menemui sebarang kandungan yang disyaki plagiarisme atau pelanggaran, sila hubungi admin@php.cn