Python爬虫之六:智联招聘进阶版

千婷姑娘_5682

千婷姑娘_5682

2025-05-14

698人浏览

原创

运行平台: windows python版本: python3.6 ide: sublime text 其他工具: chrome浏览器

0、写在前面的话

本文是基于基础版上做的修改,如果没有阅读基础版,请移步 Python爬虫之五:抓取智联招聘基础版

在基础版中,构造url时使用了urllib库的urlencode函数:

代码语言:javascript代码运行次数:0运行复制

git-log-tracker
git-log-tracker

Git post-commit 钩子 + SQLite 提交索引工具。自动将每次提交的元数据(哈希值、作者、分支、仓库、主题)记录到本地 SQLite 数据库中,随后提供一个命令行接口(CLI),支持查询、列表展示、统计、删除和更新记录。 触发场景:管理 Git 钩子、跨仓库查询提交历史、定位某次提交所属的仓库、查看提交统计信息、将提交记录写入本地索引。 当用户提及“提交日志记录”、“提交索引”、“跨仓库查找提交”、“Git 钩子管理”,或希望以结构化方式查询其提交历史时(即使未明确指出该工具),请使

下载
 url = 'https://sou.zhaopin.com/jobs/searchresult.ashx?' + urlencode(paras)    try:        # 获取网页内容,返回html数据        response = requests.get(url, headers=headers)    ...

其实用reuqests库可以完成此工作,本例将该部分改为:

代码语言:javascript代码运行次数:0运行复制

 url = 'https://sou.zhaopin.com/jobs/searchresult.ashx?'    try:        # 获取网页内容,返回html数据        response = requests.get(url, params=paras, headers=headers)    ...

1、找到职位链接

为了得到更加详细的职位信息,我们要找到职位链接,在新的页面中寻找数据。上篇文章中我们没有解析职位链接,那再来找一下吧:

Python爬虫之六:智联招聘进阶版

修改一下正则表达式:

代码语言:javascript代码运行次数:0运行复制

# 正则表达式进行解析    pattern = re.compile('<td class="zwmc" . target="_blank">(.*?).*?' # 匹配职位详情地址和职位名称        '</td><td class="gsmc">.*? target="_blank">(.*?).*?'                             # 匹配公司名称        '</td><td class="zwyx">(.*?)</td>', re.S)                                            # 匹配月薪          # 匹配所有符合条件的内容    items = re.findall(pattern, html)   

2、求工资平均值

工资有两种形式xxxx-yyyy或者面议,此处取第一种形式的平均值作为分析标准,虽有偏差但是也差不多,这是求职中最重要的一项指标。

代码语言:javascript代码运行次数:0运行复制

for item in items:    salary_avarage = 0    temp = item[3]    if temp != '面议':        idx = temp.find('-')        # 求平均工资        salary_avarage = (int(temp[0:idx]) + int(temp[idx+1:]))//2

3、解析职位详细信息3.1 网页解析

第一步已经将职位地址找到,在浏览器打开之后我们要找到如下几项数据:

Python爬虫之六:智联招聘进阶版

在开发者工具中查找这几项数据,如下图所示:

Python爬虫之六:智联招聘进阶版

HTML结构如下所示:

代码语言:javascript代码运行次数:0运行复制

pip install beautifulsoup4

Python免费学习笔记(深入):立即使用
在学习笔记中,你将探索 Python 的核心概念和高级技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
js正则表达式
js正则表达式

php中文网为大家提供各种js正则表达式语法大全以及各种js正则表达式使用的方法,还有更多js正则表达式的相关文章、相关下载、相关课程,供大家免费下载体验。

2023.06.20

4736

8

正则表达式不包含
正则表达式不包含

正则表达式,又称规则表达式,,是一种文本模式,包括普通字符和特殊字符,是计算机科学的一个概念。正则表达式使用单个字符串来描述、匹配一系列匹配某个句法规则的字符串,通常被用来检索、替换那些符合某个模式的文本。php中文网给大家带来了有关正则表达式的相关教程以及文章,希望对大家能有所帮助。

2023.07.05

3221

4

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

8942

9

java正则表达式匹配字符串
java正则表达式匹配字符串

在Java中,我们可以使用正则表达式来匹配字符串。本专题为大家带来java正则表达式匹配字符串的相关内容,帮助大家解决问题。

2023.08.11

812

5

正则表达式空格
正则表达式空格

正则表达式空格可以用“\s”来表示,它是一个特殊的元字符,用于匹配任意空白字符,包括空格、制表符、换行符等。本专题为大家提供正则表达式相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.31

520

5

Python爬虫获取数据的方法
Python爬虫获取数据的方法

Python爬虫可以通过请求库发送HTTP请求、解析库解析HTML、正则表达式提取数据,或使用数据抓取框架来获取数据。更多关于Python爬虫相关知识。详情阅读本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.13

693

12

正则表达式空格如何表示
正则表达式空格如何表示

正则表达式空格可以用“\s”来表示,它是一个特殊的元字符,用于匹配任意空白字符,包括空格、制表符、换行符等。想了解更多正则表达式空格怎么表示的内容,可以访问下面的文章。

2023.11.17

406

3

正则表达式中如何匹配数字
正则表达式中如何匹配数字

正则表达式中可以通过匹配单个数字、匹配多个数字、匹配固定长度的数字、匹配整数和小数、匹配负数和匹配科学计数法表示的数字的方法匹配数字。更多关于正则表达式的相关知识详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.12.06

739

7

php正则表达式有哪些
php正则表达式有哪些

php正则表达式有"/pattern/"、"^"、"$"、"."、"[]"、"[^]"、"[a-z]"、"[A-Z]"、"[0-9]"、"\d"、"\D"、"\w"、"\W"、&a

2024.02.23

312

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程