概述

由于疫情的原因，大家都在家待着，如果你是应届生的话，那么对于找工作可能会有点迷茫，因此小编从网上弄了一部分招聘信息以供使用。

项目总述

整个项目依旧很简单，主要是获取数据比较麻烦，至于流程，详见几十行代码批量下载高清壁纸 爬虫入门实战

部分代码

这次我只分为了两部分。

1.从主页获取各个专业对应的url列表

# 1.获取各个专业对应的url列表
index_data = requests.get(index_url, headers=headers).content.decode('gbk', 'ignore')
tree = etree.HTML(index_data)
second_data = tree.xpath(".//ul[@class='s_clear']/li/a/@href")[0:33]
major_name = tree.xpath(".//ul[@class='s_clear']/li/a/text()")[0:33]
major_url = []
for one_third_url in second_data:
    x = str(one_third_url).split(".", 2)[1]
    major_url.append(x)

2.获取各个目录下的岗位列表

# 获取各个专业目录下的岗位
for i in range(len(major_url)):
    print(major_url[i])
    print(major_name[i])
    major_job_page = requests.get(major_url[i], headers=headers).content.decode('gbk', 'ignore')
    major_job_page_tree = etree.HTML(major_job_page)
    job_list_title = major_job_page_tree.xpath(".//div[@class='hotJobList']/div/ul/li/a/text()")
    job_list_url = major_job_page_tree.xpath(".//div[@class='hotJobList']/div/ul/li/a/@href")
    job_list_date = major_job_page_tree.xpath(".//div[@class='hotJobList']/div/ul/li/span/text()")

结果展示