python爬虫筛选工作实例讲解


Posted in Python onNovember 23, 2020

我们在选择一件商品的时候,会先了解一些相关的商品信息,根据自己的需求和情况再进行选择。这种现象也同样适用于找工作,筛选一个岗位的重要环节,就是看自身是否符合工作经验的要求。不过因为信息量比较大,有没有什么方法可以用python爬虫中的知识点帮我们解决一下呢~具体内容往下看:

根据工作经验年限,划分招聘等级

# 校正拉勾网工作年限描述,以 Boss直聘描述为准
def update_lagou_workyear():
  items = db.jobs_lagou_php.find({})
  for item in items:
    if item['workYear'] == '应届毕业生':
      item['workYear'] = '应届生'
    elif item['workYear'] == '1年以下':
      item['workYear'] = '1年以内'
    elif item['workYear'] == '不限':
      item['workYear'] = '经验不限'
    update_lagou(item)
  print('ok')
# 设置招聘的水平,分两次执行
def set_level():
  items = db.jobs_zhipin_php.find({})
  # items = db.jobs_lagou_php.find({})
    if item['workYear'] == '应届生':
      item['level'] = 1
    elif item['workYear'] == '1年以内':
      item['level'] = 2
    elif item['workYear'] == '1-3年':
      item['level'] = 3
    elif item['workYear'] == '3-5年':
      item['level'] = 4
    elif item['workYear'] == '5-10年':
      item['level'] = 5
    elif item['workYear'] == '10年以上':
      item['level'] = 6
    elif item['workYear'] == '经验不限':
      item['level'] = 10
    update(item)
print('ok')

这里有点坑的就是,一般要求经验不限的岗位,需求基本都写在任职要求里了,所以为了统计的准确性,这个等级的数据,后面会被舍弃掉。

从后续的平均数据来看,这里的经验不限,一般要求的是1-3年左右,但是还是建议舍弃掉。

拉勾网的职位描述和 Boss直聘稍有不同,需要先校正,然后再设置等级

实例扩展:

python实现图片筛选程序

#_*_coding:utf-8_*_
'''
Version V17.1.0
Date 2017-10-15
@Author Cheney
'''

# 收集EL 图片集中需要的图片,在elpick目录下进行

from PIL import Image
import csv
import os


# 获取需要图片的文件名
def readImageName():
 # 在elpick目录下读取sn.scv文件,该文件读取出来后元素是list 需要转换为str
 get_csv = csv.reader(open("elpick/sn.csv"))
 origSN = []
 transSN = []
 for sn in get_csv:
  origSN.append(sn)
 tempList = origSN

 # 读取csv文件获时获取到的列表,其元素也是列表,需要将其转换为字符串元素,使用下面for语句实现
 for s in tempList:
  # 去掉列表元素中的[''] 这几个字符
   s = str(s).strip('[\'')
  s = str(s).strip('\']')
 transSN.append(s)
 ImageName = transSN
 return ImageName

pickImageName = readImageName()
# 遍历所有图片集的文件名
for image in os.listdir("elpick/original_el"):
 # 将读取到的文件名进行处理,去扩展名,若是int文件名需要对文件名进行int 处理
 imageName = image.strip(".jpg")

 # 比较判断 若遍历的文件名在需要收集的列表中,读取之后并保存到pick_el文件夹下
 if imageName in pickImageName:
  pickImage = Image.open(('elpick/original_el/%s.jpg') % imageName)
  pickImage.save(("elpick/picked_el/%s.jpg") % imageName)

到此这篇关于python爬虫筛选工作实例讲解的文章就介绍到这了,更多相关python爬虫筛选工作内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

Python 相关文章推荐
win7 下搭建sublime的python开发环境的配置方法
Jun 18 Python
使用python对文件中的单词进行提取的方法示例
Dec 21 Python
Pycharm 设置默认头的图文教程
Jan 17 Python
python3.7简单的爬虫实例详解
Jul 08 Python
django框架cookie和session用法实例详解
Dec 10 Python
python 统计文件中的字符串数目示例
Dec 24 Python
python数据预处理方式 :数据降维
Feb 24 Python
python的pip有什么用
Jun 17 Python
python怎么判断模块安装完成
Jun 19 Python
浅谈keras 模型用于预测时的注意事项
Jun 27 Python
Java byte数组操纵方式代码实例解析
Jul 22 Python
Python如何定义有可选参数的元类
Jul 31 Python
python爬虫用scrapy获取影片的实例分析
Nov 23 #Python
python爬虫scrapy图书分类实例讲解
Nov 23 #Python
scrapy处理python爬虫调度详解
Nov 23 #Python
利用Python将多张图片合成视频的实现
Nov 23 #Python
Python系统公网私网流量监控实现流程
Nov 23 #Python
Python 调用 ES、Solr、Phoenix的示例代码
Nov 23 #Python
10个示例带你掌握python中的元组
Nov 23 #Python
You might like
php curl 伪造IP来源的实例代码
2012/11/01 PHP
php CI框架插入一条或多条sql记录示例
2014/07/29 PHP
php跨站攻击实例分析
2014/10/28 PHP
PHP实现简单的模板引擎功能示例
2017/09/02 PHP
jQuery实现可编辑的表格实例讲解(2)
2015/09/17 Javascript
Bootstrap每天必学之导航条
2015/11/27 Javascript
解决Angular.Js与Django标签冲突的方案
2016/12/20 Javascript
Javascript中常用类型的格式化方法小结
2016/12/26 Javascript
JavaScript html5利用FileReader实现上传功能
2020/03/27 Javascript
Javascript实现页面滚动时导航智能定位
2017/05/06 Javascript
Angularjs的键盘事件的绑定
2017/07/27 Javascript
angular.extend方法的具体使用
2017/09/14 Javascript
基于substring()和substr()的使用以及区别(实例讲解)
2017/12/28 Javascript
vue vuex vue-rouert后台项目——权限路由(适合初学)
2017/12/29 Javascript
微信小程序使用swiper组件实现类3D轮播图
2018/08/29 Javascript
深入理解使用Vue实现Context-Menu的思考与总结
2019/03/09 Javascript
JavaScript canvas实现雪花随机动态飘落
2020/02/08 Javascript
如何使用JavaScript实现无缝滚动自动播放轮播图效果
2020/08/20 Javascript
Python实现提取谷歌音乐搜索结果的方法
2015/07/10 Python
Python机器学习之决策树算法实例详解
2017/12/06 Python
Python使用sorted对字典的key或value排序
2018/11/15 Python
python跳出双层for循环的解决方法
2019/06/24 Python
小 200 行 Python 代码制作一个换脸程序
2020/05/12 Python
小区门卫值班制度
2014/01/24 职场文书
2014自主招生自荐信策略
2014/01/27 职场文书
淘宝客服专员岗位职责
2014/04/11 职场文书
《白鹅》教学反思
2014/04/13 职场文书
2014世界杯球队球队口号
2014/06/05 职场文书
计划生育证明格式及范本
2014/10/09 职场文书
领导干部作风整顿个人剖析材料
2014/10/11 职场文书
档案管理员岗位职责
2015/02/12 职场文书
2015年政风行风工作总结
2015/04/21 职场文书
通知书大全
2015/04/27 职场文书
一篇带你入门Java垃圾回收器
2021/06/16 Java/Android
青岛市的收音机研制与生产
2022/04/07 无线电
解决Python保存文件名太长OSError: [Errno 36] File name too long
2022/05/11 Python