python爬虫筛选工作实例讲解


Posted in Python onNovember 23, 2020

我们在选择一件商品的时候,会先了解一些相关的商品信息,根据自己的需求和情况再进行选择。这种现象也同样适用于找工作,筛选一个岗位的重要环节,就是看自身是否符合工作经验的要求。不过因为信息量比较大,有没有什么方法可以用python爬虫中的知识点帮我们解决一下呢~具体内容往下看:

根据工作经验年限,划分招聘等级

# 校正拉勾网工作年限描述,以 Boss直聘描述为准
def update_lagou_workyear():
  items = db.jobs_lagou_php.find({})
  for item in items:
    if item['workYear'] == '应届毕业生':
      item['workYear'] = '应届生'
    elif item['workYear'] == '1年以下':
      item['workYear'] = '1年以内'
    elif item['workYear'] == '不限':
      item['workYear'] = '经验不限'
    update_lagou(item)
  print('ok')
# 设置招聘的水平,分两次执行
def set_level():
  items = db.jobs_zhipin_php.find({})
  # items = db.jobs_lagou_php.find({})
    if item['workYear'] == '应届生':
      item['level'] = 1
    elif item['workYear'] == '1年以内':
      item['level'] = 2
    elif item['workYear'] == '1-3年':
      item['level'] = 3
    elif item['workYear'] == '3-5年':
      item['level'] = 4
    elif item['workYear'] == '5-10年':
      item['level'] = 5
    elif item['workYear'] == '10年以上':
      item['level'] = 6
    elif item['workYear'] == '经验不限':
      item['level'] = 10
    update(item)
print('ok')

这里有点坑的就是,一般要求经验不限的岗位,需求基本都写在任职要求里了,所以为了统计的准确性,这个等级的数据,后面会被舍弃掉。

从后续的平均数据来看,这里的经验不限,一般要求的是1-3年左右,但是还是建议舍弃掉。

拉勾网的职位描述和 Boss直聘稍有不同,需要先校正,然后再设置等级

实例扩展:

python实现图片筛选程序

#_*_coding:utf-8_*_
'''
Version V17.1.0
Date 2017-10-15
@Author Cheney
'''

# 收集EL 图片集中需要的图片,在elpick目录下进行

from PIL import Image
import csv
import os


# 获取需要图片的文件名
def readImageName():
 # 在elpick目录下读取sn.scv文件,该文件读取出来后元素是list 需要转换为str
 get_csv = csv.reader(open("elpick/sn.csv"))
 origSN = []
 transSN = []
 for sn in get_csv:
  origSN.append(sn)
 tempList = origSN

 # 读取csv文件获时获取到的列表,其元素也是列表,需要将其转换为字符串元素,使用下面for语句实现
 for s in tempList:
  # 去掉列表元素中的[''] 这几个字符
   s = str(s).strip('[\'')
  s = str(s).strip('\']')
 transSN.append(s)
 ImageName = transSN
 return ImageName

pickImageName = readImageName()
# 遍历所有图片集的文件名
for image in os.listdir("elpick/original_el"):
 # 将读取到的文件名进行处理,去扩展名,若是int文件名需要对文件名进行int 处理
 imageName = image.strip(".jpg")

 # 比较判断 若遍历的文件名在需要收集的列表中,读取之后并保存到pick_el文件夹下
 if imageName in pickImageName:
  pickImage = Image.open(('elpick/original_el/%s.jpg') % imageName)
  pickImage.save(("elpick/picked_el/%s.jpg") % imageName)

到此这篇关于python爬虫筛选工作实例讲解的文章就介绍到这了,更多相关python爬虫筛选工作内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

Python 相关文章推荐
Python实现的简单发送邮件脚本分享
Nov 07 Python
Linux RedHat下安装Python2.7开发环境
May 20 Python
python3+PyQt5实现柱状图
Apr 24 Python
PyCharm安装第三方库如Requests的图文教程
May 18 Python
python 基本数据类型占用内存空间大小的实例
Jun 12 Python
python用plt画图时,cmp设置方法
Dec 13 Python
关于numpy中eye和identity的区别详解
Nov 29 Python
Python flask框架端口失效解决方案
Jun 04 Python
详解Python设计模式之策略模式
Jun 15 Python
如何通过Python实现RabbitMQ延迟队列
Nov 28 Python
tensorboard 可视化之localhost:6006不显示的解决方案
May 22 Python
Python图片验证码降噪和8邻域降噪
Aug 30 Python
python爬虫用scrapy获取影片的实例分析
Nov 23 #Python
python爬虫scrapy图书分类实例讲解
Nov 23 #Python
scrapy处理python爬虫调度详解
Nov 23 #Python
利用Python将多张图片合成视频的实现
Nov 23 #Python
Python系统公网私网流量监控实现流程
Nov 23 #Python
Python 调用 ES、Solr、Phoenix的示例代码
Nov 23 #Python
10个示例带你掌握python中的元组
Nov 23 #Python
You might like
php实现的九九乘法口诀表简洁版
2014/07/28 PHP
php面向对象中static静态属性和静态方法的调用
2015/02/08 PHP
laravel中的错误与日志用法详解
2016/07/26 PHP
php微信开发之百度天气预报
2016/11/18 PHP
Laravel关系模型指定条件查询方法
2019/10/10 PHP
javascript来定义类的规范小结
2010/11/19 Javascript
js 窗口抖动示例
2013/09/04 Javascript
javascript 回到顶部效果的实现代码
2014/02/17 Javascript
JS中使用mailto实现将用户在网页中输入的内容传递到本地邮件客户端
2016/10/08 Javascript
jquery replace方法去空格
2017/05/08 jQuery
理解 Node.js 事件驱动机制的原理
2017/08/16 Javascript
jQuery条件分页 代替离线查询(附代码)
2017/08/17 jQuery
JavaScript代码执行的先后顺序问题
2017/10/29 Javascript
Vue拖拽组件开发实例详解
2018/05/11 Javascript
jQuery实现的点击图片居中放大缩小功能示例
2019/01/16 jQuery
浅谈JavaScript中的“!!”作用
2020/08/03 Javascript
vscode+gulp轻松开发小程序的完整步骤
2020/10/18 Javascript
Python元组拆包和具名元组解析实例详解
2018/03/26 Python
对python中的 os.mkdir和os.mkdirs详解
2018/10/16 Python
使用Python将字符串转换为格式化的日期时间字符串
2019/09/01 Python
Tensorflow实现部分参数梯度更新操作
2020/01/23 Python
英国优质家居用品网上品牌:URBANARA
2018/06/01 全球购物
New Balance加拿大官方网站:运动鞋和健身服装
2018/11/19 全球购物
在线课程:Skillshare
2019/04/02 全球购物
酒店公关部经理岗位职责
2013/11/24 职场文书
周鸿祎:教你写创业计划书
2013/12/30 职场文书
工作个人的自我评价
2014/01/14 职场文书
应届优秀本科大学毕业生自我鉴定
2014/01/21 职场文书
自动化毕业生专业自荐书范文
2014/02/04 职场文书
接待员岗位责任制
2014/02/10 职场文书
《我的伯父鲁迅先生》教学反思
2014/02/12 职场文书
设计大赛策划方案
2014/06/13 职场文书
找工作求职信
2014/07/07 职场文书
节水宣传标语口号
2015/12/26 职场文书
2016年助残日旅游活动总结
2016/04/01 职场文书
导游词之晋城蟒河
2019/12/12 职场文书