python爬虫筛选工作实例讲解
我们在选择一件商品的时候，会先了解一些相关的商品信息，根据自己的需求和情况再进行选择。这种现象也同样适用于找工作，筛选一个岗位的重要环节，就是看自身是否符合工作经验的要求。不过因为信息量比较大，有没有什么方法可以用python爬虫中的知识点帮我们解决一下呢~具体内容往下看：
根据工作经验年限，划分招聘等级
#校正拉勾网工作年限描述，以Boss直聘描述为准
defupdate_lagou_workyear():
items=db.jobs_lagou_php.find({})
foriteminitems:
ifitem['workYear']=='应届毕业生':
item['workYear']='应届生'
elifitem['workYear']=='1年以下':
item['workYear']='1年以内'
elifitem['workYear']=='不限':
item['workYear']='经验不限'
update_lagou(item)
print('ok')
#设置招聘的水平，分两次执行
defset_level():
items=db.jobs_zhipin_php.find({})
#items=db.jobs_lagou_php.find({})
ifitem['workYear']=='应届生':
item['level']=1
elifitem['workYear']=='1年以内':
item['level']=2
elifitem['workYear']=='1-3年':
item['level']=3
elifitem['workYear']=='3-5年':
item['level']=4
elifitem['workYear']=='5-10年':
item['level']=5
elifitem['workYear']=='10年以上':
item['level']=6
elifitem['workYear']=='经验不限':
item['level']=10
update(item)
print('ok')
这里有点坑的就是，一般要求经验不限的岗位，需求基本都写在任职要求里了，所以为了统计的准确性，这个等级的数据，后面会被舍弃掉。
从后续的平均数据来看，这里的经验不限，一般要求的是1-3年左右，但是还是建议舍弃掉。
拉勾网的职位描述和Boss直聘稍有不同，需要先校正，然后再设置等级
实例扩展：
python实现图片筛选程序
#_*_coding:utf-8_*_
'''
VersionV17.1.0
Date2017-10-15
@AuthorCheney
'''
#收集EL图片集中需要的图片，在elpick目录下进行
fromPILimportImage
importcsv
importos
#获取需要图片的文件名
defreadImageName():
#在elpick目录下读取sn.scv文件，该文件读取出来后元素是list需要转换为str
get_csv=csv.reader(open("elpick/sn.csv"))
origSN=[]
transSN=[]
forsninget_csv:
origSN.append(sn)
tempList=origSN
#读取csv文件获时获取到的列表，其元素也是列表，需要将其转换为字符串元素，使用下面for语句实现
forsintempList:
#去掉列表元素中的['']这几个字符
s=str(s).strip('[\'')
s=str(s).strip('\']')
transSN.append(s)
ImageName=transSN
returnImageName
pickImageName=readImageName()
#遍历所有图片集的文件名
forimageinos.listdir("elpick/original_el"):
#将读取到的文件名进行处理，去扩展名，若是int文件名需要对文件名进行int处理
imageName=image.strip(".jpg")
#比较判断若遍历的文件名在需要收集的列表中，读取之后并保存到pick_el文件夹下
ifimageNameinpickImageName:
pickImage=Image.open(('elpick/original_el/%s.jpg')%imageName)
pickImage.save(("elpick/picked_el/%s.jpg")%imageName)
到此这篇关于python爬虫筛选工作实例讲解的文章就介绍到这了,更多相关python爬虫筛选工作内容请搜索毛票票以前的文章或继续浏览下面的相关文章希望大家以后多多支持毛票票！