前言
统计结果
爬虫技术分析
爬虫代码实现
爬虫分析实现
后记
前言多图预警、多图预警、多图预警。校招季,毕业也多,跳槽也多。我们的职业发展还是要顺应市场需求,那么各门编程语言在深圳的需求怎么呢?工资待遇怎么样呢?用Python分析一下,当前深圳的求职市场怎么样?顺便帮一下秋招的同学。于是便爬取了某拉钩招聘数据。以下是本次爬虫的样本数据:
样本本次统计数据量为,其中某拉钩最多能显示30页数据,每页15条招聘信息,则总为:
30x15=
首页爬取跳过一页,则为条,故数据基本爬完。其余不够数量的语言为该语言在深圳只有这么多条招聘信息。
统计结果各语言平均工资其中
推荐
自然语言
机器学习
Go语言
图像识别
独领风骚啊!!!平均工资都挺高的。区块链炒得挺火的,好像平均薪资并没有那么高。我统计完之后,感觉自己拖后腿了,ma的!!!要删库跑路了!(注:下图为月薪,单位:K)
各语言平均薪资平均工资计算方式:
某钩item值与 值,求平均数,如图薪资则为:
(10k+20k)/2=15k
,再总体求平均数。公司福利词云看福利还是挺丰富的,带薪休假、下午茶、零食、节假日。
福利词云公司发展级别排行总体由A轮向D轮缩减,大部分公司不需要融资,嗯,估计是拿不到资本融资,但是自家人又有钱的。
公司发展级别各语言工作年限要求与学历要求看看你的本命语言的市场需求怎么样?你达标了吗?其中三至五年的攻城狮职位挺多的,不怕找不到工作。还有一个趋势是,薪资越高,学历要求越高高。看来学历还是挺重要的。
JavaJava工作年限要求Java学历要求PythonPython工作年限要求Python学历要求C语言C语言工作年限要求C语言学历要求机器学习机器学习工作年限要求机器学习学历要求图像识别图像识别工作年限要求图像识别学历要求自然语言自然语言工作年限要求自然语言学历要求区块链区块链工作年限要求区块链学历要求Go语言Go语言工作年限要求GoPHPPHP工作年限要求PHP学历要求AndroidAndroid工作年限要求Android学历要求iOSiOS工作年限要求iOS学历要求web前端web前端工作年限要求web前端学历要求 推荐 推荐工作年限要求 推荐学历要求爬虫技术分析请求库:selenium
HTML解析:BeautifulSoup、xpath
词云:wordcloud
数据可视化:pyecharts
数据库:MongoDB
数据库连接:pymongo
爬虫代码实现看完统计结果之后,有没有跃跃欲试?想要自己也实现以下代码?以下为代码实现。对网页右击,点击检查,找到一条item的数据:
网页源码数据库存储结构:
/*1*/{"_id":ObjectId("5b8bffaed60abacd"),"education":"本科",#学习要求"