SOFTWARE软件2023第44卷第1期2023年Vol.44,No.1作者简介:汤飞弘(1996—),男,浙江宁波人,硕士研究生,助理工程师,研究方向:数据挖掘。基于Python爬虫的招聘信息数据可视化分析汤飞弘(上海工程技术大学,上海201620)摘要:本文利用Python网络爬虫技术对猎聘网上公司的招聘信息进行爬虫分析,整合处理爬虫得到的数据。通过数据可视化技术,展现招聘城市分布状况,分析研究各类招聘岗位与薪资、学历要求的关系,直观地展示了互联网行业招聘现状,为求职者提供相关就业信息。关键词:Python;爬虫;招聘信息;可视化中图分类号:TP393.09文献标识码:ADOI:10.3969/j.issn.1003-6970.2023.01.048本文著录格式:汤飞弘.基于Python爬虫的招聘信息数据可视化分析[J].软件,2023,44(01):176-179VisualizationAnalysisofRecruitmentInformationDataBasedonPythonCrawlerTANGFeihong(ShanghaiUniversityofEngineeringScience,Shanghai201620)【Abstract】:ThePythonwebcrawlertechnologyisusedtomakethecrawleranalysistothecompany'sonlinerecruitmentinformationwithLiepinwebsite.Thedataintegrationprocessingcreeper,throughdatavisualizationtechnology,showforcitydistribution,analysisandresearchofvariouskindsofjobandsalary,andtherelationshipbetweenacademicrequirements,soastointuitivelyshowthesituationofInternetrecruitment,andproviderelevantemploymentinformationforfreshgraduates.【Keywords】:Python;crawler;recruitmentinformation;visualization设计研究与应用随着互联网的飞速发展,互联网上的数据量日趋增大,人们通过网络获取信息的途径也越发便捷。招聘网站的出现使得人们开始通过网络寻求招聘信息,相比线下招聘,网络招聘具有选择性广、局限性低的优点[1]。但是随着人们的求职需求越来越多、越来越杂,招聘网站上的信息也变得越来越冗余,人们在招聘网站查找想要的信息变得困难。随着科学技术的发展,可以通过大数据统计分析的方法处理网页数据,利用网络爬虫技术将网页上的数据实时爬取到本地,利用一些数据处理方法,将冗杂的信息变得精简。本文使用Python和谷歌浏览器,通过模拟人们点击网页的操作,自动地从猎聘网上爬取招聘信息。首先在猎聘网上爬取某公司的招聘信息并存入CSV文件中;其次,整合得到的数据;最后,通过数据可视化技术直观展示招聘现状。1网络爬虫网络爬虫是一个从网页上自动抓取数据的程序。网络爬虫通过程序模...