文章基本信息

标题：Job Information Data Analysis and Visualization System Implementation Based on Python Crawler
其他标题：基于Python爬虫的职位信息数据分析和可视化系统实现
本地全文：下载
作者：刘娟 ; 管希东
期刊名称：Software Engineering and Applications
印刷版ISSN：2325-2286
电子版ISSN：2325-2278
出版年度：2020
卷号：9
期号：4
页码：317-325
DOI：10.12677/SEA.2020.94036
出版社：Hans Publishers
摘要：为了能更加直观地了解到国内大数据有关的职业对学历和工作经验的具体要求以及不同性质企业地区分布等情况，采用Python的数据分析和处理功能，通过Python爬虫技术爬取前程无忧网大量职位信息。按照删除有空值的信息、与大数据无关的职业、信息错位的数据清洗方法，对数据进行预处理，然后将清洗后的数据存入数据库，再利用Pyecharts对数据进行可视化分析，用Flask作为Web框架开发Web应用程序，将可视化的数据展示在网页，提高了用户查询信息的速度，方便求职者找到适合且满意的职位 [1]。.
关键词：Python爬虫 ;职位信息 ;数据清洗 ;可视化 ;Flask ;Python Crawler ;Position Information ;Data Cleaning ;Visualization ;Flask