全文总字数：2262字

1. 研究目的与意义及国内外研究现状

根据教育部发布的最新消息，2018年高校毕业生人数达到820万超越2017年的795万，高校毕业人数创历史最高，又是一个令人担忧的就业季。因此，作为一个毕业生，我希望能够运用自己所学为面临就业困难的大学生提供自己的帮助。

我们都知道，许多人无法找到工作都是因为他们缺少相关的职位信息，从而没有做好相关的准备招致失败。而网络爬虫，一种按照一定的规则，自动抓取万维网数据和信息的程序或者脚本，则可解决此问题。根据此技术我们可以批量获取网上分散的，非结构化的信息，然后统合起来为毕业生提供可参考的、直观的数据分析结果。

所以，本次设计意在运用爬虫技术采集网上的职位信息，并基于此设计一个招聘信息分析平台，使得毕业生能够使用平台信息结合实际，做好准备，提高应聘成功率。

2. 研究的基本内容

1）python语言，python第三方模块以及其他编程语言的使用和适用场景。

2）对相关数据进行数据采集、数据清洗、数据可视化分析等操作。

3）django框架的运用，包括框架使用，流程分析，模块设计。

3. 实施方案、进度安排及预期效果

实行方案：

程序主要在ubuntu平台使用pycharmide完成开发。

主要流程是：先使用python语言以及爬虫相关的第三方库requests等对目标网页进行数据的采集，然后经过数据清洗，数据整合等操作放入数据库db中。接着使用django框架进行网站后台开发，连接数据库db，并根据django框架的mtv模式，辅以前端框架将数据分析结果以图表的形式在网页端进行可视化显示。

4. 参考文献

[1]方鹏. 基于django的海量媒体数据分析平台的设计与实现[d].广西大学,2017.

[2]李远龙. 基于scrapy框架招聘信息检索系统的设计与实现[d].西安电子科技大学,2017.

[3]韩贝,马明栋,王得玉.基于scrapy框架的爬虫和反爬虫研究[j/ol].计算机技术与发展,2019(02):1-5[2019-01-10].