myJobCrawler是获取北邮人以及水木清华论坛招聘信息的爬虫
Crawler_Job使用Python编写,Python版本号为2.7
1、采用Python的requests库抓取数据。 2、北邮人论坛以及水木论坛都采用一套框架,因此抓取方式可服用; 3、抓取到的数据使用beautifulsoup进行 4、抓取到的数据使用redis存储,存储键值使用来源+抓取的码 5、展示采用webpy+bootstrap的形式进行展现。 6、可以设置感兴趣的关键字进行过滤显示。
##########################