正方教务系统课表成绩爬虫
The helper of ZhengFang System 欢迎fork/star
注意,该项目针对正方教务系统编写,不保证可用于当前你学校的教务系统。
1.项目定义
这个项目实现了正方教务系统的一套API: 包括微信登录,教务系统模拟登录,个人信息查询,课表获取,成绩查询等。 随着API的不断完善于扩充,可以很方便的作为后台服务。 比如教务系统手机客户端,桌面客户端,也可以作为某些特定应用需要学生课表,信息的后台。
自动完成评教任务 期末新的成绩公布,邮件通知 分学期,分学年绩点计算 公选课抢课功能2.项目结构
ZhengFang.db 数据库 model.py 模型层,通过ORM与数据库相连 spider.py 业务层,网页爬虫 parseHtml.py 业务层,网页解析工具3.如何使用
4.项目功能
4.1模拟登陆
登陆有两种方式
默认登陆:需要处理验证码。将验证码下载到本地。code.jpg。人工识别验证码后,手动输入验证码。实现登陆。
绕过验证码登陆:由于正方教务系统的漏洞在若存在default5.asp页面,可以不用验证码直接登陆。可以从default3,default4,都试一试。
4.2个人信息获取
通过教务系统个人信息页面,抓取,个人信息(真的有很多信息!)并持久化保存到数据库中。
4.3课表获取
通过抓取的个人信息读到学生入学的年份,在结合当前时间,就可以知道能够抓取到哪些学期的课表。
例如学生2014年入学,当前是2016年8月,说明至少可以抓取到:
2014-2015年度 第 1 学期
2014-2015年度 第 2 学期
2015-2016年度 第 1 学期
2015-2016年度 第 2 学期
这4个学期的课表,当然由于现在是2016年8月,可能可以抓取到2016-2017年度第 1 学期课表,可以试着抓取。
将抓取到的课表持久化到数据库中。
4.4成绩查询
通过教务系统成绩查询页面中的“历年成绩”抓取,课程成绩,并持久化到数据库中
4.5分学期分学年绩点计算
根据抓取下来的成绩,通过(总的(学分*绩点)/总的学分)分别计算各个学期的绩点与各个学年的绩点
版权声明:
1、该文章(资料)来源于互联网公开信息,我方只是对该内容做点评,所分享的下载地址为原作者公开地址。2、网站不提供资料下载,如需下载请到原作者页面进行下载。
3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考学习用!
4、如文档内容存在违规,或者侵犯商业秘密、侵犯著作权等,请点击“违规举报”。