SCUTFindOverachievers

华南理工大学找到卷王 —— 基于 Python 的综测系统数据爬虫

如果您觉得本项目有用，请给这个项目一个 Star

需求背景

经过了一年时间的相处，想不想知道谁是你们班最卷的卷王？

在每年的综测期间，SCUT 的学生信息管理系统会开放本学年同班级内所有人的成绩。

但逐一查看成绩显然是一个费时费力的工作，因此就有了这个自动化脚本。

该脚本可以自动读取全班的成绩，汇总后排序并生成 Excel 表格。

免责声明

1. 如果你成功运行了该软件，即代表你拥有本班的访问权限；
2. 本软件获得的内容都是班级内公开的数据，不会越权读取学校系统数据；
3. 请尊重每一位通过自己努力合法提升成绩的同学，也请尊重成绩暂时落后的同学；
4. 综测即将结束时全班的加权成绩都会被公示出来，该软件只是提前做了这件事，晚知道不如早知道。

配置方法

需要准备好 Python 环境，并且能够正常使用 python 和 pip 命令。

获取源码

git clone https://github.com/1067088037/SCUTFindOverachievers.git

或直接下载源码Zip

安装依赖

pip install urllib3 # 用于处理HTTP请求和响应
pip install lxml # 用于解析HTML数据

使用方法

建议配合 Google Chrome 浏览器完成操作。

登录官网

打开 http://xsgl.7i5q.cas.scut.edu.cn/sms2/homepage.jsp

使用统一认证登录，等待网页加载完成。

获取 Cookies

按下键盘上的 F12 进入调试器，将上方的标题栏切换到“网络”

在左侧目录找到“智育测评”，并点击打开。

可以看到调试器的内容发生了变化，找到名称为“intellectual_main.jsp”的项，选中打开。

复制请求标头中的Cookies，不包括开头的“Cookies：”，从“JSEESIONID”开始复制。

导入 Cookies

使用记事本或其它文本编辑软件打开源代码中的 config.py，将刚才复制的内容粘贴到 cookies 的一对单引号内。

运行软件

python .\main.py

看到“连接成功，请稍后...”的提示文字后说明软件正常，等待数秒钟即可。

若出现“连接失败”，请检查 Cookies 是否正确复制或是否过期、网络是否连接。

数据处理

运行结果会保存成 CSV 文件，路径会显示在命令行，可以直接使用 Excel 打开。

也可以将显示出来的数据复制到 Excel 中任意单元格。

配置文件

# 学生信息管理系统 Cookies
cookies = ''
# 统计学年
classYearId = 16
# 补修课程
offsetClass = []
# 选修课个数限制
optionalCountLimit = 3
# 选修课学分限制
optionalCreditLimit = 8

cookies

具体使用方法参考上述教程

classYearId

2020-2021学年填 15

2021-2022学年填 16

offsetClass

转专业学生补修课列表

参考格式如下

offsetClass = ['高级语言程序设计(C++)(上)', '工科数学分析(二)', '高级语言程序设计(C++)(下)']

optionalCountLimit

超出数量限制的选修课不计入成绩

optionalCreditLimit

超出学分限制的选修课不计入成绩；

若计入第 N 门时学分达到该限制，则第 N+1 门不计入；

若计入第 N 门未超标，但第 N+1 门超标，则对加权分 ÷ 学分 × 该限制。

学院适配

由于不同学院的规定略有不同，因此需要各学院的同学进行单独适配。

适配者可以 Fork 本仓库后针对本学院的情况修改源码，可以 Pull Request 合并进主仓库。