爬虫入门个人小项目笔记：利用Python爬虫获取UTC网页实习历史信息

项目综述

Université de Technologie de Compiègne(UTC) 要求学生在特定的学期进行实习， 并且在它的网站上提供了不少历史实习的sujet（公司名称、实习介绍、需求的技术等）供学生参考。
本项目目标是获取UTC网站上提供的历史实习信息并导出成为一个更加直观的数据结构。并完成可登陆并选择时间、专业等项的简单操作。

UTC实习历史网站： https://demeter.utc.fr/portal/pls/portal30/STAGES.HISTORIQUE_STAGES_DYN.show

UTC登录界面： https://cas.utc.fr/cas/login

所用工具

使用Pycharm作为IDE.
所用到的库有requests, lxml, BeautifulSoup, re, time, pandas, os.
用个人学生账号登陆进行信息搜寻，用谷歌浏览器进行网页结构分析.

工作流程

(一)实现网站登录