爬虫代码流程

要完成爬取网页信息这个程序，首先我先学习了这个一些关于python的一些基本知识，爬虫程序开始，我先下载了爬虫程序需要的几个库，然后第一步写获取网站信息的函数，在这个函数中先伪装成一台计算机访问网站，再用urllib这个库获取网页的信息内容保存到一个变量当中，再用bs4库中的Beautifulsoup来解释我们获取的信息，再用正则提取提取到我们想要的电影名，链接，评分等提取出来提取出来之后建立一个数据库将我们提取到需要的信息放进库里面保存起来。