爬虫工作原理:爬取数据,解析数据 提取数据 存储数据
百度这家公司会源源不断地把千千万万个网站爬取下来,存储在自己的服务器上
我们可以把服务器理解为一个超级电脑,它可以计算和存储大量数据,并且在互联网中互相传输数据。浏览器会把服务器返回来的HTML源代码翻译为我们能看懂的样子,之后我们才能在网页上做各种操作
requests.get()发送了请求,然后得到了服务器的响应。服务器返回的结果是个Response对象,现在存储到了我们定义的变量res中
HTML标签可以通过设置【属性】来为HTML元素描述更多的信息
在HTML中,链接一般都由标签定义,href属性用于规定指向页面的URL