weixin_41334453的博客

原创 Python面试常见问题

爬虫面试常见问题一.项目问题：你写爬虫的时候都遇到过什么反爬虫措施，你是怎样解决的用的什么框架。为什么选择这个框架二.框架问题：scrapy的基本结构（五个部分都是什么，请求发出去的整个流程）scrapy的去重原理（指纹去重到底是什么原理）scrapy中间件有几种类，你用过哪些中间件scrapy中间件在哪里起的作业（面向切片编程）...