追求自由的孩纸

原创 tornado服务器进行爬虫测试

很多时候，我们写了爬虫程序，却不知道目标服务器后台具体是什么样子的，有时我们也不清楚我们的爬虫是否成功挂载了代理IP，所以可以用简单的tornado服务器来进行一下自我攻防演练。 本tornado服务器小程序在爬虫测试中的作用 能够模拟真实的我们要爬取的服务器后台 检测并查看爬虫的host主机地址 检测并查看爬虫的header头部 检测我们的爬虫代理IP是否已经挂载成功 # 建立一个...