某小说论坛网爬虫演示

如果带着一定的目的去做事，尤其这目的还特别有意思的话，做事效率都会高很多。笔者能说学习爬虫的初衷是是为了更愉快地看小说吗？

长佩是一个笔者特别喜欢逛的小说论坛，但时间久了发现有一些不太方便的地方，比如从目录页跳转到对应的正文后，并不会保留原来的目录页，如果后续看正文看到了20页，想回到刚刚的目录位置，要不得一直返回，返回20次，要不就凭记忆从主页进去重新来一次。再比如所有的文章在目录是动态排列的，在阅读的过程中很难做到不重不漏，现在读的一篇，很可能后面又会出现，而没有读过的但马上要读的，可能又排到前面去了。此外，不能保存阅读进度，收藏功能也很坑爹啊。

为了更好的阅读体验，笔者决定，把名称、简介以及链接一同爬下来，展示到一个sheet里面，想看哪篇点链接就好了，在sheet里标识收藏和进度岂不美哉。

下面以原创文窟完结的前50页为例，进行爬虫演示。

import requests
from bs4 import BeautifulSoup
import time
import random
im