最近老是听说python的爬虫,而自己又喜欢小说,自然也就有了一个做出这样一个爬小说程序的想法。
也自学了一段时间的python,自认为一些基础的东西已经了解了。(从大学开始学了快4年的.net,基础还是杠杠的,事实证明熟悉了一门语言,在学其他的语言,大都差不了大多)
在学python时,发现是python先导入一个可以与网络资源交互的包(和c#中的类库差不多),然后想着c#是不是也有着类似的功能,上网搜了一下,果然是有的 WebClient,也写了一篇文章,可以去看看怎么用的(不太了解底层,底层还是去看大神的吧,这里只是一些简单用的方法。)
程序介绍:
在这个程序中我设定了最大是6个线程去下载小说文章,会自动根据章节数去判断启用多少线程。