爬虫爬出来的数据不全_python爬虫小试

先说点儿没用的，我之前有好几篇文章都是以一张美景开头，包括这一篇，这些照片都是我随时随地用自己的锤子坚果pro拍的照片，而且基本都没有编辑过，自认为还挺好看的，所以就拿出来晒晒，也算是我自己的摄影作品展。 最近在用业余时间学习使用遥感数据处理软件ENVI，他们官方有一个新浪博客：

ENVI-IDL技术殿堂的博客，里面有将近一千多篇文章，而且大部分都是干货。但唯一有个缺点就是新浪微博网页上不方便搜索， 虽然每篇文章都有标题、标签和分类，但是在它自己的搜索栏里就是啥也搜不出来，于是我就想起来用我当初开始学python的目的了，那就是网页爬虫，说来也惭愧，当时在网上买了一些视频课程，只是看了一遍，却从来没有实际操作过。于是周末就把之前的视频课程翻出来挑重点看了一遍，着手开始爬虫。

一、目标 先定一下目标：我要把那一千多篇文章的标题、分类、标签、网址和发布时间从网页中提取出来，生成一张excel表格，以便搜索查询。 二、网页分析 仔细看了下ENVI的官方新浪博客，还是挺规矩的，点进去“全部博文”页面，就可以看到文章列表